Skip to main content

Operación - DS Canal SIDEFF

Objetivo

Documentar la información operativa del proceso DS Canal SIDEFF, incluyendo consideraciones de ejecución, trazabilidad, Runbook L1, acciones básicas y escalamiento para la construcción y/o actualización de la dimensión cat_master_alpura.sch_bronze_layer.snw_dim_canal_sideff.

Alcance

Dentro del alcance

  • Consideraciones operativas del proceso NB_Silver_DS_Canal_SIDEFF.
  • Validación de parámetros antes de ejecutar.
  • Validación de permisos de lectura y escritura.
  • Validación de existencia del catálogo y esquema destino.
  • Gobierno y trazabilidad identificados.
  • Runbook L1 del proceso.
  • Detección de fallos, acciones básicas y escalamiento.

Fuera del alcance

  • Diseño funcional del proceso.
  • Arquitectura técnica detallada.
  • Fuentes de datos detalladas.
  • Reglas de negocio.
  • Flujo paso a paso del pipeline.
  • Validaciones de negocio no identificadas.
  • Tablas migradas consumidas, ya que no se identifican en el DBC.

Contenido principal

Descripción general

Este documento concentra la información operativa del proceso DS Canal SIDEFF, documentado como proceso de dimensión para la construcción y/o actualización de cat_master_alpura.sch_bronze_layer.snw_dim_canal_sideff.

La operación del proceso requiere validar los widgets de ejecución, la disponibilidad de la fuente cat_master_alpura.sch_bronze_layer.snw_dim_canales, los permisos sobre fuentes y outputs, así como la existencia del catálogo y esquema destino antes de ejecutar la persistencia mediante saveAsTable.

Consideraciones Operativas

  • Validar valores de widgets antes de ejecutar:
    • w_StartDate
    • w_EndDate
    • w_catalog
    • w_schema origin
    • w_schema destiny
  • Validar permisos de escritura antes de ejecutar saveAsTable.
  • Validar existencia del catálogo y esquema destino antes de ejecutar saveAsTable.
  • Validar permisos sobre fuentes y outputs.
  • No se identifica workflow asociado en el DBC.
  • No se identifica frecuencia de ejecución en el DBC.

Gobierno y Trazabilidad

  • La trazabilidad se basa en el DBC exportado.
  • Se debe validar owner técnico.
  • Se deben validar permisos sobre fuentes y outputs.
  • No se debe documentar ni exponer lógica no presente en el DBC.

Runboook L1

CampoValor
Nombre del procesoNB_Silver_DS_Canal_SIDEFF
Qué haceConstruir y/o actualizar la dimensión DS Canal (SIDEFF) en Databricks, tomando como base únicamente la lógica definida en el DBC y persistiendo el resultado en cat_master_alpura.sch_bronze_layer.snw_dim_canal_sideff.
Workflow asociadoNo especificado en el DBC.
FrecuenciaNo especificada en el DBC.
Cómo ejecutarlo manualEjecutar el notebook manualmente en Databricks, capturando widgets cuando aplique y validando que las fuentes estén disponibles.
Cómo detectar falloRevisar estado del job/notebook, errores de SQL/PySpark, permisos de lectura/escritura, conteo de registros y discrepancias en llaves.
Acciones básicasValidar parámetros, disponibilidad de fuentes, permisos sobre catálogo/esquema, existencia de tablas destino y reintentar la ejecución controladamente.
EscalamientoEscalar a Data Engineering / Arquitectura de Datos si falla la lectura fuente, el join de homologación, la escritura Delta o la validación de negocio.

Soporte y Escalamiento

El Runbook L1 establece como un punto de escalamiento a Data Engineering y Arquitecto de Datos

EL escalamiento aplica si se presentan fallos en:

  • Lectura fuente.
  • Join de homologación.
  • Escritura Delta.
  • Validación de negocio.

Artefactos relacionados

ArtefactoDescripción
Diseño Funcional - DS_Canal_SIDEFFDescribe el objetivo funcional, alcance y descripción general del proceso
Diseño Técnico - DS_Canal_SIDEFFDocumenta arquitectura, modelo de datos, dependencias y consideraciones técnicas.
Fuentes - DS_Canal_SIDEFFDocumenta la fuente de datos utilizada por el proceso.
Pipelines - DS_Canal_SIDEFFDescribe la secuencia de ejecución del proceso.
Reglas de Negocio - DS_Canal_SIDEFFContiene las reglas identificadas para el procesamiento.
Tablas - DS_Canal_SIDEFFDocumenta dimensión principal, objetos relacionados y llaves identificadas.
Validaciones - DS_Canal_SIDEFFDescribe revisiones operativas y criterios de validación identificados.

Próximos pasos

  • Confirmar workflow asociado al proceso.
  • Confirmar frecuencia de ejecución.
  • Validar owner técnico.
  • Validar permisos sobre cat_master_alpura.sch_bronze_layer.snw_dim_canales.
  • Validar permisos de escritura sobre cat_master_alpura.sch_bronze_layer.snw_dim_canal_sideff.
  • Confirmar si existen validaciones de negocio adicionales.