Operación - DS Canal SIDEFF
Objetivo
Documentar la información operativa del proceso DS Canal SIDEFF, incluyendo consideraciones de ejecución, trazabilidad, Runbook L1, acciones básicas y escalamiento para la construcción y/o actualización de la dimensión cat_master_alpura.sch_bronze_layer.snw_dim_canal_sideff.
Alcance
Dentro del alcance
- Consideraciones operativas del proceso
NB_Silver_DS_Canal_SIDEFF. - Validación de parámetros antes de ejecutar.
- Validación de permisos de lectura y escritura.
- Validación de existencia del catálogo y esquema destino.
- Gobierno y trazabilidad identificados.
- Runbook L1 del proceso.
- Detección de fallos, acciones básicas y escalamiento.
Fuera del alcance
- Diseño funcional del proceso.
- Arquitectura técnica detallada.
- Fuentes de datos detalladas.
- Reglas de negocio.
- Flujo paso a paso del pipeline.
- Validaciones de negocio no identificadas.
- Tablas migradas consumidas, ya que no se identifican en el DBC.
Contenido principal
Descripción general
Este documento concentra la información operativa del proceso DS Canal SIDEFF, documentado como proceso de dimensión para la construcción y/o actualización de cat_master_alpura.sch_bronze_layer.snw_dim_canal_sideff.
La operación del proceso requiere validar los widgets de ejecución, la disponibilidad de la fuente cat_master_alpura.sch_bronze_layer.snw_dim_canales, los permisos sobre fuentes y outputs, así como la existencia del catálogo y esquema destino antes de ejecutar la persistencia mediante saveAsTable.
Consideraciones Operativas
- Validar valores de widgets antes de ejecutar:
w_StartDatew_EndDatew_catalogw_schema originw_schema destiny
- Validar permisos de escritura antes de ejecutar
saveAsTable. - Validar existencia del catálogo y esquema destino antes de ejecutar
saveAsTable. - Validar permisos sobre fuentes y outputs.
- No se identifica workflow asociado en el DBC.
- No se identifica frecuencia de ejecución en el DBC.
Gobierno y Trazabilidad
- La trazabilidad se basa en el DBC exportado.
- Se debe validar owner técnico.
- Se deben validar permisos sobre fuentes y outputs.
- No se debe documentar ni exponer lógica no presente en el DBC.
Runboook L1
| Campo | Valor |
|---|---|
| Nombre del proceso | NB_Silver_DS_Canal_SIDEFF |
| Qué hace | Construir y/o actualizar la dimensión DS Canal (SIDEFF) en Databricks, tomando como base únicamente la lógica definida en el DBC y persistiendo el resultado en cat_master_alpura.sch_bronze_layer.snw_dim_canal_sideff. |
| Workflow asociado | No especificado en el DBC. |
| Frecuencia | No especificada en el DBC. |
| Cómo ejecutarlo manual | Ejecutar el notebook manualmente en Databricks, capturando widgets cuando aplique y validando que las fuentes estén disponibles. |
| Cómo detectar fallo | Revisar estado del job/notebook, errores de SQL/PySpark, permisos de lectura/escritura, conteo de registros y discrepancias en llaves. |
| Acciones básicas | Validar parámetros, disponibilidad de fuentes, permisos sobre catálogo/esquema, existencia de tablas destino y reintentar la ejecución controladamente. |
| Escalamiento | Escalar a Data Engineering / Arquitectura de Datos si falla la lectura fuente, el join de homologación, la escritura Delta o la validación de negocio. |
Soporte y Escalamiento
El Runbook L1 establece como un punto de escalamiento a Data Engineering y Arquitecto de Datos
EL escalamiento aplica si se presentan fallos en:
- Lectura fuente.
- Join de homologación.
- Escritura Delta.
- Validación de negocio.
Artefactos relacionados
| Artefacto | Descripción |
|---|---|
| Diseño Funcional - DS_Canal_SIDEFF | Describe el objetivo funcional, alcance y descripción general del proceso |
| Diseño Técnico - DS_Canal_SIDEFF | Documenta arquitectura, modelo de datos, dependencias y consideraciones técnicas. |
| Fuentes - DS_Canal_SIDEFF | Documenta la fuente de datos utilizada por el proceso. |
| Pipelines - DS_Canal_SIDEFF | Describe la secuencia de ejecución del proceso. |
| Reglas de Negocio - DS_Canal_SIDEFF | Contiene las reglas identificadas para el procesamiento. |
| Tablas - DS_Canal_SIDEFF | Documenta dimensión principal, objetos relacionados y llaves identificadas. |
| Validaciones - DS_Canal_SIDEFF | Describe revisiones operativas y criterios de validación identificados. |
Próximos pasos
- Confirmar workflow asociado al proceso.
- Confirmar frecuencia de ejecución.
- Validar owner técnico.
- Validar permisos sobre
cat_master_alpura.sch_bronze_layer.snw_dim_canales. - Validar permisos de escritura sobre
cat_master_alpura.sch_bronze_layer.snw_dim_canal_sideff. - Confirmar si existen validaciones de negocio adicionales.