Presentación de un mercado interno de datos con Atlan
La serie Pioneros de Metadatos Activos presenta a los clientes de Atlan que han completado recientemente una evaluación exhaustiva de la gestión de metadatos activos. ¡Compartir lo aprendido con el próximo líder de datos es el verdadero espíritu de la comunidad de Atlan! Por eso, están aquí para compartir la perspectiva adquirida sobre un mercado en evolución, su infraestructura de datos moderna, casos innovadores de uso de metadatos y más.
En esta entrega de la serie, conocemos a Cristina Pérez Martínez, ingeniera y arquitecta de datos, y a Ezequiel Barbero, director de inteligencia empresarial y de mercado de Telefónica Tech, quienes explican cómo una experiencia moderna de catalogación de datos y un seguimiento a nivel de columnas respaldarán una visión amplia de democratización de los datos.
Esta entrevista ha sido editada para mayor concisión y claridad.
¿Nos podría contar sobre usted, su experiencia y qué le atrajo a Data & Analytics?
Ezequiel Barbero:
Tengo una Maestría en Big Data y trabajo en Data & Analytics desde 2002. Comencé en Telefónica en Argentina en el equipo de BI Data, trabajando en ETLs basados en SQL. Luego trabajé en Ingeniería de Datos colaborando en Ciencia de Datos con el líder del equipo en Argentina.
En 2019, me trasladé a España para unirme al equipo de Data Science en Marketing Intelligence y en 2021 me uní a Telefónica Tech para liderar el equipo de BI.
Cristina Pérez Martínez:
Comencé en Telefónica en 2019 como desarrolladora Python y luego pasé a Telefónica Tech en 2021. Mi equipo se ha centrado principalmente en ser Ingenieros de Datos y Arquitectos de Datos para el equipo de BI.
¿Le importaría describir Telefónica y cómo su equipo de datos apoya a la organización?
Cristina:
Telefónica se compone de varias empresas diferentes, pero en general es una empresa de Telecomunicaciones. En Telefónica Tech, la unidad de negocio digital se enfoca en tecnologías digitales como AI & BD, conectividad e IoT, ciberseguridad, nube y blockchain.
Nuestro equipo se divide en dos partes, una centrada en arquitectura e ingeniería que obtiene datos sin procesar, los estandariza y transforma antes de cargarlos en Snowflake, nuestro Data Warehouse. La otra parte se enfoca en Análisis de Datos, utilizando Snowflake como base y codificando en SQL. A partir de ahí, desarrollan paneles en PowerBI.
Ezequiel:
En Telefónica Tech, hay un equipo trabajando en IoT y Big Data para aplicaciones externas, mientras que nuestro equipo se encarga de las aplicaciones internas para apoyar a la empresa. Nos ocupamos de la infraestructura, la transformación y, desde hace casi un año, del Gobierno de Datos.
¿Cómo es su infraestructura de datos?
Ezequiel:
Nuestra infraestructura se basa en Microsoft Azure y utilizamos Data Factory para la orquestación. Empleamos la herramienta ETL, el almacenamiento de blobs y el data lake de Databricks. Snowflake sirve como almacén de datos de Telefónica.
¿Por qué optar por una solución de Gestión Activa de Metadatos? ¿Qué faltaba?
Ezequiel:
Nuestra empresa cuenta con más de 6200 empleados, pero nuestro equipo es pequeño en comparación con toda la organización. Por lo tanto, mejorar la democratización de los datos es crucial, y esto no sería posible sin autoservicio y sin una adecuada Gobernanza de Datos.
¿Por qué Atlan era la opción adecuada? ¿Qué destacó durante su evaluación?
Ezequiel:
En primer lugar, estábamos buscando una solución SaaS basada en la nube que fuera sencilla de implementar y configurar.
Cristina:
Nuestro objetivo era tener un catálogo de datos fácilmente accesible para toda la empresa. También era crucial entender el linaje entre Snowflake y PowerBI. Nos centramos en comprender el impacto de modificar una fuente en nuestro almacén de datos, por lo que el seguimiento a nivel de columna garantiza visibilidad y rastreabilidad de extremo a extremo. Reconocimos la necesidad de una herramienta sólida para reforzar la seguridad de nuestra plataforma de datos, lo que nos permite asignar roles y permisos para asegurar que solo las personas autorizadas accedan a información específica, además de poder realizar auditorías, aspecto esencial para mantener la integridad y el cumplimiento en nuestras operaciones de datos.
¿Qué planea lograr con Atlan? ¿Tiene pensado algunos casos de uso y el valor que aportarán?
Cristina:
Uno de nuestros objetivos era desarrollar un mercado para nuestros datos, todo basado en los activos de Atlan, y estamos trabajando para lanzarlo a principios de este año. Aspiramos a enriquecer más metadatos en Atlan y Snowflake.
En el futuro, estamos entusiasmados con la posibilidad de utilizar Atlan AI. Nuestra meta es facilitar aún más el acceso a los datos para las personas, y poder dialogar con Atlan acerca de los datos facilitaría que las personas encuentren lo que necesitan.