La comunidad de Apache liberó el 8 de julio Apache Polaris 1.6.0, una nueva versión del catálogo open source para tablas Apache Iceberg. La votación de lanzamiento salió adelante con la verificación de seis committers, en una cadencia de entregas regular que consolida la madurez del proyecto tras su graduación a proyecto de primer nivel de la fundación en 2025.
Polaris implementa el REST Catalog de Iceberg, la interfaz estándar que permite a distintos motores de consulta —Spark, Flink, Trino, Snowflake, Dremio y otros— descubrir, leer y escribir las mismas tablas de un data lakehouse sin quedar atados a un único proveedor. Es la pieza de gobierno que faltaba para que la promesa del formato abierto Iceberg —»almacenar una vez, consultar desde cualquier motor»— se sostenga también en la capa de metadatos, credenciales y control de acceso, y no solo en el formato de los ficheros.
El lanzamiento se produce en una semana intensa para el ecosistema de estándares abiertos del lakehouse. La propia comunidad de Polaris canceló una votación sobre su API de modelo semántico para alinearse con Apache Ossie, un proyecto de semántica recién incubado, mientras Apache Parquet abría una votación para adoptar versionado formal de sus releases con cambios que rompen compatibilidad. Son movimientos de gobernanza más que de producto, pero marcan la dirección: la interoperabilidad del lakehouse se está negociando en el terreno de los estándares comunes.
Para un arquitecto de datos, la relevancia de Polaris está en la batalla por el catálogo, uno de los focos de tensión del sector. Frente a los catálogos propietarios de cada plataforma —con Unity Catalog de Databricks como referencia—, Polaris representa la opción neutral y gobernada por la fundación Apache. Elegir un catálogo abierto reduce el riesgo de lock-in en la capa que decide quién puede acceder a qué datos, precisamente la más delicada de una arquitectura de datos.
La cautela es la propia de todo estándar en construcción: la compatibilidad «sobre el papel» entre motores no siempre se traduce en portabilidad real, y conviene validar en pruebas el comportamiento concreto de cada integración. Aun así, para organizaciones que estén diseñando su lakehouse sobre Iceberg, seguir de cerca la evolución de Polaris y de los catálogos abiertos es una decisión estratégica, no un detalle de implementación.
Más en Dataprix: Análisis de gobernanza y catálogos de datos.
Fuente: Apache Polaris.