Snowflake anunció en su conferencia anual de usuarios, Snowflake Summit 2024, el lanzamiento de Polaris Catalog, una implementación de catálogo abierto y neutral para Apache Iceberg — el estándar abierto preferido para implementar lakehouses de datos, lagos de datos y otras arquitecturas modernas. Polaris Catalog será de código abierto en los próximos 90 días para proporcionar a las empresas y a toda la comunidad de Iceberg nuevos niveles de elección, flexibilidad y control sobre sus datos, con total seguridad empresarial e interoperabilidad de Apache Iceberg con Amazon Web Services (AWS), Confluent, Dremio, Google Cloud, Microsoft Azure, Salesforce y más.
Polaris Catalog introduce nuevos niveles de interoperabilidad para Apache Iceberg. Apache Iceberg, que emergió de la incubación para convertirse en un proyecto de nivel superior de la Apache Software Foundation en mayo de 2020, ha ganado popularidad rápidamente para convertirse en un formato de tabla de datos de código abierto líder. Con Polaris Catalog, los usuarios ahora obtienen un lugar centralizado único para que cualquier motor encuentre y acceda a las tablas Iceberg de una organización con total interoperabilidad abierta. Polaris Catalog se basa en el protocolo REST de código abierto de Iceberg, que proporciona un estándar abierto para que los usuarios accedan y recuperen datos de cualquier motor que admita la API REST de Iceberg, incluyendo Apache Flink, Apache Spark, Dremio, Python, Trino y más.
Las organizaciones pueden comenzar a ejecutar Polaris Catalog alojado en la nube de datos con IA de Snowflake en minutos (alojamiento en Snowflake disponible en vista previa pública pronto), o autoalojarlo en su propia infraestructura utilizando contenedores como Docker o Kubernetes. Dado que la implementación del backend de Polaris Catalog será de código abierto, las organizaciones pueden libremente cambiar la infraestructura de alojamiento mientras eliminan el bloqueo de proveedores.