Qlik 推出完全托管的 Apache Iceberg 湖仓解决方案,实现查询速度提升 5 倍和成本降低 50%
Qlik近日宣布推出全新的Qlik Open Lakehouse服务,这是一项完全托管的Apache Iceberg解决方案,直接集成到Qlik Talend Cloud平台中。Qlik Open Lakehouse旨在帮助企业解决数据架构扩展难题并降低成本,通过实时数据摄入、智能优化和多引擎互操作性等特性,为现代企业提供了一个突破传统数据仓库限制的新方案。 这款新服务的主要亮点包括: 实时企业级数据摄入:可以低延迟、高吞吐量地每秒钟从数百个源(如云应用、SaaS、SAP 和大型机)摄入数百万条记录,直接存储在Iceberg表中。 智能化全自动化优化:内置的智能Iceberg优化器自动处理压缩、聚类等任务,无需手动调优,即可实现查询性能提升2.5至5倍,存储成本降低50%。 开放设计,多引擎互操作性:支持使用多种Iceberg兼容引擎(如Snowflake、Amazon Athena、Apache Spark、Trino 和 SageMaker)访问数据,无需重新平台化或重处理,为企业提供了灵活的数据访问方式。 自主选择计算环境:在客户自己的AWS VPC中运行,允许用户自带计算资源(BYOC),从而更好地控制性能、安全性和成本。 端到端一站式平台:集成了数据摄入、转换、治理、数据质量管理和FinOps可见性等多项功能,无需不同系统之间的拼接和交接,简化了数据管理流程。 Qlik CEO Mike Capone表示:“现代数据架构不应再是在性能和成本之间做出权衡。Qlik Open Lakehouse让企业在不妥协的情况下,实现了实时扩展、全面的数据控制和工具选择的自由。”他强调,这一产品旨在满足大规模企业和AI及分析工作负载的需求,使企业在数据管理和利用上更具有竞争力。 随着AI工作负载的增加,企业需要更快地访问更广泛、更新鲜的数据集,开放标准如Apache Iceberg正逐渐成为新的数据基础。Qlik Open Lakehouse正是针对这一趋势而开发,能够帮助企业轻松构建和管理基于Iceberg的数据湖屋架构,而无需编写自定义代码或监控数据管道。此外,它还运行在客户的AWS环境中,确保了数据隐私、成本控制和完整的操作可视性。 业内人士Matt Aslett,ISG Software Research的分析与数据研究总监认为:“越来越多的企业开始采用湖屋架构来统一内部和云环境中的数据。Qlik Open Lakehouse凭借其对开放标准的支持,能够提供实时数据访问和多引擎互操作性,有助于企业充分发挥数据的价值,支持其在AI和分析领域的项目。” David Navarro,Toyota Motor Europe的数据领域架构师也表示:“像我们这样的大公司迫切需要在不同业务单元和合作伙伴之间实现互操作性,每个部门都有自己的技术堆栈和数据主权。Apache Iceberg有望成为厂商独立的数据湖屋之间的零复制数据共享的关键技术,而Qlik在这些复杂动态环境下提供性能和控制承诺,正是行业所需要的。” Qlik Open Lakehouse现已提供私有预览版本,并计划于2025年7月正式推出。有兴趣提前接入的团队可以在Qlik Connect (2024年5月14日至17日,佛罗里达州奥兰多)期间了解更多信息并申请早期访问。 Qlik是一家全球领先的提供商,专注于将复杂的數據景观转化为有价值的洞见,推动企业的战略决策。其服务涵盖40,000多家全球客户,提供高级、企业级的AI/ML、数据集成和分析解决方案。Qlik的技术和专业知识帮助企业在数据集成和治理方面取得了显著成果,使其在面对多样化的数据源时更加灵活和高效。
