Hologres – 阿里云一体化实时湖仓平台

Hologres 是阿里云自研的一体化实时湖仓平台,兼容 PostgreSQL 协议,整合 OLAP 查询、即席分析、在线服务、向量检索、AI 推理多项能力。平台依托 Dynamic Table 动态表实现增量计算,一份数据同时支撑数仓分层加工与多类业务查询,可替换 ClickHouse、Presto、HBase 等多套组件。产品深度打通 Flink、MaxCompute、DataWorks,支持 PB 级海量数据秒级响应,4.0 版本完成 Data+AI 能力融合,面向企业构建离在线一体化完整数据链路。

Hologres - 阿里云一体化实时湖仓平台

Hologres特点

采用湖仓一体架构,一份存储同时承载实时与离线业务,简化大数据中间件堆叠。

支持 Serverless 按 Query 计费模式,资源随业务波峰波谷弹性伸缩,冷热数据自动分层存储。

TPC‑H 30000GB 测试取得行业头部成绩,实现每秒十亿级写入更新,PB 级数据查询秒级返回。

多计算组隔离机制,不同业务负载分开运行,故障自动路由恢复,支持 3AZ 同城容灾部署。

原生兼容湖仓开放格式,对接 Paimon、Iceberg、Hudi 等,直接读取湖上数据做分析计算。

4.0 版本内置 AI Function,通过标准 SQL 调用大模型,完成向量化、RAG 检索、Agent 数据查询。

完整企业安全体系,包含权限管控、传输存储加密、列级脱敏、访问白名单、操作审计。

Hologres技术原理

Hologres 基于 MPP 分布式架构,整体分为存储层、计算层、网关接入层三大部分。存储层采用自研列存引擎,提供三副本持久化,支持冷热分层;计算层划分多个独立 Virtual Warehouse 计算组,不同业务任务运行在隔离计算资源上。

Dynamic Table 动态表作为核心加工单元,区分增量刷新和全量刷新模式,只处理新增变更数据,完成数仓 ODS‑DWD‑DWS‑ADS 分层链路。网关层统一接收 SQL 请求,做鉴权路由,分发至对应计算组执行。

对外兼容 PostgreSQL 协议,上层业务可直接使用 PSQL、JDBC 各类标准客户端。湖仓外部表对接对象存储与数据湖元数据,无需迁移即可直接读取湖上文件。AI 能力将向量化、大模型推理封装为 SQL 函数,计算节点完成向量检索与混合查询。

Hologres项目地址

  • 官网:https://cn.aliyun.com/product/hologres

Hologres功能

OLAP 多维分析

海量结构化数据多维聚合、下钻统计,支撑报表、实时大屏业务。

高并发在线点查

行存模式实现主键毫秒级点查询,承接标签查询、订单明细、维度表服务。

Dynamic Table 增量数仓加工

声明式 SQL 完成数仓分层,增量模式只处理新增数据,自动维护分层结果。

湖仓外部表访问

直接读取 Paimon、Iceberg、Hudi 等湖上数据,不用导入拷贝即可执行分析。

向量与多模检索

文本、图片向量化存储,向量检索搭配全文检索,搭建 RAG 知识库检索。

SQL 调用 AI 能力

AI Function 在 SQL 中直接调用大模型,生成向量、做内容解析,对接 MCP 构建数据分析 Agent。

企业安全管控

RAM 鉴权、存储加密、列脱敏、IP 白名单、操作日志审计,适配金融合规要求。

Hologres应用场景

互联网实时业务分析

用户行为埋点实时计算,A/B 实验指标实时统计,推荐策略快速迭代,替换 ClickHouse。

游戏行业统一数据平台

留存、付费、画像分析,整合多套大数据组件,降低运维组件数量。

广告营销数仓

百亿千亿级用户行为数据,人群圈选、标签复合运算,秒级多维分析。

出行与零售业务

实时订单、客流指标统计,离在线数据打通,简化数据流转链路。

企业 BI 自助分析

对接主流 BI 工具,业务人员做即席查询,生成业务报表。

AI 知识库与 RAG 项目

存储业务文档向量,混合向量‑全文检索,支撑企业知识库、智能问答。

Hologres使用教程

登录阿里云控制台,搜索 Hologres 产品入口,完成实例创建,选择通用实例或者 Serverless 实例类型。

进入 HoloWeb 开发页面,创建 Database 与 Schema,设置账号权限,配置 IP 白名单。

创建业务数据表,区分列存用于 OLAP 分析,行存用于高并发点查,合理设置分布键、聚类键。

编写 CREATE DYNAMIC TABLE 语句,选择增量或者全量刷新模式,搭建 ODS‑DWD‑DWS 数仓分层。

对接上游数据源,Flink 实时写入消息流,或者通过外部表读取 MaxCompute、Paimon 湖上数据。

执行 SQL 完成查询统计,对接 BI 工具,JDBC、PSQL 客户端也可以远程连接实例开发。

开启 AI 相关能力,使用 AI Function 完成文本向量化,构建向量索引,测试 RAG 检索查询。

监控页面查看计算组资源消耗,针对慢 SQL 做调优,配置冷热分层降低存储开销。

完成业务验证后,配置任务调度,配合 DataWorks 执行定时刷新,上线生产业务。

Hologres同类产品对比

表格

对比项HologresByteHouse
研发主体阿里云自研字节跳动自研
产品定位云原生一体化实时湖仓引擎,兼容 PostgreSQL,OLAP + 在线服务 + 向量检索一体云原生实时数仓,ClickHouse 增强版,面向海量实时数据分析
核心特色计算存储分离,深度绑定 Flink/MaxCompute,原生向量检索与 SQL AI 函数,支持点查 + 多维分析混合负载基于 ClickHouse 内核优化,高吞吐实时写入,查询性能强,兼容 ClickHouse 语法,生态工具完善
适用场景实时大屏、用户画像、AI 向量检索、离在线一体化湖仓建设实时日志分析、行为指标统计、大规模实时多维报表
© 版权声明
为这篇文章评分
10.0/ 10
2 人评价
点击⭐️进行评分

相关文章

暂无评论

none
暂无评论...