杏彩平台手机网页版

腾讯云(李德):腾讯云TCHouse-D云上实时湖仓构建和进化

更新时间  2025-04-01 来源:杏彩平台手机网页版

  今日共享的是:腾讯云(李德):腾讯云TCHouse-D云上实时湖仓构建和进化

  《腾讯云TCHouse - D云上实时湖仓构建和进化》由李德在Doris Summit Asia 2024上共享,首要环绕腾讯云TCHouse - D打开,包括选型考虑、产品介绍、后续规划及社区共建方案等内容。

  1. 选型考虑:云数据仓库面对杂乱查询、混合负载下的功用,实时增量处理,高并发、高可用等许多应战。腾讯云根据大数据和混合负载场景的极致功用需求,归纳考量后挑选Doris作为实时数仓。Doris具有开源敞开、社区活泼、用户基数大、功用优异、功用丰厚、生态兼容等优势,能满意多维剖析、高并发等多种场景需求。

  2. 产品介绍:TCHouse - D定位为云原生、全保管、一站式的实时数仓及湖仓一致引擎 。根据Apache Doris内核构建,与云上大数据生态系统交融,供给丰厚集群管控才能和完善巡检告警系统。该产品具有简略易用(开箱即用、规范SQL、兼容MySQL协议)、极简运维(水平扩展、数据重散布)、安全可靠(全保管、SLA保证)、生态兼容(联邦多种产品)等特性。一起,TCHouse - D还具有完善的全保管服务和企业级特性,经过与DataInlong、DLC等联动,完结高效数据同步、湖仓一体服务,提高数据时效性,为客户供给优质的数据剖析体会。

  3. 后续规划:在产品后续开展上,TCHouse - D将从多个方向推进。在云上生态方面,完结数据集成Zero ETL ,加强与Wedata集成;在弹性及Serverless范畴,进行资源分时、规矩弹性,存储/核算资源按需计费;在AI交融层面,引进智能问答、智能巡检和智能调优等功用;此外,还将继续对3.0版别迭代优化,推进极速湖仓演进。

  4. 社区共建方案:腾讯云TCHouse - D团队热心参加社区共建。团队累计提交PR 1000 + ,2024年度到11月底已提交400 + 。在社区贡献上,完结Ranger集成适配、开发支撑Pamion等,支撑数据脱敏、冷数据备份康复等功用。TCHouse - D内核与社区Apache Doris坚持100%兼容,经过参加社区活动、需求反应、文档共建及开发共建等方法,继续回馈社区,助力社区开展。