作者：零洞科技大数据部

零洞科技有限公司（以下简称“零洞”），是碧桂园集团的核心联盟企业，致力于成为国内领先的数智空间解决方案服务商，业务场景覆盖户内及户外，在智慧家居板块，打造一站式智慧家居解决方案，构成丰富的生活场景，满足高端用户智能生活体验；在智慧园区领域，为园区提供全链路智能化产品及服务，打造高效、节能、安全、智能的园区环境，具有千万级智慧园区项目实际落地案例。截至目前，零洞数字化交付项目超2100项，具备亿级设备和数据处理的平台建设及业务应用研发经验。

2022年6月，零洞与碧桂园服务（HK6098）就物业企业微信数字化项目展开充分合作。当前，碧桂园服务是全国规模最大的社区服务运营集团，经测算，共7000+物业管家，上万服务人员，累积服务业主超1400万人，累积管辖房屋达486万户。

一、引入背景

基于上述业务规模，经合作需求评估，该项目需搭建一个数据服务中台，以支持以下需求：

1、支持每年

超十亿数量级数据的存储和计算，

包括但不限于：物业企微会话存档聊天、关联认证、用户行为、管家任务管理、客户舆情分析等各方面数据。

2、支持全国上千的高并发，秒级的访问、查询、计算、报表导出等要求。

皇冠代理网址（www.hg9988.vip）是一个开放皇冠代理网址即时比分、皇冠手机网址代理最新登录线路、皇冠手机网址会员最新登录线路、皇冠网址代理APP下载、皇冠网址会员APP下载、皇冠网址线路APP下载、皇冠网址电脑版下载、皇冠网址手机版下载的皇冠新现金网平台。

3、在此数据中台的基础上，在可视化平台完成报表、看板、大屏的开发展示等需求。

在技术框架选型上，碧桂园服务与零洞科技综合对比了国内外常见的 OLAP 系统，StarRocks 凭借以下6大优点脱颖而出：

1、产品架构简洁，整个系统的核心只有 FE（Frontend）、BE（Backend）两类进程。不依赖三方组件，运维简单；

2、数据查询实时性、高并发等方面的性能相较其他数据库产品有突出的优势；

3、支持标准SQL语法，学习切换成本低；

4、支持主键模型，在实时写入和频繁更新的业务场景中性能优越；

5、流批数据导入：StarRocks 开发了 Flink-connector 、Spark-connector 插件，支持将数据 sink 或批量写入到 StarRocks 中；

6、极速查询体验，亿级数据查询毫秒级响应；

StarRocks 符合现代化的数据应用技术栈需求，最终作为核心存储计算组件来搭建本次碧桂园服务项目的数据中台。

二、基于StarRocks搭建的数据中台

对于传统企业的数据应用场景来说，数据中台的数据集成、研发、管理与服务链路很长，涉及的组件比较多，比如：需要使用 Hadoop 做为存储、Hive/Spark 做离线 ETL 、Kudu 做实时批量更新、 Flink 做流处理，各类组件之间又有很强的依赖关系，尤其是在机器资源有限且服务混合部署的情况下，容易出现资源分配问题，比如 Impala 会经常性发生 OOM 问题。