今天共享的是:网易游戏(胡彪):易游戏基于Apache Doris湖仓交融设立
施展悉数:22页
本文围绕网易游戏基于Apache Doris的湖仓交融设立张开,先容了架构演进、湖仓交融设立、行使场景及当年规画等方面本色。
1. 架构演进:网易游戏本事中心效力研发部重心体恤数据、AI和安全。引入Apache Doris前,组件架构包含多种数据源、数据集成器具及查询引擎。引入后构建及时数仓,后续Doris架构连续升级,从守旧外部表注册,到定位为协调数据分析网关,加快异构数据源的查询和写入,最终竣事湖仓一体。
2. 湖仓交融设立:网易游戏通过协调查询引擎SmartSQL推动湖仓交融。它具备多引擎语法兼容、交融查询优化、协调权限管控与行列加密、复杂场景协调接入等特色。在湖上建仓和仓湖交融两种有联想中,前者相宜离线分析,业务数据入湖转变小但蔓延较高;后者相宜及时刻析,数据入湖快,不外现时版块对大数据量ETL存在挑战。此外,Doris on Yarn竣事弹性狡计节点,借助Apache Slider简化部署进程,能快速弹性伸缩。同期,Doris Workload Group竣事了兼容Trino的参数死字,在语法兼容、存储防碍和物化视图料理等方面也有进展。
张开剩余80%3. 行使场景:Apache Doris在网易游戏里面行使粗拙,彩娱乐app在大宽表、AdHoc分析、用户行径分析等多个场景发扬要紧作用,举例替代CK和Trino,用于网站点击行径分析、游戏交游网站商品缓存等业务。在AI层面,Doris算作元数据存储底座,为功课优化、会诊等智能体提供守旧。
4. 当年规画:网易游戏当年将陆续鼓吹基于Apache Doris的数据湖处理有联想在更多业务部门和场景的奉行,竣事智能物化以加快湖查询,并跟进3.0版块,同期加强里面Doris Manager设立,为新版块脾气提供料理运维守旧,助力用户降本增效。
以下为施展节选本色
在这个快节奏的时代,我们总是在寻找那些既能满足味蕾又能兼顾健康的美食。今天,我要分享的这道茄汁鸡胸肉,正是这样一道简单却不失风味的佳肴。它不仅制作过程快捷,而且成品鲜嫩可口,完全不会有那种常见的干柴感,是一道非常适合忙碌生活中的看家菜。
发布于:广东省