波司登集团基于阿里云SelectDB OLAP分析平台的优化升级

波司登集团基于阿里云 SelectDB OLAP 分析平台的优化升级尤纯 波司登集团 信息技术中心 架构师Doris Summit Asia 20244mmit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit AsD尤纯 波司登集团 信息技术中心 架构师分享嘉宾 - 波司登集团Doris Summit Asia 20244mmit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit AsD目录公司简介01业务背景02基于阿里云 SelectDB 的数仓升级方案03未来优化和展望04Doris Summit Asia 20244mmit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit AsD01波司登公司简介Doris Summit Asia 20244mmit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit AsD波司登，自1976年创立以来，专注羽绒服制造领域已经有 48 年，产品畅销全球 72 个国家。2021年，波司登的羽绒服销售规模达到全球领先，并且在2023年实现全年营收达 232.14亿，同比增长 38.4%。自创始以来，波司登一直秉持着“用户至上，开放创新”的价值观，在数据领域上也如此。波司登波司登介绍 - 全球领先的羽绒服畅销品牌Doris Summit Asia 20244mmit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit AsD02波司登业务背景Doris Summit Asia 20244mmit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit AsD在数字化构建之路上我们走了数年，在路途中也面临了诸多挑战。波司登作为一家强业务型公司，业务的主导能力较强，但现有的数字化工具难以满足我们的个性化需求。我们是一家羽绒服公司，而羽绒服销售旺季只有短暂的四个月。这段黄金期内实现高营收极为不易，因此业务部门在此期间提出的任何支持需求，我们都需要无条件的满足。这一现实让数字化建设之路更为困难，至今我们仍致力于数字化治理的深化。今年，我们毅然进行一个重大改革，决心逐步淘汰并替换旧有产品，努力向开源的组件靠拢，旨在提升效率的同时降低成本。波司登业务背景 - 勇于改革、敢于先行 波司登数字化转型三阶段2018年~2023年，正式全面构建自己的数仓，完成了整体架构变更以及层级建设转型2015年~2018年，从起步开始逐步建立以 SAP 框架为基础的经营分析系统起步2023年~未来，预计在未来3年，从老架构全面升级，完成新一代大数据平台和数仓升级建设长远Doris Summit Asia 20244mmit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit AsD波司登 - 转型期架构介绍组织数字化转型战略与切实业务需求相结合，发挥数据价值。数据中台发挥数据价值• 存储资源浪费,数据冗余度高• 运维复杂，管理成本高• 性能瓶颈，弹性能力差当前架构痛点• 支撑多样化的业务需求• 技术探索与创新• 提升灵活性和扩展性业务数据(PG)DataphinKafkaFlinkFlinkOLAPMaxComputeFineReport数据导出FineBI其他系统DorisStarrocksPostgreSQL其他Doris Summit Asia 20244mmit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit AsD波司登 - 转型期架构介绍统一OLAP• 存算分离，弹性伸缩，按需付费• 高可用，多计算集群，易于维护云原生• 性能优化，多负载场景性能全面提升• 成本效益，减少数据冗余，运维复杂性降低业务数据(PG)DataphinKafkaFlinkMaxComputeFineReport数据导出FineBI其他系统产销协同商渠匹配库存一体商品企划统一数据资产• 简化数据治理，降低数据架构的复杂性• 提高数据质量，标准化一处管理OSSDoris Summit Asia 20244mmit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit AsD03基于阿里云 SelectDB 的数仓升级方案Doris Summit Asia 20244mmit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit Asia 2024Doris Summit AsD阿里云SelectDB - 在波司登的POC测试内容测试项测试说明测试目标① 中小查询日常普通查询压测评估SelectDB在日常业务中出现的小查询负载的并发支撑能力 日常高频的中小查询，高并发情况下，平均响应时间预期在1秒以内② 大查询分析大查询压测根据业务给出的3个复杂查询，以一定的并发同时执行，验证SelectDB的大查询负载能力1.不对日常查询造成影响， 不打挂集群2. 各自 10 并发，共 30 并发下平均 响应时间在 30 秒内③ 报表拖拉拽分资源组隔离压测测试报表工具的交互性能和资源隔离效果预览等托拉拽场景在5并发的情况下，最长5分钟返回 ④ 下载大数据量下载测试验证数据导出功能的有效性和效率单个GB级数据下载1分钟返回 ⑤ 混合负载同时进行多种类型的查询和操作模拟实际使用场景，测试系统的综合负载能力1日常报表场景不受大查询和拖拉拽查询的影响⑥ 长稳在长时间内持续运行上述测试检验数据库的稳定性和持久运行