罗永浩|数据规模爆炸性增长,云原生数据仓库数据化运营实战分享

罗永浩|数据规模爆炸性增长,云原生数据仓库数据化运营实战分享

文章图片

罗永浩|数据规模爆炸性增长,云原生数据仓库数据化运营实战分享

文章图片

罗永浩|数据规模爆炸性增长,云原生数据仓库数据化运营实战分享

文章图片

罗永浩|数据规模爆炸性增长,云原生数据仓库数据化运营实战分享

文章图片

罗永浩|数据规模爆炸性增长,云原生数据仓库数据化运营实战分享

文章图片

罗永浩|数据规模爆炸性增长,云原生数据仓库数据化运营实战分享

文章图片

罗永浩|数据规模爆炸性增长,云原生数据仓库数据化运营实战分享

文章图片

罗永浩|数据规模爆炸性增长,云原生数据仓库数据化运营实战分享

文章图片

罗永浩|数据规模爆炸性增长,云原生数据仓库数据化运营实战分享

文章图片


在日前的2021阿里云金融数据智能峰会——《云原生驱动数智化运营的“增长黑马”》专场上 , 阿里云数据库资深技术专家魏闯先 从数据价值链路角度切入 , 为大家解读云原生数据仓库如何支撑数据化运营、全链路营销和阿里集团双11业务 , 并展示金融客户最佳实践案例和应用场景 。 本文内容根据演讲录音及PPT整理而成 。
阿里云数据库资深技术专家魏闯先
一、背景与趋势 (一)阿里巴巴15年云计算实践

回顾阿里巴巴十五年来云原生发展的道路 , 大致分为三个阶段 。
第一个阶段是2006年~2015年的应用架构互联网化阶段 , 是云原生从0到1的过程 。 最早的时候 , 阿里巴巴在淘宝上做中间件 , 那是最早的云的雏形 。 当时我们研究的是Oracle数据库和IBM的小型机 。 但阿里巴巴发现一个问题 , 就是随着淘宝流量越来越大 , Oracle的机器无法继续满足业务需求 , 三个月之后 , 我们的数据将存不下也算不了 。 这是非常严重的问题 , 所以当时阿里巴巴启动了去IOE的计划 。
这个时候 , 阿里巴巴发现我们的业务做得非常好 , 但技术上有很多挑战 。 因此 , 阿里巴巴在2009年成立了阿里云 , 自研飞天操作系统 , 开启云化时代 , 淘宝和天猫合并建设业务中台 , 届时三大中间件核心系统上线 。
飞天操作系统基于Apsara , 是一个分布式的操作系统 。 在基础公共模块之上有两个最核心的服务:盘古和伏羲 。 盘古是存储管理服务 , 伏羲是资源调度服务 , 飞天内核之上应用的存储和资源的分配都是由盘古和伏羲管理 。 飞天核心服务分为:计算、存储、数据库、网络 。
为了帮助开发者便捷地构建云上应用 , 飞天提供了丰富的连接、编排服务 , 将这些核心服务方便地连接和组织起来 , 包括:通知、队列、资源编排、分布式事务管理等等 。
飞天最顶层是阿里云打造的软件交易与交付第一平台----云市场 。 它如同云计算的“App Store” , 用户可在阿里云官网一键开通“软件+云计算资源” 。 云市场上架在售商品几千个 , 支持镜像、容器、编排、API、SaaS、服务、下载等类型的软件与服务接入 。
这就是最早的云的基础框架 , 也是一个云原生的架构 。
从2011年开始 , 我们开始做容器调度 , 在集团里面开始做在线业务 , 在线的业务开始走容器化 。 到了2013年 , 自研飞天操作系统全面支撑集团业务 。