罗永浩|数据规模爆炸性增长,云原生数据仓库数据化运营实战分享
文章图片
文章图片
文章图片
文章图片
文章图片
文章图片
文章图片
文章图片
文章图片
在日前的2021阿里云金融数据智能峰会——《云原生驱动数智化运营的“增长黑马”》专场上 , 阿里云数据库资深技术专家魏闯先 从数据价值链路角度切入 , 为大家解读云原生数据仓库如何支撑数据化运营、全链路营销和阿里集团双11业务 , 并展示金融客户最佳实践案例和应用场景 。 本文内容根据演讲录音及PPT整理而成 。
阿里云数据库资深技术专家魏闯先
一、背景与趋势 (一)阿里巴巴15年云计算实践
回顾阿里巴巴十五年来云原生发展的道路 , 大致分为三个阶段 。
第一个阶段是2006年~2015年的应用架构互联网化阶段 , 是云原生从0到1的过程 。 最早的时候 , 阿里巴巴在淘宝上做中间件 , 那是最早的云的雏形 。 当时我们研究的是Oracle数据库和IBM的小型机 。 但阿里巴巴发现一个问题 , 就是随着淘宝流量越来越大 , Oracle的机器无法继续满足业务需求 , 三个月之后 , 我们的数据将存不下也算不了 。 这是非常严重的问题 , 所以当时阿里巴巴启动了去IOE的计划 。
这个时候 , 阿里巴巴发现我们的业务做得非常好 , 但技术上有很多挑战 。 因此 , 阿里巴巴在2009年成立了阿里云 , 自研飞天操作系统 , 开启云化时代 , 淘宝和天猫合并建设业务中台 , 届时三大中间件核心系统上线 。
飞天操作系统基于Apsara , 是一个分布式的操作系统 。 在基础公共模块之上有两个最核心的服务:盘古和伏羲 。 盘古是存储管理服务 , 伏羲是资源调度服务 , 飞天内核之上应用的存储和资源的分配都是由盘古和伏羲管理 。 飞天核心服务分为:计算、存储、数据库、网络 。
为了帮助开发者便捷地构建云上应用 , 飞天提供了丰富的连接、编排服务 , 将这些核心服务方便地连接和组织起来 , 包括:通知、队列、资源编排、分布式事务管理等等 。
飞天最顶层是阿里云打造的软件交易与交付第一平台----云市场 。 它如同云计算的“App Store” , 用户可在阿里云官网一键开通“软件+云计算资源” 。 云市场上架在售商品几千个 , 支持镜像、容器、编排、API、SaaS、服务、下载等类型的软件与服务接入 。
这就是最早的云的基础框架 , 也是一个云原生的架构 。
从2011年开始 , 我们开始做容器调度 , 在集团里面开始做在线业务 , 在线的业务开始走容器化 。 到了2013年 , 自研飞天操作系统全面支撑集团业务 。
- text|《2021大数据产业年度创新技术突破》榜重磅发布丨金猿奖
- 酷睿处理器|关键数据出炉,京东比阿里差远了
- 罗永浩|三年时间还掉六个亿的债,中年男人罗永浩的还债故事
- 入场券|元宇宙世界的“入场券”?市场规模将达2700亿元!这类人才太紧缺→
- 宋嘉吉|元宇宙世界的“入场券”?市场规模将达2700亿元!这类人才太紧缺
- 财智干货|数智化发展任重道远,财务中台提升数据服务价值 | 大数据
- 央媒表态后,联想关键数据出炉,柳传志这回要扳回一局?
- 数据库|OPPO悄悄上新机,骁龙8核+5000mAh电池,256G仅售1599元
- 数据仓库|红米真我moto三款骁龙870手机对比:2000元以内,谁更值得买?
- 中文|爱数智慧CEO张晴晴:基于”情感“的人机交互,要从底层数据开始