快讯
《刀剑神域:彼岸游境》全攻略汇总
2020-07-24 19:20:00
《刀剑神域:彼岸游境》全攻略汇总
2020-07-17 19:20:00
《死亡搁浅DEATHSTRANDING》PC版今日正式发售
1小时前
驰骋在广袤世界中的复仇武士《对马岛之魂》评测
1小时前
《对马岛之魂》评测:以华丽的画面再现经典武士电影
1小时前
别克昂科威S、宋PLUS领衔2020成都车展新车抢先看
2小时前
《死亡搁浅》PC版今日正式发售国区售价298元
2小时前
任天堂正式公开乐高NES宣传视频和实物图8月1日推出
3小时前
《微软飞行模拟》8月18日登陆PC及XboxGamePassPC端
3小时前
NS版《鬼哭之邦》今日推出体验版中文宣传片放出
4小时前
《爱相随Every》推出新模式终止运营也可玩
5小时前
《刀剑神域:彼岸游境》支线任务:打倒稀有颜色的魔兽
5小时前
小米云服务新功能上线:可在线播放视频
6小时前
三星发布“6G白皮书”预计2028年投入商用
6小时前
三星发布“6G白皮书”预计2028年投入商用
6小时前
日版《RO仙境传说》将与花江夏树展开联动
6小时前
《战国Basara》15周年直播活动邀请特约嘉宾
6小时前
《梦三国手游》周年庆免费领取坐骑送十连抽
6小时前
Spark锦标赛第二赛季落幕,各项冠军会师决赛
6小时前
即刻起飞!飞猪推出66元任性飞:来一场说走就走的旅行
6小时前
《王者荣耀》S20赛季“三分之地”法师装备栏迎来大革新
6小时前
F1施蒂利亚大奖赛法拉利两位车手发生碰撞双双退赛
6小时前
新时代的猪狗大战RNG横扫EDG 御三家之一的EDG已彻底沦为笑柄
6小时前
广州虚拟动力确认参展2020ChinaJoyBTOB,虚拟主播创新激发IP无限可能!
6小时前
第二届中国原创艺术类精品游戏大赛将在2020ChinaJoyBTOC展区再续精彩
6小时前
夏季家用高达游戏祭典2020将于本周六举办公开新情报
7小时前
《爱相随EVERY》将追加停服后也可游玩的“女友相伴Lite”模式
7小时前
白金工作室表示《巴比伦的陨落》开发顺利
7小时前
著名恐怖游戏《尸体派对》官推更新或暗示新作
7小时前
蘑菇君的珍藏Cosplay推荐第9期《地平线》亚罗伊
7小时前

腾讯大数据平台每日数据计算量超30万亿

2019-11-06 21:12:19 费倩文

DoNews11月6日消息  (记者 费倩文)11月6日,在Techo开发者大会上,腾讯云副总裁、腾讯数据平台部总经理蒋杰表示,经过10年的积累,腾讯大数据平台的算力资源池目前已有超过20万台的规模,每天实时数据计算量超过30万亿条,腾讯已经成为中国实时数据计算量最大的公司。

上述数据背后是腾讯大数据平台技术过去10年的不断演进。据蒋杰介绍,腾讯的数据量在短短5、6年时间增长了几千倍,目前每天产生的数据量超过几十万亿条数据在产生。为了应对这种爆炸式增长,腾讯走出了一条技术引进+改造+自研的道路,在过去10年间,腾讯大数据平台已经经历了四代演进。

从以Hadoop为核心的离线计算时代到以Spark、Storm、Flink为核心的实时计算时代,再到如今的机器学习和深度学习时代,腾讯从无到有研发了分布式的机器学习引擎Angel,以及一站式AI开发平台智能钛TI,用来解决数据训练和算法的问题。目前,腾讯正在研究以批流融合、ABC融合、以及数据湖和联邦学习为方向的下一代大数据平台的研究,该平台将具备混合部署、跨域数据共享和边缘计算等能力。

蒋杰表示,从开始的技术引进、局部优化到如今的自主创新,腾讯的大数据技术也在实践中不断完善和创新。“十年前,腾讯管理几百个节点都很困难,调度性能差,规模上不去。后来为了有效解决计算能力和大规模集群问题,腾讯自研调度器,相对原生调度器性能提升150倍,大大提升了集群可扩展性。现在,腾讯大数据平台每天有1500万个分析任务,每天数据接入条数达35万亿条数据。”

2个月前,腾讯在ApacheCon 2019上,面向全球开发者正式宣布开源自身核心平台——实时数据采集平台TubeMQ,并捐献给Apache社区。此次在Techo大会现场,再次重磅宣布正式开源资源管理平台核心TKE和分布式数据库TBase,随着在大数据开源领域的开源逐步加速,腾讯正在成为中国大数据领域开源最全面的厂商。

“目前,已经有数百万的开发者在腾讯云上构建应用,相信后面会有越来越多开发者加入,我们将和所有开发者一起,共建云上的应用生态”,蒋杰表示。(完)

相关文章

{{news.title}}

{{news.timeFormat}} {{news.author}}

正在加载......