【云+社区极客说】新一代大数据技术:构建PB级云端数仓实践

49次阅读

共计 998 个字符,预计需要花费 3 分钟才能阅读完成。

本文来自腾讯云技术沙龙,本次沙龙主题为构建 PB 级云端数仓实践
在现代社会中,随着 4G 和光纤网络的普及、智能终端更清晰的摄像头和更灵敏的传感器、物联网设备入网等等而产生的数据,导致了 PB 级储存的需求加大。
但数据保留下来并不代表它真的具有利用价值,曾经保存的几 TB 的日志,要么用来做做最简单的加减乘除统计,要么就在日后出现问题了,扒出日志堆找证据。你的影视库里面可以下载储存成千上万部影片,但不代表你真的能全部看完。
如何将手里现有的数据变得更具有价值?一些营销云已经可以做到毫秒级响应做到精准投放广告,使用户的日志更有价值;人工智能逐渐参与辅助医疗,医学影像数据值得保存几十年了。无论是监管政策还是客户需求,随着技术进步价格降低,都在推动着数据总量越来越大。
在这个大背景下,从公司战略到产业生态,从学术研究到生产实践,从城镇管理乃至国家治理,都将发生本质的变化。国家竞争力将部分体现为一国拥有数据的规模、活性以及解释、运用数据的能力。通过以 Hadoop, Spark 为代表的大数据技术来构建新型数据仓库,已经成为越来越多的企业应对数据挑战的方式。
大数据最前沿的的技术与行业趋势如何?
传统企业级数仓将面临怎样的挑战?
而腾讯云大数据又是如何应对的?
本期极客说将为您一一解答。
本次云 + 社区极客说邀请了堵俊平(腾讯云大数据基础团队负责人,大数据技术专家)来为大家介绍大数据领域最近的技术趋势,包含介绍 Hadoop 与 Spark 技术的最新进展。并将通过一些实际的应用案例,来介绍腾讯大数据是如何在云上构建 PB 级的数据仓库,以及如何解决一些工程难题的。
演讲嘉宾
堵俊平

腾讯云大数据基础团队负责人,大数据技术专家
曾任 EMC,VMware 资深研发工程师
Hortonworks 美国 YARN 团队负责人
深耕云计算,大数据方向 10 余年
在多个社区均享有极高知名度,包括 Apache Hadoop 社区 Committer & PMC
领导 hadoop 2.6、2.8 等应用非常广泛的社区 release
曾领导开发多个 Hadoop 在云平台上优化与拓展的项目与产品
目前在腾讯致力于领导腾讯云大数据及人工智能产品研发

直播时间:
10 月 18 日 19:00
内容简介:
大数据新时代:

大数据的技术与行业趋势
Hadoop 与 Spark 技术最近进展

数仓技术发展:

传统企业级数仓的挑战
腾讯云构建大数据云数仓的实践与技术分享
新的趋势:数据湖

识别图中二维码即可免费报名预约直播哦!

正文完
 0