欢迎您访问程序员文章站本站旨在为大家提供分享程序员计算机编程知识!
您现在的位置是: 首页  >  IT编程

【云+社区极客说】新一代大数据技术:构建PB级云端数仓实践

程序员文章站 2023-11-03 18:32:34
本文来自 " 腾讯云技术沙龙 " ,本次沙龙主题为 " 构建PB级云端数仓实践 " 在现代社会中,随着4G和光纤网络的普及、智能终端更清晰的摄像头和更灵敏的传感器、物联网设备入网等等而产生的数据,导致了PB级储存的需求加大。 但数据保留下来并不代表它真的具有利用价值,曾经保存的几TB的日志,要么用来 ......

本文来自腾讯云技术沙龙,本次沙龙主题为构建pb级云端数仓实践

在现代社会中,随着4g和光纤网络的普及、智能终端更清晰的摄像头和更灵敏的传感器、物联网设备入网等等而产生的数据,导致了pb级储存的需求加大。

但数据保留下来并不代表它真的具有利用价值,曾经保存的几tb的日志,要么用来做做最简单的加减乘除统计,要么就在日后出现问题了,扒出日志堆找证据。你的影视库里面可以下载储存成千上万部影片,但不代表你真的能全部看完。

如何将手里现有的数据变得更具有价值?一些营销云已经可以做到毫秒级响应做到精准投放广告,使用户的日志更有价值;人工智能逐渐参与辅助医疗,医学影像数据值得保存几十年了。无论是监管政策还是客户需求,随着技术进步价格降低,都在推动着数据总量越来越大。

在这个大背景下,从公司战略到产业生态,从学术研究到生产实践,从城镇管理乃至国家治理,都将发生本质的变化。国家竞争力将部分体现为一国拥有数据的规模、活性以及解释、运用数据的能力。通过以hadoop, spark为代表的大数据技术来构建新型数据仓库,已经成为越来越多的企业应对数据挑战的方式。

大数据最前沿的的技术与行业趋势如何?

传统企业级数仓将面临怎样的挑战?

而腾讯云大数据又是如何应对的?

本期极客说将为您一一解答。

本次云+社区极客说邀请了堵俊平(腾讯云大数据基础团队负责人,大数据技术专家)来为大家介绍大数据领域最近的技术趋势,包含介绍hadoop与spark技术的最新进展。并将通过一些实际的应用案例,来介绍腾讯大数据是如何在云上构建pb级的数据仓库,以及如何解决一些工程难题的。

演讲嘉宾

堵俊平

【云+社区极客说】新一代大数据技术:构建PB级云端数仓实践

  • 腾讯云大数据基础团队负责人,大数据技术专家

  • 曾任emc,vmware资深研发工程师

  • hortonworks美国yarn团队负责人

  • 深耕云计算,大数据方向10余年

  • 在多个社区均享有极高知名度,包括apache hadoop社区committer & pmc

  • 领导hadoop 2.6、2.8等应用非常广泛的社区release

  • 曾领导开发多个hadoop在云平台上优化与拓展的项目与产品

  • 目前在腾讯致力于领导腾讯云大数据及人工智能产品研发

直播时间:

10月18日 19:00

内容简介:

大数据新时代:

  • 大数据的技术与行业趋势

  • hadoop与spark技术最近进展

数仓技术发展:

  • 传统企业级数仓的挑战

  • 腾讯云构建大数据云数仓的实践与技术分享

  • 新的趋势:数据湖

【云+社区极客说】新一代大数据技术:构建PB级云端数仓实践

识别图中二维码即可免费报名预约直播哦!