无分类 用Flink取代Spark-Streaming知乎实时数仓架构演进 “数据智能” (Data Intelligence) 有一个必须且基础的环节,就是数据仓库的建设,同时,数据仓库也是公司数据发展到一定规模后必然会提供的一种基础服务。从智能商业的角度来讲,数据的结果代表了用户的反馈,获取…
无分类 小红书如何实现高效推荐解密背后的大数据计算平台架构 本文整理自2019阿里云峰会·上海开发者大会开源大数据专场中小红书实时推荐团队负责人郭一先生现场分享。小红书作为生活分享类社区,目前有8500万用户,年同比增长为300%,大约每天有30亿条笔记在发现首页进行展示…
无分类 日均处理万亿数据Flink在快手的应用实践与技术演进之路 作者介绍:董亭亭,快手大数据架构实时计算引擎团队负责人。目前负责 Flink 引擎在快手内的研发、应用以及周边子系统建设。2013 年毕业于大连理工大学,曾就职于奇虎 360、58 集团。主要研究领域包括:分布式计算…
无分类 Apache-Flink-零基础入门八-SQL-编程实践 作者:伍翀(云邪) 本文是 Apache Flink 零基础入门系列文章第八篇,将通过五个实例讲解 Flink SQL 的编程实践。 注: 本教程实践基于 Ververica 开源的 sql-training 项目。基于 Flink 1.7.2 。 通过本课你能学…
无分类 数说机场一3万条航班数据背后230座城市的天空之战 2018年,中国大陆已经有230个城市拥有定期通航的民航机场,而关于机场的争夺还在继续:江浙多城市积极争取上海第三机场落地,苏州市长在今年两会上“恳请支持苏州机场规划建设”,北京在大兴机场建成通航后将成为继…
无分类 数说机场二首都第二个机场北京大兴国际机场的野心 2018年,中国大陆已经有230个城市拥有定期通航的民航机场,而关于机场的争夺还在继续。每个城市都坚信,机场是提高城市能级与扩大经济辐射力无可替代的存在,也是城市对外交流最高效快速的闸口。
无分类 360互联网技术训练营第18期AIOps落地实践探索 随着运维工作从规模和复杂度多方面的爆炸式增长,传统的运维手段已经无法满足如今业务系统运维管理的需求。AI 技术日趋成熟,智能运维(AIOps)应运而生,给运维行业带来了很多的变革和机会,并逐渐成为一种新的…
无分类 首发长安十二时辰背后的技术秘籍正式公开速来下载 这就是《长安十二时辰》的故事,剧中有恢弘的长安美景、让人流口水的水晶柿子/水盆羊肉,还有张小敬和檀棋“在一起”呼声……然而,最让人刮目相看的却是“大唐大数据系统”。靖安司本身是大数据存储,传递消息的望楼是…
无分类 修改代码150万行与-Blink-合并后的-Apache-Flink-190-究竟有哪些重大变更 8月22日,Apache Flink 1.9.0 正式发布,早在今年1月,阿里便宣布将内部过去几年打磨的大数据处理引擎Blink进行开源并向 Apache Flink 贡献代码。当前 Flink 1.9.0是阿里内部版本 Blink 合并入 Flink 后的首次发…
无分类 结构化数据存储如何设计才能满足需求 阿里妹导读:任何应用系统都离不开对数据的处理,数据也是驱动业务创新以及向智能化发展最核心的东西。数据处理的技术已经是核心竞争力。在一个完备的技术架构中,通常也会由应用系统以及数据系统构成。应用系统…