无分类 聚焦农业信息化网易云与华南农业大学成立大数据联合实验室 7月26日,2019网易云创峰会在杭州拉开序幕,本次峰会以“连接•洞察•进化”为主题,汇聚行业领袖、技术大咖及业界代表,探讨数字技术演进与行业应用趋势,研商生态合作升级、共赢未来的道路。上午的主论坛中,网易云…
无分类 大数据揭示-中国世界500强企业数量首超美国但别高兴得太早 新一年的《财富》世界500强榜单刚刚发布,加上港澳台,中国上榜企业数量史无前例超过美国,给中美关系的畅销书作家们又提供了一个不错的梗。
无分类 Giraph源码分析四-Master-如何检查Worker启动成功 Giraph遵从单Master多Workers结构,BSPServiceMaster使用MasterThread线程来进行全局的同步。每个Worker启动成功后,会向Master汇报自身的健康状况,那么Master是如何检测Workers是否都成功启动了?
hadoop Hadoop-HA集群搭建 在hadoop2.0中通常由两个NameNode组成,一个处于active状态,另一个处于standby状态。 Active NameNode对外提供服务,Standby NameNode不对外提供服务,仅同步active namenode的状态,以便能够在它失败时快速进行…
无分类 Giraph源码分析三-消息通信 由前文知道每个BSPServiceWorker有一个WorkerServer对象,WorkerServer对象里面又有ServerData对象,作为数据实。ServerData中包含该Worker的partitionStore、edgeStore、incomingMessageStore、currentMessageSt…
无分类 MaxCompute技术人背后的故事从ApacheORC到AliORC 2019大数据技术公开课第一季《技术人生专访》来袭,本季将带领开发者们探讨大数据技术,分享不同国家的工作体验。本文整理自阿里巴巴计算平台事业部高级技术专家吴刚的专访,将为大家介绍Apache ORC开源项目、主…
无分类 DBus数据库表结构变更处理方案 导读:DBus是我们要介绍的在敏捷大数据(Agile BigData)背景下的第一个平台。企业中大量业务数据保存在各个业务系统数据库中,为同时解决数据同步的一致性和实时性问题,DBus(数据总线)平台应运而生。
无分类 专访宜信AI中台团队负责人王东智慧金融时代大数据和AI如何为业务赋能 前言:宜信技术人物专访是宜信技术学院推出的系列性专题,我们邀请软件研发行业的优秀技术人,分享自己在软件研发领域的实践经验和前瞻性观点。
无分类 大数据是啥可以吃的吗 关于大数据是什么,从一开始仅仅只想做数据,到开始意识到自己做的是对整个集团有核心意义的数据产品,再到走到外面,把数据能力对外输出,所有过程中,不断的有客户问到这个问题,有懵懂的、有善意的、也有挑衅…