Open, collaboration and Win-win.

———程力

ApacheCon 是 Apache 软件基金会(ASF)的官网寰球系列大会。作为久负盛名的开源盛宴,ApacheCon 在开源界备受关注,也是开源静止晚期的出名流动之一。

早在 1998 年,在 ASF 成立之前,ApacheCon 曾经吸引了各个档次的参与者,在 300 多个 Apache 我的项目及其不同的社区中摸索 "今天的技术"。也是在这一届上,开发 HTTPD 服务的开发者们欢聚一堂,并决定成立 Apache 软件基金会。

ApacheCon 每年举办一次,个别在欧洲或北美举办,是 Apache 开发者们线下交换、探讨、见面的绝佳机会,也是分享想法、思维激荡的难得的场合。通过入手实作、主题演讲、理论案例钻研、培训、黑客松流动等形式,展现 Apache 我的项目的最新倒退和新兴翻新。

往年,为了更好地服务于亚太快速增长的 Apache 用户和贡献者,ApacheCon 组委会以及 Apache 软件基金会很快乐地发表,首次针对亚太地区时区的 ApacheCon 在线会议 ApacheCon Asia 大会将于 2021 年 8 月 6 日至 8 日在线举办。

为了让大家进一步理解开源、理解 ApacheCon Asia,SegmentFault 思否将采访局部 Track Chair 或大会讲师,让你理解大会筹备的背地,和这些专家大牛们的故事。

明天,咱们为大家带来的是,咱们对腾讯云高级工程师程力的访谈。

以下为 SegmentFault 思否对程力的访谈内容:

对于程力

我是Apache Ozone社区PMC,Hadoop社区Committer,目前在腾讯云对象存储团队工作。已经在AWS S3,华为存储等团队工作过。


程力首次接触开源的故事

第一次大规模的投入开源是2019年,hadoop孵化对象存储我的项目Ozone,作为一个开源新人,投入Ozone我的项目中,追随我的项目一起成长,主导设计交付了MultiRaft,SCM HA等重大个性后,在社区中负责了更重要的角色,同时也随同了Ozone成为了Apache顶级我的项目。


在参加开源并且为 Apache 社区做奉献的时候,集体及公司有哪些播种?

首先从加入Apache开源社区开始,我集体自身的代码标准,代码品质,到与社区成员单干沟通,独特合作的能力都有了显著的增长。更了解了开源社区,单干凋谢共赢的意义,同时随同着Ozone我的项目成为Apache顶级我的项目和腾讯公司的在Hadoop和Ozone我的项目上的继续投入,在公司内外部的大数据我的项目中,也交付了一些内外部的客户应用场景,利用Ozone这个存储我的项目,帮忙腾讯公司在私有化高密度存储设备的应用上找到了解决方案,实现了内部客户的理论价值。


程力了解的“The Apache Way”?

Open, collaboration and Win-win.


程力与 ApacheCon Asia

这次我有两个talk:

Big Data

腾讯云基于Hadoop-COS搭建的三层通明减速,助力数据湖

腾讯云对象存储COS在2019年提交Hadoop-COS文件系统插件到Hadoop社区后,融入了云原生存储的场景中,承载了大数据、AI、容器等利用EB级别的数据量。

往年腾讯云COS对于Hadoop-COS做了全面降级,减少了数据湖三层减速的性能个性,减速数据湖的构建和倒退,同时助力大数据和AI的架构交融。本次演讲次要分享:

  1. 云原生生态下的Hadoop-COS存算拆散
  2. Hadoop-COS三层通明减速
  3. 大数据和AI下的数据湖架构

此次演讲中,讲师次要分享腾讯云基于对象存储COS推出的湖仓三层减速计划,能达到最高10倍的读写减速提速,并且基于Hadoop-COS做到了Schema通明减速。

同时分享者也将介绍腾讯云如何基于Hadoop-COS三层通明减速,融入大数据+AI的对立数据湖架构。

期待听众对于腾讯云的数据湖减速计划有所理解,了解数据湖在大数据和AI场景下目前的具体应用案例。

Big Data

Apache Ozone如何利用Raft协定实现高可用计划和吞吐性能大幅晋升

Apache Ozone在2020年正式成为Apache顶级我的项目,Ozone反对对象、HCFS,fuse等多种拜访形式,腾讯工程师在Ozone社区中体现突出。

腾讯云团队在Ozone社区领导开发多个重要个性,此次演讲将重点分享其中两大个性,MultiRaft和Ozone High Availability,这两个Ozone社区的要害个性都是基于Raft协定实现的。

本次演讲次要分享:

  1. 如何利用Java Reflection和Raft协定实现Ozone元数据的强统一同步,实现Ozone高可用性建设
  2. 如何利用Multi-Raft个性,晋升Ozone DataNode的单节吞吐能力
  3. 如何Multi-Raft个性,适配高密度硬盘机型,将Ozone融入私有化数据湖计划

观众能够从演讲中获取腾讯团队奇妙使用Raft和Java reflection解决Ozone一致性难题,同时也能从Multi-Raft实现和配合高密度磁盘机型的案例中获取优化DataNode写性能的新思路。

期待用户深刻理解Ozone我的项目如何通过Raft实现元数据高可用和数据节点性能优化。


和咱们一起退出 ApacheCon Asia!

一起来参加Apache社区的盛宴,见证开源的进化。


对于腾讯云

腾讯云存储团队目前在大力发展数据湖生态,欢送有志之士退出。有动向的能够分割timmycheng@tencent.com


ApacheCon Asia 残缺议程地址:
https://www.apachecon.com/aca...

即刻注册地址:
https://hopin.com/events/apac...