关于apache:腾讯云高级工程师程力理解的The-Apache-WayOpen-collaboration-and-Winwin

27次阅读

共计 2334 个字符,预计需要花费 6 分钟才能阅读完成。

Open, collaboration and Win-win.

———程力

ApacheCon 是 Apache 软件基金会(ASF)的官网寰球系列大会。作为久负盛名的开源盛宴,ApacheCon 在开源界备受关注,也是开源静止晚期的出名流动之一。

早在 1998 年,在 ASF 成立之前,ApacheCon 曾经吸引了各个档次的参与者,在 300 多个 Apache 我的项目及其不同的社区中摸索 “ 今天的技术 ”。也是在这一届上,开发 HTTPD 服务的开发者们欢聚一堂,并决定成立 Apache 软件基金会。

ApacheCon 每年举办一次,个别在欧洲或北美举办,是 Apache 开发者们线下交换、探讨、见面的绝佳机会,也是分享想法、思维激荡的难得的场合。通过入手实作、主题演讲、理论案例钻研、培训、黑客松流动等形式,展现 Apache 我的项目的最新倒退和新兴翻新。

往年,为了更好地服务于亚太快速增长的 Apache 用户和贡献者,ApacheCon 组委会以及 Apache 软件基金会很快乐地发表,首次针对亚太地区时区的 ApacheCon 在线会议 ApacheCon Asia 大会将于 2021 年 8 月 6 日至 8 日在线举办。

为了让大家进一步理解开源、理解 ApacheCon Asia,SegmentFault 思否将采访局部 Track Chair 或大会讲师,让你理解大会筹备的背地,和这些专家大牛们的故事。

明天,咱们为大家带来的是,咱们对腾讯云高级工程师程力的访谈。

以下为 SegmentFault 思否对程力的访谈内容:

对于程力

我是 Apache Ozone 社区 PMC,Hadoop 社区 Committer,目前在腾讯云对象存储团队工作。已经在 AWS S3,华为存储等团队工作过。


程力首次接触开源的故事

第一次大规模的投入开源是 2019 年,hadoop 孵化对象存储我的项目 Ozone,作为一个开源新人,投入 Ozone 我的项目中,追随我的项目一起成长,主导设计交付了 MultiRaft,SCM HA 等重大个性后,在社区中负责了更重要的角色,同时也随同了 Ozone 成为了 Apache 顶级我的项目。


在参加开源并且为 Apache 社区做奉献的时候,集体及公司有哪些播种?

首先从加入 Apache 开源社区开始,我集体自身的代码标准,代码品质,到与社区成员单干沟通,独特合作的能力都有了显著的增长。更了解了开源社区,单干凋谢共赢的意义,同时随同着 Ozone 我的项目成为 Apache 顶级我的项目和腾讯公司的在 Hadoop 和 Ozone 我的项目上的继续投入,在公司内外部的大数据我的项目中,也交付了一些内外部的客户应用场景,利用 Ozone 这个存储我的项目,帮忙腾讯公司在私有化高密度存储设备的应用上找到了解决方案,实现了内部客户的理论价值。


程力了解的“The Apache Way”?

Open, collaboration and Win-win.


程力与 ApacheCon Asia

这次我有两个 talk:

Big Data

腾讯云基于 Hadoop-COS 搭建的三层通明减速,助力数据湖

腾讯云对象存储 COS 在 2019 年提交 Hadoop-COS 文件系统插件到 Hadoop 社区后,融入了云原生存储的场景中,承载了大数据、AI、容器等利用 EB 级别的数据量。

往年腾讯云 COS 对于 Hadoop-COS 做了全面降级,减少了数据湖三层减速的性能个性,减速数据湖的构建和倒退,同时助力大数据和 AI 的架构交融。本次演讲次要分享:

  1. 云原生生态下的 Hadoop-COS 存算拆散
  2. Hadoop-COS 三层通明减速
  3. 大数据和 AI 下的数据湖架构

此次演讲中,讲师次要分享腾讯云基于对象存储 COS 推出的湖仓三层减速计划,能达到最高 10 倍的读写减速提速,并且基于 Hadoop-COS 做到了 Schema 通明减速。

同时分享者也将介绍腾讯云如何基于 Hadoop-COS 三层通明减速,融入大数据 +AI 的对立数据湖架构。

期待听众对于腾讯云的数据湖减速计划有所理解,了解数据湖在大数据和 AI 场景下目前的具体应用案例。

Big Data

Apache Ozone 如何利用 Raft 协定实现高可用计划和吞吐性能大幅晋升

Apache Ozone 在 2020 年正式成为 Apache 顶级我的项目,Ozone 反对对象、HCFS,fuse 等多种拜访形式,腾讯工程师在 Ozone 社区中体现突出。

腾讯云团队在 Ozone 社区领导开发多个重要个性,此次演讲将重点分享其中两大个性,MultiRaft 和 Ozone High Availability,这两个 Ozone 社区的要害个性都是基于 Raft 协定实现的。

本次演讲次要分享:

  1. 如何利用 Java Reflection 和 Raft 协定实现 Ozone 元数据的强统一同步,实现 Ozone 高可用性建设
  2. 如何利用 Multi-Raft 个性,晋升 Ozone DataNode 的单节吞吐能力
  3. 如何 Multi-Raft 个性,适配高密度硬盘机型,将 Ozone 融入私有化数据湖计划

观众能够从演讲中获取腾讯团队奇妙使用 Raft 和 Java reflection 解决 Ozone 一致性难题,同时也能从 Multi-Raft 实现和配合高密度磁盘机型的案例中获取优化 DataNode 写性能的新思路。

期待用户深刻理解 Ozone 我的项目如何通过 Raft 实现元数据高可用和数据节点性能优化。


和咱们一起退出 ApacheCon Asia!

一起来参加 Apache 社区的盛宴,见证开源的进化。


对于腾讯云

腾讯云存储团队目前在大力发展数据湖生态,欢送有志之士退出。有动向的能够分割 timmycheng@tencent.com


ApacheCon Asia 残缺议程地址:
https://www.apachecon.com/aca…

即刻注册地址:
https://hopin.com/events/apac…

正文完
 0