导师男团来袭|开源之夏2022,与alluxio一起探索数据编排的奇妙世界

Alluxio Alluxio     2022-12-04     680

关键词:

活动简介

开源之夏(英文简称 OSPP)是由“开源软件供应链点亮计划”发起并长期支持的一项暑期开源活动,今年是第三届,由中国科学院软件研究所与 openEuler 社区共同举办,旨在鼓励在校学生积极参与开源软件的开发维护,促进优秀开源软件社区的蓬勃发展,培养和发掘更多优秀的开发者。

 

 活动联合国内外各大开源社区,针对重要开源软件的开发与维护提供项目任务,并面向全球高校学生开放报名

学生可在本活动中自主选择感兴趣的项目任务进行申请,并在中选后获得该开源项目资深维护者(社区导师)亲自指导的机会,完成项目并贡献给社区后,参与学生还将获得开源之夏活动奖金和结项证书


 社区介绍

Alluxio系统是全球首个分布式超大规模数据编排系统,孵化于加州大学伯克利分校AMP实验室。自项目开源以来,已有超过来自300多个组织机构的1200多位贡献者参与开发,包括全球最头部科技公司、最顶尖的计算机科研院所等,现已成为发展最快的开源大数据项目之一。目前,全球十大互联网公司中已有包括Facebook、Airbnb、Uber、阿里巴巴、腾讯和字节跳动在内的八家企业部署了Alluxio,还有更多大型企业在生产中运行 Alluxio。

社区GitHub:https://github.com/Alluxio

Slack:https://alluxio-community.slack.com/

网站:https://www.alluxio.io/

除了了解Alluxio系统背景之外,Alluxio为本次“开源之夏”配备的导师男团也不容错过:

下面有请 Alluxio导师男团(自带BGM)

 如需入群与以上导师沟通,请添加Alluxio小助手(VX:Alluxio_Tianyu),请备注“开源之夏”


项目介绍

【项目一】:优化和完善Alluxio数据编排开源项目的单元测试功能

【项目导师】:刘嘉承jiacheng@alluxio.com),Alluxio 核心开发工程师,硕士毕业于哥伦比亚大学,目前就职于Alluxio公司研发团队核心组。发布了Alluxio K8s Helm Chart。参与并主导了一些Alluxio的RPC和内核优化工作。

 

【难度】:基础

【项目描述】:众所周知,一套设计良好的单元测试保证了开源项目的质量和可维护性。本项目重点在于加强Alluxio应用客户端的测试覆盖率和关键功能的正确性保障。我们希望通过本项目的任务,使得Alluxio开源项目的单元测试(unit test)质量得到进一步补充、完善和加强,通过单元测试保障已有功能,为未来的优化和拓展铺平道路。

【产出要求】:

  1. 针对Alluxio数据编排开源项目的单元测试功能进行优化和完善
  2. 至少包含三个以上优化和完善点

【技术要求】:

熟悉Java编程,分布式系统以及单元测试

更多项目信息:https://summer-ospp.ac.cn/#/org/prodetail/226ea0337

【项目】二:Alluxio数据编排系统的分布式缓存管理机制优化

【项目导师】:范斌binfan@alluxio.com),Alluxio公司创始成员&开源社区副总裁。本科毕业于中科大计算机系,随后取得卡内基梅隆大学计算机博士学位。博士期间在分布式系统算法和系统实现等方向发表多篇包括SIGCOMM, SOSP, NSDI等顶级国际会议论文以及多篇专利。加入Alluxio前, 范斌在Google从事下一代大规模分布式存储系统的研究与开发,曾获得谷歌年度技术奖。

 【项目描述】:分布式缓存是Alluxio数据编排开源项目的重要特性之一。而如何有效利用和管理各个worker上的缓存空间则成为了影响分布式缓存性能的关键因素。我们在本项目中希望针对现有的缓存清空机制进行功能上的拓展,分两个维度:(1)在现有默认的异步清空操作的基础上,增加支持“同步”清空操作的功能可选项;(2)在现有默认针对所有worker统一执行清空操作的基础上,增加“可指定”若干特定worker实施清空操作。

【难度】:进阶

【产出要求】:

针对Alluxio数据编排系统现有的缓存清空机制从两个维度进行功能上的拓展:

  1. 增加支持“同步”清空操作的功能;
  2. 增加“可指定”若干特定worker实施清空操作。

【技术要求】:

熟悉Java编程,分布式缓存

更多项目信息:https://summer-ospp.ac.cn/#/org/prodetail/226ea0340

针对以上2个学生项目,我们除了配备专门导师,还会有男团其他成员全程助力,同时社区的其他专家也会给予项目辅导与支持。


参与方式

学生自由选择项目,与社区导师沟通实现方案并撰写项目计划书。被选中的学生将在社区导师指导下,按计划完成开发工作,并将成果贡献给社区。社区评估学生的完成度,主办方根据评估结果发放活动奖金给学生


活动日程

课题项目将于 5 月 21 日开始正式接受学生申请,当前正处于「学生与社区项目沟通期」,欢迎大家进群咨询相关事宜,与项目导师线上交流沟通。


与导师沟通

目前Alluxio的2个项目已经成功发布,正式进入学生与导师沟通阶段,各位学生如果对上述项目感兴趣,欢迎你加入Alluxio开源社区的开源之夏项目交流群,与对应导师及社区专家进行沟通交流。

【群聊加入方式】:

方式一:扫描下方二维码(如二维码失效,请采用第二种方式)

方式二:请添加Alluxio小助手(VX:Alluxio_Tianyu),请备注“开源之夏”

关于参与阿里巴巴编程之夏asoc-nacos的感悟

...夏答辩结束并顺利通过!经过近两个月的方案设计、导师沟通及代码实现,从零开始参与顶级开源项目并且得到导师的认可,还是十分开心的,心情和考研上岸一样的十分激动。为了更好的提升与更多的人参与到... 查看详情

2022开源软件供应链点亮计划--aliosthings项目导师招募

...究所发起的暑期开源编程活动。活动招募开源社区的开源导师,面向高校学生指导,学生选择自己感兴趣的项目进行为期3个月的开源实战。导师职责:负责对学生提出的关于项目细节问题的解答,指导学生遵循社... 查看详情

华为拥抱开源alluxio:内存将成重要战略平台

华为公司近日宣布将利用自家FusionStorage产品与Alluxio开源软件实现大数据分析加速;此举相信能够为令人昏昏欲睡的缓慢数据分析流程带来一股新风。华为拥抱开源Alluxio:内存将成重要战略平台Alluxio此前曾名为TachyonNexus,是一家... 查看详情

alluxio2022技术干货年终大赏

...很多嘉宾参与了我们的社区直播活动17场主题活动(AlluxioDay、Meetup、DatafunSummit等)44位嘉宾44个主题(来自一线大厂的实战者)2000+分钟的分享时长(内容涵盖【金融】【互联网&科技】【大数据】【通信... 查看详情

2022年度优秀开源技术

...如下(按首字母顺序排名,不分先后):Alluxio官方                                              阿里巴巴终端技术阿里云云原生ÿ 查看详情

成长一夏挑战赛来袭|学习创作两大赛道,开启导师报名啦!

...们准备了「成长一夏」挑战赛,同时也准备了丰厚的导师奖品!欢迎报名参与!本次挑战赛设置【学习】【创作】两大赛道,每个赛道都由导师领航,并全程开放导师报名:只需要在官方报名帖(点击... 查看详情

成长一夏挑战赛来袭|学习创作两大赛道,开启导师报名啦!

...们准备了「成长一夏」挑战赛,同时也准备了丰厚的导师奖品!欢迎报名参与!本次挑战赛设置【学习】【创作】两大赛道,每个赛道都由导师领航,并全程开放导师报名:只需要在官方报名帖(点击... 查看详情

alluxio2022技术干货年终大赏

...很多嘉宾参与了我们的社区直播活动17场主题活动(AlluxioDay、Meetup、DatafunSummit等)44位嘉宾44个主题(来自一线大厂的实战者)2000+分钟的分享时长(内容涵盖【金融】【互联网&科技】【大数据】【通信... 查看详情

金山云团队分享|5000字读懂presto如何与alluxio搭配

...队(赵侃、李金辉)在交互查询场景下对Presto与Alluxio相结合进行了一系列测试,并总结了一些Presto搭配Alluxio使用的建议。本次测试未使用对象存储,计算引擎与存储间的网络延时也比较低。如果存储IO耗时和网络... 查看详情

alluxio架构场景与部分配置参数详解(代码片段)

Alluxio架构、场景与部分配置参数Alluxio:架构及数据流-简书(jianshu.com)Alluxio-基于内存的虚拟分布式存储系统_机器爱上学习的博客-CSDN博客_alluxio1架构1.1概述​Alluxio作为大数据和机器学习生态系统中的一个新的数据访问层࿰... 查看详情

开源当道,群英荟萃!1024程序员节北京峰会火热来袭

...园、CSDN承办的20221024程序员节北京峰会将于10月24日精彩来袭。以“软件新时代开源创未来”为主题,聚焦开源新潮流,诚邀广大程序员朋友交流前沿技术的洞察与实践,共度节日狂欢。1024程序员节北京峰会分为会、... 查看详情

开源当道,群英荟萃!1024程序员节北京峰会火热来袭

...园、CSDN承办的20221024程序员节北京峰会将于10月24日精彩来袭。以“软件新时代开源创未来”为主题,聚焦开源新潮流,诚邀广大程序员朋友交流前沿技术的洞察与实践,共度节日狂欢。1024程序员节北京峰会分为会、... 查看详情

alluxio:2022年大数据五大趋势,多云下数据湖兴起,ai成为主流

Alluxio创始人兼CEO预测2022年大数据发展五大趋势:混合云和多云、人工智能和深度学习、服务、数据共享和新的数据湖存储格式成为关注重点。编辑|宋慧出品|CSDN云计算 近日,全球首创的开源云原生数据编排软件开发商A... 查看详情

一站式全覆盖数据i/o平台-alluxio与aunalytics的完美结合

“Aunalytics云原生数据分析平台与Alluxio的开源数据编排软件相结合,使客户能够进行跨所有数据源的统一访问,并驱动人工智能分析,产出更好的答案,获得竞争优势。”Aunalytics分析云首席技术官汤姆·帕诺佐√... 查看详情

2022英特尔®fpga中国技术周重磅来袭!注册参会有惊喜

 @企业级用户、云服务商、通信运营商、网络及边缘的技术相关管理者、硬件与逻辑设计工程师,专业开发者、系统架构师:11月14-18日,为期五天的2022英特尔®FPGA中国技术周(IFTD)开启!并将全球同... 查看详情

alluxio源码完整解析|你不知道的开源数据编排系统(下篇)

回顾在《Alluxio-源码解析-上》主要讲述了Alluxio本地环境搭建,源码项目结构,服务进程的启动流程和服务间RPC调用。本篇将在上篇的基础上,继续为大家讲述Alluxio中重点类详解,Alluxio中Block底层读写流程,All... 查看详情

2022亚马逊云科技全球云计算风向标级峰会来袭

【什么是Summit?】Summit-“亚马逊云科技中国峰会”是亚马逊云科技在中国区域大型的年度科技盛会,于2015年落地中国,历经7年规模声量逐年扩大,是全球云计算领域风向标级活动!【2022年亚马逊云科技Summit... 查看详情

2022亚马逊云科技全球云计算风向标级峰会来袭

【什么是Summit?】Summit-“亚马逊云科技中国峰会”是亚马逊云科技在中国区域大型的年度科技盛会,于2015年落地中国,历经7年规模声量逐年扩大,是全球云计算领域风向标级活动!【2022年亚马逊云科技Summit... 查看详情