阿里云众包 - Hadoop FileSystem For OSS【Java, Hadoop】

阿里开源 发布于 2015/12/21 19:28
阅读 25
收藏 0

[背景]

将OSS SDK提供的关于Object Storage的接口作为OSS Client,将操作OSS中bucket、Object对象的接口mapping成hadoop中org.apache.hadoop.fs.FileSystem这套分布式文件系统的接口

让Hadoop文件系统接口来访问OSS,将Aliyun OSS作为存储后端。

关于赏金的分配方案:

赏金只会发放选择最合适的一个方案。如果组队的方案为最佳,为了保证组队的人在获取奖金方面的安全性,我们会通过众包平台根据组队人员提供的分配方案来分配给入选的成员【注意:是组队入选的方案获胜,如果不获胜仍然没有赏金】。


[需求]

  • Fork github.com/apache/hadoop项目,对hadoop-common-project  进行修改
  • 熟悉Hadoop的架构和代码
  • 符合Hadoop的代码风格
  • 完整的单元测试
  • 可以使用已有的OSS SDK
  • coveralls代码覆盖度 95%  以上 
  • 使用Apache 2.0 协议
  • 不得抄袭已有开源、商业项目
  • 项目结束后,开发者需要继续三个月的bug维护期
  • 故意放置恶意、安全漏洞代码的,将保留追究责任的一切权利

[参考项目]

  1. 可以参考hadoop源码中的S3FileSystem,S3AFileSystem, NativeS3FileSystem。


[参与方法]

  1. 报名通过后请加入群:514616738 进行讨论
  2. 请在osc上创建私有项目, 请把opensource@alibaba-inc.com 加为项目成员;也可以github创建
  3. 项目创建后,请联系群主索要代金券
  4. 项目会选择最优的方案,建议大家组队来参与

加载中
返回顶部
顶部