DatenLord Hackathon 2023正式启动!达坦科技基于其跨云分布式文件系统DatenLord项目,结合AI大模型时代背景,搭建了擂台,在此正式向您发出邀约!
本次大赛赛题深刻有趣,奖品丰厚多样,借此机会您不仅可以尽情施展才华、与来自全国各地优秀的青年才俊们同台PK,更将有机会与优秀的评委教师对话交流。Clock is Ticking!无需犹豫,行动起来,抓住机遇,创造奇迹!
主题
Explore the Possibilities
大赛时间线
报名+组队:11.18~12.10
组委会整理报名资料:12.10-12.12
开发:12.12~12.15
作品提交:12.16
作品初评:12.17~12.23(评委会投票)
大赛线上路演:12.28
作品颁奖:12.30
背景介绍
AI 大模型的时代已经来临,大模型训练和推导对数据访问速率的要求也比较高,在某些场景下对存储系统的压力会变得非常大。其中的一种访问 pattern 描述如下:在短时间内,集群中大多数机器对某一个(或者几个)大文件需要同步读取,如果能够在机器之间进行 p2p 的数据传输,存储服务的压力会大大减小,最终提高整个系统的运行效率。
赛题介绍
DatenLord 是跨云分布式文件系统,对上层提供 Posix 兼容的文件系统接口,同时针对多云多数据中心的场景进行数据访问加速。DatenLord 使用了本地缓存来加速文件访问速度,缓存中的数据从后端的持久化存储中读取,例如 S3 兼容的对象存储。在某些极端场景中,集群会对同一个或者几个大文件同时进行读取,此时后端的持久化存储的读取压力会剧增,大大降低整个系统的性能和响应速度。针对这种场景,我们需要对这种数据访问模式进行优化,实现缓存之间的 p2p 传输。请参赛选手(或者队伍)针对这种场景,为 DatenLord 设计并实现缓存 p2p 传输和同步模块。
评估标准
达坦科技评委会将基于以下三个标准对于提交的作品进行评估:
1. 实现功能的完整性
2. 实现性能的优异
3. 代码的规范程度
欢迎扫描海报中二维码,或点击文末“阅读全文”进行报名,本届Hackathon的报名通道将于2023年11月18日正式开启。
赛题宣讲会
为了进一步宣传以及讲解DatenLord Hackathon2023赛题以及背景,我们将于2023年11月25日(周六)安排一场空中宣讲会。欲了解更多关于本次Hackathon的赛制、参赛规则、日程安排,以及达坦科技赛题的介绍、相关资源,欢迎预约报名,我们在空中宣讲会等你,不见不散~
腾讯会议号码:708-101-213
如有任何问题欢迎联系达坦科技微信小助手:DatenLord_Tech或发送邮件至
info@datenlord.com
让我们一起在Hackathon2023的舞台上尽情释放创意的火花,期待与优秀的你碰撞出新的想法!