日前,“2022年中国开源创新大赛”初赛晋级名单公布,易用、稳定、高效的批流统一的数据集成框架 ChunJun 顺利晋级决赛,并荣获“2022年中国开源创新大赛优秀开源项目/社区”奖项。
感谢组委会专家的认可,ChunJun也将继续秉承技术初心,砥砺前行,不遗余力地助力国内开源发展,为更多的开发者传播最新开源与技术信息。
“2022年中国开源创新大赛”在中央网信办信息化发展局的指导下,由中国互联网发展基金会、中国网络空间研究院、中国互联网投资基金联合主办,本届大赛以“开源创新,共建生态”为主题,围绕国家在开源人才培养和开源生态建设方面的重大战略需求,聚焦“卡脖子”相关技术领域以及人工智能、物联网、云原生等前沿技术领域设置开源赛道,旨在为国内开源行业的企业、开发者、创业者提供展示、交流、合作的平台,助力开源生态的高质量发展,激发开源创新活力,选拔优秀的开源项目,培养开源实践人才,助力开源生态建设。
本届大赛邀请全国知名高校、科研机构、开源社区和企业界资深专家联合组成大赛组织委员会、评审委员会和行业专家组,对大赛全程进行有力支撑。初赛阶段评审专家组在众多参赛项目/社区中最终遴选出 76 个优秀开源项目/社区晋级决赛。ChunJun凭借出众的产品技术能力和开源运营表现成功入围。
关于 ChunJun
ChunJun是易用、稳定、高效的批流一体的数据集成框架。
• ChunJun 官网:https://dtstack.github.io/chunjun/
• Github 地址:https://github.com/DTStack/chunjun
• Gitee 地址:https://gitee.com/dtstack_dev_0/chunjun
主要应用于大数据开发平台的数据同步/数据集成模块,通常采用将底层高效的同步插件和界面化的配置方式相结合的方式,使大数据开发人员可简洁、快速的完成数据同步任务开发,实现将业务数据库的数据同步至大数据存储平台,从而进行数据建模开发,以及数据开发完成后,将大数据处理好的结果,数据同步至业务的应用数据库,供企业数据业务使用。
ChunJun 既可以采集静态的数据,比如 MySQL,HDFS 等,也可以采集实时变化的数据,比如 binlog,Kafka 等。同时ChunJun 也是一个支持原生 FlinkSql 所有语法和特性的计算框架。
ChunJun 核心特性
• 基于json、sql构建任务
• 支持多种异构数据源之间数据传输
• 支持断点续传、增量同步
• 支持任务脏数据存储管理
• 支持Schema同步
• 支持RDBS数据源实时采集