OneFlow发布DLPerf测评报告,多机多卡环境下表现亮眼
(原标题:OneFlow发布DLPerf测评报告,多机多卡环境下表现亮眼)
近日,国产深度学习框架OneFlow发布了人工智能方向深度学习领域的DLPerf测评报告,填补了业内针对深度学习框架测评的空白。其报告数据显示,OneFlow在4机32卡下的ResNet50-v1.5和BERT-base两个模型中,无论是Float32类型还是自动混合精度,在同样的算法和硬件条件下,吞吐率及加速比均优于其他深度学习框架。ResNet-50是计算机视觉(Computer Version)领域最主流的深度学习模型之一,而BERT是自然语言处理(Natural Language Processing)领域的进行预训练的主流模型。OneFlow以这两种模型为基础的测试结果,对深度学习算法及硬件调优有着重要的参考价值。
OneFlow是一流科技自主研发、拥有完全自主知识产权的深度学习框架软件,是国内首个由初创团队研发并开源的AI框架,于今年7月31日正式开源后获得了广泛的业内关注。此次测评是OneFlow开源百天后向广大开发者交出的第一份“大型答卷”。对此,创始人袁进辉表示:“OneFlow从研发之初就主打高效性,致力于解决大规模分布式AI训练问题。这三个多月来,我们做了大量工作来增强稳定性、图编译和运行速度,在多机多卡场景下持续优化,以达到分布式最佳性能。”
除了数据对比,在本次测评报告中,OneFlow还公布了对其他深度学习框架进行调优的过程,以保证测评报告公正、准确、可复现。在谈到为何公布如此详细的调优过程时,袁进辉说道:“首先,我们要保证这份测评报告是客观、可复现的,这样才能帮助到开发者的日常工作。随着数据量级的增长,开发者对于深度学习框架如何激发硬件性能持续关注,我们希望这份报告可以给开发者在应用深度学习框架时提供必要的助力,并以此填补业界没有DLPerf测评报告的空白。”
OneFlow开源后,收到了来自世界范围内的广泛关注,关注者来自谷歌、脸书、微软、亚马逊、阿里、字节跳动、腾讯、百度、商汤、旷视等企业的核心技术人员。开源一个多月后,接到多家头部互联网企业和人工智能企业的使用意向。下一步,OneFlow将基于本次DLPerf测试报告,为开发者提供更多关于深度学习框架的系列课程、分享与论文,继续支持企业与机构对深度学习框架的性能优化,提升深度学习框架在行业中的应用水平。
关于OneFlow
OneFlow是一款用全新架构设计,世界领先的工业级通用深度学习框架,也是目前世界上唯一一款由创业团队研发的开源深度学习框架。OneFlow拥有完全自主知识产权,独创的自动数据模型混合并行、静态调度、去中心化和全链路异步流式执行四大核心技术,使用纯软件技术完美地解决了大数据、大模型、大计算所带来的异构集群分布式横向扩展挑战,技术水平世界领先。
关于一流科技
一流科技创立于2017年1月,始终立足于通用性深度学习标准框架的研发和推广使用,力争打造人工智能深度学习框架产品的引领者和事实工业标准。公司以“让AI无处不在”为愿景,以推动国产自主可控、成为世界领先的人工智能公司为使命,积极探索、坚持进步,致力于成为世界领先的AI基础设施科技企业。目前,一流科技公司连续完成由九合创投、天目创投、快手战投、聚卓资本等国内知名投资机构的数千万级风险投资。