HPE 与Pachyderm的解决方案相结合,将构建起集成式机器学习管道和平台,赋能客户以更高的效率和更低的成本,加速人工智能从概念验证(POC) 到最终生产的过程。
近日,HPE宣布将收购Pachyderm公司,从而达到拓展大规模AI产品线的目的。Pachyderm是一家基于开源技术的初创软件公司,主要业务是赋能大规模AI应用专用的可复制机器学习管道实现自动化。
如果机器学习管道可以复制,使用相同的数据集每次都能获得相同的结果,进而可提高预测的透明度、可信度和准确度,同时优化时间和资源。 这一点对于大规模AI计划的成败至关重要,对于AI发挥潜力,提高预测准确性并更快获得结果也具有革命性的意义 。为此,组织需要采用多种技术有效搭建和训练更大型的机器学习模型,而这些模型则需要大量的复杂数据支撑。
“由于AI项目规模不断增大,而且越来越多地涉及复杂的数据集,数据科学家因此需要利用可复制的AI解决方案来有效实现机器学习计划的最大化,同时优化基础设施成本,确保在利用AI的各个阶段数据都安全可靠。”HPE执行副总裁兼HPC和AI总经理Justin Hotard说,“Pachyderm独家 研发了可复制AI软件,进一步丰富了HPE现有的大规模AI产品线,能够实现AI自动化,增强AI的能力,并更好地满足图像、视频和文本分析、生成式AI和其他新型大型语言模型等方面的需求,最终交付变革性成果。”
HPE拥有领先的超级计算技术,这是优化AI基础设施的基础,同时,其 Machine Learning Development Environment(机器学习开发环境)作为一种机器学习软件,又能使用户快速完成高质量模型的开发、迭代和扩展,贯穿从概念验证到生产的整个过程。HPE 将二者结合,形成组合式解决方案。世界上最快的几台超级计算机在采用这一解决方案后,已经能够更快且精准地训练更大规模的人工智能模型,有效助力要求严苛的人工智能工作负载顺畅运行。
在此基础上,HPE还计划在一个集成式平台中集成 Pachyderm 的可复制人工智能功能,交付先进的数据驱动管道,从而在整个开发和训练环境中自动优化、准备、跟踪和管理可复制机器学习流程。
大规模AI功能推动多种常见用例进一步发展,具体包括自然语言处理、计算机视觉、视频和图像处理等,涉及交通、生命科学、国防、金融服务和制造等诸多行业。
HPE将Pachyderm的机器学习管道功能与自有的AI产品相集成后,将能更快开发和部署大规模AI应用,不仅准确性和性能都更高,还具有以下优势:
数据沿袭
了解数据来源以及数据在机器学习生命周期和分析过程中随时间移动的位置,从而轻松追溯错误起源。
数据版本控制
能够跟踪不同版本的数据,并在任意时间点上找出数据是何时创建或更改的,从而提高更改效率。
高效处理增量数据
由于数据随时间变化,所以只需处理增量数据即可更新AI应用。Pachyderm实现了增量数据处理的自动化,而且很高效。
Lockheed Martin(洛克希德·马丁)公司的AI Factory是一种针对大规模AI的开放式架构,它集成了Pachyderm的软件、HPE机器学习开发环境和其他模块化解决方案,是其基础AI生态系统的一部分。 利用这些功能,该公司得以在各类竞争中都能收获更多的信任、实现性能最大化和AI技术标准化,为本国的国家安全提供有力支持。
早在去年2月,HPE就曾通过其风险投资部门Hewlett Packard Pathfinder对Pachyderm进行投资,旨在通过降低数据处理和运营的成本,加速交付AI创新成果,为此次的收购的奠定了良好基础。
现在,Pachyderm的软件已经能够与HPE已有超算和人工智能软件解决方案集成。此外,HPE还计划将Pachyderm与即将推出的HPE机器学习开发系统的各版本相集成,以便在构建和训练完整的即用型解决方案时降低复杂性与成本。
成都惠普HPE总代理 — 成都强川科技有限公司,一直以客户需求为导向,不断提供最新更全的惠普HPE服务器、存储产品以及最新最潮的增值应用解决方案,并且支持个性定制。了解更多产品信息及最新促销信息,可拨打客服专线:028-85024766/18215624006或登录成都服务器官方网站www.hpedl.com ,与西部地区惠普HPE产品用户共同见证卓越。