【最新】IBM 深度学习框架PowerAI，将训练时间从几周变成几小时

正文

请到「今天看啥」查看全文

新的 PowerAI 软件由四个主要部分组成

IBM 日前宣布在 Power Systems 上发布深度学习软件PowerAI 的新版本。这一 GPU 驱动的 AI 软件通过简化对开发经验的需求和对数据准备的要求，来解决数据科学家和开发人员面临的主要挑战，同时将 AI 系统训练所需的时间，从几周变为了几个小时。

新的 PowerAI 软件由四个主要部分组成：

• “AI Vision”是为深度学习知识有限的开发人员设计的一种工具，用于训练和部署计算机视觉的深度学习模型。

• 集成了 ApacheSpark 的 IBM Spectrum Conductor 集群虚拟化软件集成，轻松转换非结构化和结构化数据集，为其用于深度学习训练做准备。

• TensorFlow（谷歌构建的开源机器学习框架）的分布式计算版本，可以在GPU 加速服务器的虚拟化集群上运行，IBM 表示这将学习训练时间从几周削减到几个小时。

• “DL Insight” 是一种新工具，可帮助数据科学家通过监控深度学习训练过程并自动调整参数以达到最佳性能，从而提高深度学习模型的准确性。

“我们增加了一套工具来使数据科学家的工作变得更轻松，我们增加了一些功能来加快训练时间。”IBM 主管 HPC、AI 和 Analytic 的副总裁 Sumit Gupta 说，“PowerAI使数据科学家和开发人员更容易地使用 AI 来构建应用程序，而不必编写复杂的代码，担心集群管理之类的问题。”

Power Systems 与 x86 形成鲜明对比

IBM Cognitive Systems 高级副总裁 BobPicciano 说：“PowerAI的目标是尽可能简单、直观和有效地让数据科学家和新兴的认知技术开发者社群进入AI 的世界。PowerAI 减少了等待的挫折感并提高了生产力。Power Systems 专为数据和下一代计算而设计，与过去为客户/服务器可编程时代设计的 x86 服务器形成鲜明对比。”

电子内容管理公司Elinar Oy Ltd 的 CTO Ari Juntunen 表示：“IBM PowerAI 在带有GPU 加速器的Power servers 上提供了至少两倍于我们 x86 平台的性能。无论是增加内存还是设置新服务器，一切都更快捷简便了。”

IBM 还引用了韩国电力研究院（KEPRI）的例子，该机构希望使用无人机来检查高压电力线路。

“我们需要一个深度学习和高速存储平台，可以处理和存储我们从无人机上获得的大量图像/视频，”KEPRI 的陈武霖说，“（PowerAI）满足了这些需求，使我们能够改进系统，同时为我们降低成本。”

IBM 的 Gupta 表示，KEPRI 的需求是典型的计算机视觉工作负载的简化，PowerAI 和 AIVision 正是为此设计的。

他说：“耗时的部分原因是在 100M图像上使用像 TensorFlow 这样的框架。当您有100M的图像需要转换并准备输入到 TensorFlow 中时，您就会遇到挑战。我们使用SpectrumConductor 自动化数据准备和 ETL，它会自动启动整个 Spark 工作群集，每个Spark 一次转换500万个图像。从用户的角度来看，他们甚至不知道...它在集群上发起了大量的工作，他们只知道数据正在被转换。”

PowerAI 支持新的 NVIDIA Volta

请到「今天看啥」查看全文