导航菜单

DeepMind与Waymo合作提高AI精度 加速模型训练

我想在2天前分享的第一个电网

7月26日,据美国技术媒体Venturebeat称,谷歌的两兄弟公司 Waymo正在与DeepMind合作。他们最近在一篇博文中透露,双方共同开发了受进化生物学启发的技术。

Waymo解释说AI算法来自我通过反复试验和反复试验。该模型被赋予一项任务,需要通过继续根据收到的反馈进行尝试和调整来学习如何完成任务。完成任务在很大程度上取决于培训计划,找到最合适的培训计划通常是经验丰富的研究人员和工程师的工作。他们仔细选择了训练有素的AI模型,消除了性能最差的模型并释放了资源,并从头开始训练新算法。

DeepMind在PBT(基于人口的培训)中设计了一种劳动强度较低的方法,从随机变量(超参数)生成的多个机器学习模型开始。模型定期进行评估,并以渐进的方式进行竞争,以便将表现不佳的模型替换为“后代”(具有较小变异性变量的性能较好的模型的副本)。 PBT不需要从头开始重新训练,因为每个后代都会继承父网络的状态,并在整个训练过程中主动更新超参数。最终结果是PBT可以利用其庞大的资源来训练“好”的超参数。

PBT并不完美它倾向于优化电流,但不考虑长期结果,这不利于AI模型的后期开发。为了缓解这种情况,DeepMind研究人员培训了大量模型(“人口”)并创建了称为“利基”的子群体,其中算法仅与他们自己的子群体中的模型竞争。

在最近的研究中,DeepMind和Waymo试图将PBT应用于行人,自行车和摩托车识别任务,以研究该算法是否得到进一步改进。最后,两家公司希望培养一种能够保持99%以上的整体障碍识别率并减少误报的AI模型。

根据Waymo的说法,这些实验为评估真实世界模型的稳健性提供了一个“现实的”框架,这反过来又为PBT的竞争算法选择提供了基础。他们还表示,该实验还反映了通过快速评估支持进化竞争的必要性; PBT模型可以每15分钟评估一次。

结果令人印象深刻。根据Waymo的说法,PBT算法可以达到更好的准确率,与手动调整的等效值相比,误报率可以降低24%,而识别率仍然保持在较高水平。此外,PBT算法节省了时间和资源。

Waymo说,它已将PBT直接纳入Waymo的技术基础设施,允许该公司的研究人员只需点击一下按钮即可应用该算法。该公司在一篇博文中写道:“PBT使我们能够超越培训神经网络的更新规则以及优化我们所需功能的复杂指标。”

以上内容是从其他媒体转载而来,目的是传播更多信息,转载的内容并不代表第一个电网(位置。

收集报告投诉

7月26日,据美国技术媒体Venturebeat称,谷歌的两兄弟公司 Waymo正在与DeepMind合作。他们最近在一篇博文中透露,双方共同开发了受进化生物学启发的技术。

Waymo解释说AI算法来自我通过反复试验和反复试验。该模型被赋予一项任务,需要通过继续根据收到的反馈进行尝试和调整来学习如何完成任务。完成任务在很大程度上取决于培训计划,找到最合适的培训计划通常是经验丰富的研究人员和工程师的工作。他们仔细选择了训练有素的AI模型,消除了性能最差的模型并释放了资源,并从头开始训练新算法。

DeepMind在PBT(基于人口的培训)中设计了一种劳动强度较低的方法,从随机变量(超参数)生成的多个机器学习模型开始。模型定期进行评估,并以渐进的方式进行竞争,以便将表现不佳的模型替换为“后代”(具有较小变异性变量的性能较好的模型的副本)。 PBT不需要从头开始重新训练,因为每个后代都会继承父网络的状态,并在整个训练过程中主动更新超参数。最终结果是PBT可以利用其庞大的资源来训练“好”的超参数。

PBT并不完美它倾向于优化电流,但不考虑长期结果,这不利于AI模型的后期开发。为了缓解这种情况,DeepMind研究人员培训了大量模型(“人口”)并创建了称为“利基”的子群体,其中算法仅与他们自己的子群体中的模型竞争。

在最近的研究中,DeepMind和Waymo试图将PBT应用于行人,自行车和摩托车识别任务,以研究该算法是否得到进一步改进。最后,两家公司希望培养一种能够保持99%以上的整体障碍识别率并减少误报的AI模型。

根据Waymo的说法,这些实验为评估真实世界模型的稳健性提供了一个“现实的”框架,这反过来又为PBT的竞争算法选择提供了基础。他们还表示,该实验还反映了通过快速评估支持进化竞争的必要性; PBT模型可以每15分钟评估一次。

结果令人印象深刻。根据Waymo的说法,PBT算法可以达到更好的准确率,与手动调整的等效值相比,误报率可以降低24%,而识别率仍然保持在较高水平。此外,PBT算法节省了时间和资源。

Waymo说,它已将PBT直接纳入Waymo的技术基础设施,允许该公司的研究人员只需点击一下按钮即可应用该算法。该公司在一篇博文中写道:“PBT使我们能够超越培训神经网络的更新规则以及优化我们所需功能的复杂指标。”

以上内容是从其他媒体转载而来,目的是传播更多信息,转载的内容并不代表第一个电网(位置。