OpenAI发布Procgen Benchmark，防止AI模型过度拟合

2019年12月05日由 KING 发表 574204 0

在机器学习模型的训练方面，总是存在过度拟合（或过于接近）特定数据集的风险。实际上，流行的机器学习基准（例如Arcade Learning Environment）鼓励过度拟合并不是不可行的，只是因为它们不太重视泛化。这就是为什么OpenAI今天发布了Procgen Benchmark的原因，Procgen Benchmark是一组利用16种程序生成的环境（CoinRun，StarPilot，CaveFlyer，Dodgeball，FruitBot，Chaser ，Miner，跳线，Leaper，迷宫，BigFish，Heist，Climber，Plunder，Ninja和BossFight）来衡量模型学习通用技能速度的模型。它在初CoinRun工具集基础之上构建，该工具集使用过程生成来构建训练和测试级别集。OpenAI在博客中写道：“我们希望两全其美：一个包含许多不同环境的基准，每个环境从根本上都需要泛化。为满足这一需求，我们创建了Procgen Benchmark，以致力于实验上的便利，环境内的高度多样性以及环境之间的高度多样性。CoinRun现在成为Procgen Benchmark的首创环境，为其多样性做出了贡献。”

根据OpenAI的说法，Procgen环境的设计具有很大的自由度（受基本设计约束），从而为AI驱动的代理带来了有意义的通用化挑战。还对它们进行了校准，以确保基准代理在训练了2亿个时间步之后可以取得显着进步。此外，Procgen环境支持两个“经过良好校准”的难度设置：简单和困难。（前者的目标用户是计算能力有限的用户，因为这需要大约八分之一的资源进行训练。）并且他们模仿了许多Atari和Gym Retro游戏的风格，与先例保持一致。

随着训练集的增长，AI模型的性能通常会提高。博客作者解释说：“我们认为，培训绩效的提高来自不同级别的隐性课程。如果在训练集中的各个级别进行概括，那么更大的训练集可以提高训练效果。”

OpenAI写道：培训和测试表现之间的巨大差距揭示了在按照固定级别的顺序进行环境的培训中一个关键的隐藏缺陷。OpenAI让未来的工作更加复杂，它相信这将为更强大，更高效的AI模型提供借鉴。OpenAI先前发布了Neural MMO，这是一个“大规模多主体”虚拟训练场，可以在类似于RPG的世界中代理；而Gym则是强化学习算法的试验场。最近，它提供了SafetyGym，这是一套用于开发AI的工具，该AI在训练时遵守安全约束，并用于比较算法的“安全性”以及这些算法在学习过程中避免错误的程度。

标签：

机器学习 AI框架

0 评论

欢迎关注ATYUN官方公众号

商务合作及内容投稿请联系邮箱:bd@atyun.com

上一篇利用深度学习神经网络处理光信号

下一篇通过机器学习保护雨林

评论登录

要发表评论，您必须先登录。

jonatasgrosman/wav2vec2-large-xlsr-53-english facebook/dino-vitb16 bert-base-uncased xlm-roberta-large xlm-roberta-base gpt2 microsoft/resnet-50 facebook/dino-vits8

最好的基于Transformer的LLM（上）