三种要素的线性缩放

阿莫代伊将模型缩放比作一种化学反应，需要三种要素——更大的网络、更长的训练时间以及更多数据——同步线性缩放。仅缩放其中一种要素会导致过程停滞，因为其余‘反应物’耗尽。

Dario Amodei·已发布 2024年11月11日

预览链接在此环境中有效。公开卡片的URL仅在发布后可用。

观点背后的信息

翻译仅用于阅读理解；原始摘录仍为 source evidence。

达里奥·阿莫代伊、阿曼达·阿斯克尔与克里斯·奥拉赫谈人工智能发展与安全

原始摘录

almost like a chemical reaction, you have three ingredients in the chemical reaction and you need to linearly scale up the three ingredients. If you scale up one, not the others, you run out of the other reagents and the reaction stops.

翻译 · 非原文措辞

几乎就像一场化学反应，你有三种反应物，必须将这三种要素同步线性放大。如果你只放大其中一种，而不放大其余要素，就会耗尽其他反应物，反应便停止了。

上下文

打开原始内容 · 7:17 查看这场访谈

时间点来自所提供的转录稿，尚待媒体回放核对。