Back to Timeline
Avatar
Сиолошная

Новый график с прямыми линиями от наших любимых METR 👏

Предыдущий оказался насыщен (в нём не было более сложных и длинных задач для оценки), его давно не обновляли.

Его нарисовали как результат работы сотрудников METR в Anthropic (но это не совсем то же самое, к чему призывал Dario), гораздо больше деталей тут: https://metr.org/blog/2026-11-05-anthropic-ai-rd-acceleration-assessment/

«Мы представили компании Anthropic подробный отчет о нашей оценке объемом около 100 страниц. В публичной версии Anthropic отредактировала большую часть доказательств, которые мы сочли наиболее информативными. В результате общественности приходится полагаться на наше суждение больше, чем мы считаем оптимальным».

Главный вывод: начиная с октября 2025 года, показатели эффективности внутренних моделей растут примерно вдвое быстрее, чем в предыдущий период. Также аудиторы убедились, что это — не результат закидывания бОльшим количеством мощностей.