Бенчмарк для оценки автономного проектирования чипов нейросетями
NVIDIA и ChipAgents
представили бенчмарк Build-A-Chip-Bench, проверяющий способность ИИ-агентов самостоятельно проектировать полноценные процессоры. По результатам тестирования модель на базе Claude Fable 5.1 показала результат всего в 16,6%.
Около 40% решений успешно проходят функциональную верификацию, но лишь 10% соответствуют строгим физическим требованиям, необходимым для создания рабочего чипа. Тем не менее, по словам CEO ChipAgents Уильяма Ванга, нейросети уже сократили цикл разработки с двух лет до года, а в перспективе этот показатель может снизиться до 4–6 месяцев.