Object Concepts Emerge from Motion: обучение сегментации через движение

Новый метод обучения нейросетей распознаванию объектов на видео без ручной разметки, основанный на анализе движения.

Технология позволяет создавать системы компьютерного зрения без дорогостоящей ручной разметки данных.

Снижает затраты на подготовку обучающих выборок для нейросетей.
Повышает эффективность обучения моделей для автономного вождения.
Позволяет использовать огромные массивы неразмеченных видео из интернета.

Object Concepts Emerge from Motion Метод учит нейросеть видеть объекты на картинке без ручной разметки просто наблюдая за движением Идея из детской психологии: младенец понимает, что части двигаются вместе, значит это один объект. Авторы применили то же к ИИ: если кусок видео движется как единое целое, считаем его объектом. Разметка не нужна, видео в интернете полно. Результат: на готовом фото модель сама разделяет машины, людей, тротуары. Сравнима с конкурентами, которых учили на дорогой размеченной разметке. Главное применение - автономное вождение: глубина, 3D-детекция, планирование пути Гитхаб HF #segmentation #video2feature VK | MAX

Object Concepts Emerge from Motion: обучение сегментации через движение

Кратко (AI)

Исследователи представили метод обучения нейросетей, позволяющий распознавать объекты на изображениях без использования размеченных данных. Алгоритм анализирует движение элементов на видео, определяя их как единые объекты, что позволяет достичь результатов, сопоставимых с моделями, обученными на дорогостоящей ручной разметке.

Object Concepts Emerge from Motion: обучение сегментации через движение

Кратко (AI)

Обсуждение