StreamVibe Ассистент от Google по видеопотоку с инициативой: сам решает, когда вмешаться, если просьба была расплывчатой. Обычные системы ждут команды с явным триггером, здесь достаточно цели. Внутри две части: потоковая модель и обвязка, которая ведет состояние запросов, прогресс и прошлые ответы. Сначала обучение с балансом молчания и речи, затем RL на коротких отрезках вокруг точек помощи. • Три уровня запроса: явный, неявный и меняющийся по ходу • Подсказка в нужный момент без напоминания • Отслеживание прогресса задачи, чтобы не повторяться и не давать устаревшие советы • Правка просьбы на ходу: добавил, заменил или перебил • Молчание по умолчанию, слово только в точке помощи Код/веса ждем #vlm #assistant #proactive MAX

Месяц, как я живу с личным ai-ассистентом/ консьержем Instinct и это просто вау! Все этого очень ждали, что с эрой ai кто-то да должен был решить вопрос создания консьерж сервиса, который сможет во много заменить людей и вот в августе этого года вся сеть “The X” забурлила рассказами про Instinct. 23-летний Ноа Шинн создал компанию буквально в прошлом году, а первые доступы в сервис были розданы в закрытое сообщество в феврале этого года. Идея в том, чтобы дать ai-ассистенту достаточно доступа и контекста, чтобы он мог реально совершать действия за пользователя, а не просто отвечать на вопросы. В августе новости про сервис просочились в Х, где кто-то восторгался, а кто-то писал про небезопасное хранение данных. Я, бесстрашный человек, попала в триал и дала сервису доступы ко всему что у меня есть: календари, банки, Miro, gmail и тд. Для того, чтобы понять, а каким здесь может сервис и он оказался неплох. Во-первых, мне очень нравится его TOV (tone of voice), просто посмотрите на срине, как он мне сообщает о том, что у меня на один тайм слот в календаре наложились три встречи. Во-вторых, также прикладываю скрин, как ловко он бронирует мне ресторан, сам проводит оплату, распознает что я от него хочу несмотря на все мои ошибки в тексте, тоже самое он ловко проделал и с бронью билетов! В-третьих, он посмотрел мою доску Miro и предложил неплохие идеи. В общем, обожаю все то, что сейчас происходит в мире ai и как это проникает в нашу физическую жизнь.

Собирал ассистента, который пишет как я. Самый важный шаг оказался вообще не про промпт Первую версию я делал вечером и очень собой гордился. Расписал роль, тон, задачи, накидал правил на две страницы: пиши коротко, без канцелярита, с самоиронией, начинай с хука. Запустил. Ассистент выдал текст, который мог написать кто угодно. Гладко, ровно, мёртво. Ни одной моей интонации. Пошёл разбираться и понял, где промахнулся. Я словами объяснял модели, как надо писать. А учится она по примерам. Поэтому шаг первый в сборке любого ассистента, который должен звучать как ты, это референсы. Шаг 1. Собираем референсы Референсы это посты, которые показывают твой стиль, плюс стили авторов, которые тебе нравятся. Звучит до смешного просто. «Ну выбрать посты, что тут сложного». Понимаю) Но вся работа с нейронкой держится ровно на этом: показываешь качественные примеры, получаешь качественный результат. Не покажешь, она возьмёт что-то усреднённое из интернета и вернёт тебе это же с добавлением слова «важно отметить». Откуда брать. Два варианта. 1. Твои собственные посты Есть свои тексты и тебе нравится, как ты пишешь, берёшь свои. Только выбирай честно. Не по охватам. Бери те, где ты сам себя узнаёшь при перечитывании. 2. Посты авторов, которые тебе нравятся Своих мало или хочешь, чтобы ассистент писал в духе конкретных людей, берёшь чужие. Смешивать тоже можно, я так и делаю: половина своих, половина у тех, чей слог мне нравится. Что делаешь прямо сейчас: 1. Находишь минимум 10 постов, которые нравятся тебе по стилю или структуре. Свои, чужие, вперемешку. Складываешь в один документ, он понадобится на следующем шаге, для разбора. 2. Кидаешь в комменты под этим постом ссылки на каналы авторов, которые тебя вдохновляют. Соберём общую копилку живых слогов, пригодится всем. На всё про всё уйдёт полчаса. Зато дальше ассистент опирается на твои живые примеры и звучит твоим голосом с первого прогона. Погнали, жду ссылки в комментах) Лаборатория нейросетей