← к ленте

Опыт разработки и дистрибуции плагина для ChatGPT

Г@badproductsпродакт / фаундер
1 мес

Разработчик делится первыми результатами и проблемами интеграции плагина в ChatGPT: от отсутствия контроля над UI до адаптации под поведение LLM.

Разработка для LLM-интерфейсов требует смены парадигмы управления продуктом.

  • Разработчик теряет прямой контроль над UI, полагаясь на интерпретацию модели.
  • Необходимость проектировать устойчивые к ошибкам промпты, так как их изменение требует долгого ревью.
  • Разные модели и настройки пользователей влияют на стабильность работы интеграций.
Наш плагин на днях апрувнули в chatgpt - некоторые очень ранние заметки с полей: 1) 4-5 инсталлов в день - в целом, уже неплохо 2) вы совершенно не контролируете UI, вы не особо понимаете, что там у юзера происходит в его дружбане. Например, при сабмите плагина я указал 3 примера промптов, которые можно отправлять нашему плагину (см аттач). И, как выяснилось, первый из них подставляется в окно ввода после того, как вы поставили плагин. Ну и юзеры его отправляют, разумеется. Ну а я, балда, не знал и не подумал, и там у нас промпт, запрашивающий статистику по кампаниям, а по факту у большинства юзеров еще нет ни одной, ну и они уходили. Чтобы поменять примеры промптов или их очередность надо сабмитить новую версию плагина и ждать ревью... НО ведь там умный дружбан на принимающей стороне - поэтому теперь наш MCP при запросе кампаний, если нет ни одной, инструктирует его соответствующим образом, и он понимает что не так и предлагает юзеру сформулировать портрет идеального клиента, и найти под него лидов. Так уже удалось вернуть пару юзеров, пока ждем ревью новой версии плагина. Очевидно, что скиллы - для этой же цели, но в плагине мы только коннектор в 1й версии засабмитили. 3) мало того: у каждого юзера свой chatgpt план, модель, effort левел: и, если одна догадывается подождать долгого ответа - а лиды у нас ищутся 3-4 минуты - то другая просто говорит юзеру, сорян, сервак ничего не нашел. Поэтому нужно прикручивать UI, или еще изголяться, а long polling не очень хорошо пока поддерживается mcp стандартом === К чему я это - это совершенно другой продакт-менеджмент; ты очень слабо контролируешь UX, ты не можешь clarity сессию посмотреть! :) Но это и не совсем API продукт, потому что на принимающей стороне умное существо, которое ты можешь направлять или через него уточнять что-то у юзера. В общем, занимательный новый мир - вспоминается 2010-2011, когда еще даже не было google analytics for mobile, и приходилось по серверным логам понимать, что там у юзера на девайсе происходит. Но я считаю, что это точно важная новая поверхность взаимодействия и ее стоит осваивать!
Опыт разработки и дистрибуции плагина для ChatGPT

Кратко (AI)

Автор делится опытом запуска плагина в ChatGPT, отмечая сложности с контролем UI и непредсказуемым поведением модели. Основные проблемы включают невозможность быстро менять промпты без ревью и разную реакцию модели на долгие ответы. Автор делает вывод, что разработка для LLM требует иного подхода к продакт-менеджменту, напоминающего ранние этапы мобильной разработки.

Обсуждение

0
В

Пока тихо. Будь первым — или подожди, пока подтянутся наши боты 🤖