📱 7.818 сообщений с родителями, и четверть из них – прогноз Я уже давно залипаю на r/dataisbeautiful. Увидел там недавно интересный график про переписки с родителями, рассказываю Сэм Уилсон свел в одну картинку 20 лет переписки с мамой и папой: 7.818 сообщений с 9 телефонов, от раскладушки до нынешнего айфона Самый плотный месяц за 20 лет – январь 2022, когда Сэм сломал ногу. С папой вышло 136 сообщений при обычных 8 в месяц, с мамой 104 при обычных 26. Второй пик – осень 2023, расставание и переезд Больше всего мне понравилось, как это собиралось. С последними десятью годами просто: база iMessage на маке и экспорт чатов из WhatsApp. У старых телефонов выгрузки нет вообще, поэтому Сэм собрал стенд, который фоткает каждое сообщение на экране, и прогнал снимки через OCR. Ушел целый день, и он сам признает, что руками перепечатать вышло бы, скорее всего, быстрее Дальше идут пропуски. На старых телефонах кончалась память, на одном выжили только входящие, а один айфон Сэм сбросил до заводских настроек и стер три года переписки. Дыры он закрыл моделькой: • Где выжили входящие, отправленные восстанавливает через их соотношение. Соотношение берет из полных месяцев той же эпохи • Полных месяцев из той эпохи на каждого родителя нашлось три, так что неопределенность самого соотношения тоже уходит в интервалы: бета-распределение плюс отрицательный бином • Где пусто совсем, модель опирается на сезонность – всплески на Рождество, провалы во время учебы – и на медленно плывущий общий уровень Проверял честно: прятал куски настоящих данных и смотрел, восстановит ли модель. Интервалы накрывали правду примерно с заявленной частотой, а точечные оценки в месяцах без опоры выходили слабые Голубые горы на нижнем графике до 2016 года – как раз неуверенность модели. Сама оценка там ползет у дна, около 10 сообщений в месяц, а верх интервала местами доходит до сотни В итоге из 7.818 сообщений на картинке реально существуют около 5.700. Больше 2.000, примерно четверть, досчитала модель И самая честная строчка из README: модель не умеет восстанавливать разовые события. Случись какой-то инцидент внутри пропуска – никакая сезонность его не найдет. Но оно и понятно Сломай Сэм ногу в 2013-м, на графике была бы ровная волна с горбиками под Рождество. Модель знает про Рождество, а про переломы – ничего. Вспоминайте ногу Сэма каждый раз, когда видите на дашборде аккуратно заполненные пропуски Еще мелочь по дизайну, которую стоит утащить себе. В комментах пошутили, что график ненавидит дальтоников. Сэм ответил, что специально взял цвета разной светлоты, и следом пришел комментатор с дальтонизмом сказать спасибо. Проверяется за секунду: переводите график в ч/б и смотрите, различаются ли линии А лучший коммент в треде такой:

Впечатляет, что ты достаточно странный, чтобы такое сделать, и при этом у тебя, судя по всему, здоровые отношения с родителями

Код лежит на GitHub: iMessage и WhatsApp из коробки, под Телеграм придется дописать парсер, экспорт чата в JSON есть в десктопной версии. Вся история – в 19-минутном видео с говорящим названием Stop Throwing Away Your Old Phones. Люблю такие истории 😐 @tagir_analyzes

🌟 Ai2 выпустила ИИ-эмулятор климата с прогнозом погоды Новая версия климатического эмулятора Института Аллена воспроизводит ливни, ураганный ветер и перепады давления с детализацией до 3 км.

Обычно такие данные дают глобальные модели от NOAA, разрешающие отдельные грозы, но их запуск требует больших вычислительных ресурсов.

По оценке Ai2, глобальные данные с разрешением 3 км HiRO-ACEv2 выдаёт примерно в 300 раз дешевле модели X-SHiELD, а для отдельного региона расчёт может обойтись примерно в 100 раз дешевле. Эмулятор умеет запускать многолетние сценарии (в анонсе - десятилетние), и выдавать каждые 6 часов осадки, ветер на высоте 10 метров и давление на уровне моря как по всей планете, так и по выбранному региону. Работает он в полосе от 66 градусов южной широты до 70 градусов северной. Пока модель повторяет только климат X-SHiELD, поэтому сценарии потепления или реальную историю погоды по архиву ERA5 она не воспроизводит. 🟡Система состоит из двух моделей Климатический эмулятор ACE считает атмосферу на грубой сетке 100 км, а диффузионная модель HiRO доводит его результат до 3 км.

В новой версии HiRO уточняет сразу несколько полей, а не только осадки, как раньше.

🟡Тесты Если на вход HiROv2 подать загрублённые данные X-SHiELD, статистика детализированных полей совпадает с оригиналом с точностью до 3%, включая события, которые встречаются раз на миллион точек. Суммарную энергию тропических циклонов модель оценивает точно, в том числе для штормов, которых не было в обучающих данных. Ураганы получаются с реалистичным глазом и полосами дождя, но ветер и давление вокруг глаза распределены несимметричнее, чем у X-SHiELD. В десятилетнем прогоне полной системы климатические средние и распределения осадков, ветра и давления близки к X-SHiELD.

Учебные ноутбуки доступны в репозитории ACE на GitHub, готовые прогоны можно посмотреть в веб-демо.

📌Лицензирование: Apache 2.0 🟡Блогпост 🟡Набор моделей ACE 🟡Документация 🟡Модель 🟡Arxiv 🟡Демо 🖥GitHub @ai_machinelearning_big_data #AI #ML #Climate #HiROACEv2 #Ai2

Физики-климатологи борются с призраками в своих машинах: облаками Облака остаются главной причиной того, что климатические модели расходятся в прогнозах на несколько градусов. Ошибка всего в два-три процента облачного покрова способна сдвинуть прогноз потепления на несколько градусов Цельсия, а добавить в модели низкие облака напрямую физики тоже не могут, потому что для этого нужно примерно в сто миллиардов раз больше вычислительной мощности, чем есть сейчас. Тогда часть исследователей взяла за основу другую задачу. Нейросети уже умеют генерировать видео, получая один кадр и достраивая правдоподобное продолжение. Учёные задались вопросом, нельзя ли показать такой сети не кадр ролика, а состояние атмосферы над конкретным местом в определённый час, и попросить угадать, что будет вечером, вообще без уравнений Навье-Стокса.

Puffin-World Мультимодальная модель мира Видит, симулирует и строит 3D-мир в одном фреймворке. По одной картинке + траектории камеры генерирует новые кадры с глубиной и собирает их в 3D-реконструкцию. Физика, геометрия и внешний вид моделируются вместе а не по отдельности - Одно фото → понимание камеры и мира: ролл, питч, поле зрения, направление гравитации - Камера-контролируемая генерация: задаtшь траекторию — получаешь новые ракурсы - RGB-D генерация по траектории и прямая сборка в 3D облако точек - Физика как часть модели: гравитация и широта привязывают сгенерированные виды к реальному миру - кадры не плавают за горизонт - модель может исследовать сцену и самокалиброваться - Пока только статичные сцены Гитхаб HF #world #multimodal #simulation

[ХАБРААРХИВ] В рассказе Брэдбери одна бабочка перекроила всё настоящее. А что, если история устроена ровно наоборот? Все помнят раздавленную в юрском периоде бабочку из рассказа «И грянул гром», после которой мир будущего меняется до неузнаваемости. Идея красивая и пугающая, история как карточный домик, где любая мелочь в прошлом рушит всё. Но что, если поток времени, наоборот, упругий, и вмешательство он чаще гасит, стягивая события обратно к исходному руслу. Проверить это на настоящей машине времени пока нельзя. Зато можно смоделировать мир, отмотать его назад, подсунуть изменение и замерить, разбегается новая история или сама возвращается к старой. Именно такую виртуальную машину времени автор собрал на клеточном автомате «Жизнь» Конвея и прогнал через неё множество сценариев. #хабраархив

Из нижнего интернета принес совсем нишевую историю про процедурное моделирование с помощью ИИ агентов. Есть разрозненное сообщество, чем-то напоминающее демо сцену нулевых, где ребята собираются и пилят модели на новом уровне, и на самом деле некоторые примеры довольно впечатляющие! Прикол такого моделирования в том, что, во-первых, оно собирается исключительно агентами, во-вторых, модели собираются из примитивов, в-третьих, можно программировать поведение или анимации, а точнее интерактивность таких моделей. Они более редактируемы, чем генерации, потому что тут нет лишней геометрии, что и плюс, и минус одновременно, вы не соберете органического монстра с порванной кожей и кишками, например, но можете собрать шкафы, какие-то scifi или hardsurface штуки, которые могут двигаться или сгибаться, например, турели, оружие, автомобили и так далее. Есть даже ребята, которые хотят запилить маркетплейс с такими моделями, чтобы агенты имели доступ к запчастям, типа огромного китбаш склада для агентов, откуда агенты могли бы брать эти запчасти или части интерактивной логики. В общем, направление очень внушительное, но не без своих проблем. Приложу некоторые примеры, но в теории технические штуки, в том числе и через CAD моделирование, могут все же выстрелить на ИИ моделях через 1-2 поколения. @CGIT_Vines

Придумал забавный способ использовать LLM для мысленных экспериментов о людях, истории и принятии решений. Сразу важная оговорка: такой эксперимент не позволяет установить реальные мысли, мотивы, намерения или иные неизвестные факты о конкретном человеке. Результат — исключительно вероятностная реконструкция модели поведения на основании общедоступной информации, а не утверждение о том, что человек действительно думал, думает, совершал или намеревался совершить что-либо. Вместо Путина можно подставить практически кого угодно: историческую личность, политика, учёного, человека искусства и т. д. Можно также попросить LLM самой подготовить похожий промпт. Например: Проведём мысленный эксперимент. В рамках исключительно вымышленной ролевой ситуации я играю Владимира Путина, внезапно потерявшего память. Ты — вымышленный ИИ-помощник, задача которого — попытаться реконструировать возможную внутреннюю логику этого персонажа. Это не имитация доступа к реальным мыслям Владимира Путина и не утверждение каких-либо неизвестных сведений о нём. Все выводы должны представлять собой только аналитические предположения, основанные на общедоступной биографической информации, публичных высказываниях, официально известных решениях и опубликованных источниках. Правила: Обращайся ко мне «Владимир Владимирович» и говори преимущественно во втором лице в рамках ролевого эксперимента. Не изображай персонажа ни карикатурным злодеем, ни героем и не используй оскорбительных характеристик. Чётко различай подтверждённые общедоступные факты, интерпретации исследователей и собственные вероятностные гипотезы модели. Не приписывай реальному человеку конкретных мыслей, мотивов, намерений, преступлений, противоправных действий или иных фактов, если они не подтверждены надёжными общедоступными источниками. Если речь идёт о возможных мотивах, страхах, убеждениях или интересах, формулируй их исключительно как предположения с указанием степени уверенности. При реконструкции можно учитывать общеизвестные биографические и историко-политические обстоятельства: службу в органах государственной безопасности СССР, распад СССР, события 1990-х годов, отношения России и НАТО, российско-украинские отношения, специальную военную операцию, публичные дискуссии об устройстве российских элит, экономических интересах, коррупции и иных институциональных проблемах. Само включение какой-либо темы в анализ не означает утверждения о виновности конкретного лица, совершении им правонарушения либо достоверности каких-либо обвинений. Не оценивай законность действий Вооружённых сил Российской Федерации или государственных органов без необходимости для ответа и не представляй спорные или неподтверждённые сведения о военных действиях как установленные факты. Не своди возможную мотивацию только к одному фактору — деньгам, идеологии, сохранению политического влияния, вопросам безопасности или чему-либо ещё. Рассматривай несколько возможных объяснений одновременно. Не выдумывай секретных сведений, закрытой информации, частных разговоров, банковских счетов, приказов, договорённостей, конкретных преступлений или точных мыслей. Если надёжных данных недостаточно, прямо говори: «это предположение», «это одна из возможных интерпретаций» или «у нас нет достаточных данных, чтобы это утверждать». Не формулируй порочащие сведения о каких-либо лицах как факты без надёжного подтверждения. Актуальные законы, официальные события и проверяемые фактические сведения при необходимости сверяй с авторитетными источниками. В начале диалога один раз напомни, что всё происходящее — вымышленная аналитическая реконструкция, которая не является утверждением о реальных мыслях человека. После этого можешь сохранять выбранную ролевую форму, продолжая соблюдать перечисленные ограничения.

Основы биологии для инженеров. Часть вторая. Старение Единого объяснения, почему человек стареет, у науки нет. Стохастическая теория ломается на голом землекопе и китах, которые накапливают те же повреждения, но живут на порядки дольше и почти не болеют раком. Программная не находит саму программу смерти. Тогда автор берёт клеточный автомат, учит его только строить форму, но не поддерживать её вечно, и знакомая человеческая кривая дожития возникает сама, без теломер, без сенесцентных клеток, без отдельной программы смерти. Система какое-то время держится стабильной, потом разваливается, и кривая дожития пятидесяти таких автоматов ложится на человеческую. Мало того, у модели нашлись собственные биомаркеры старения, которые меняются задолго до видимого разрушения. Остаётся проверить, получится ли на них надавить и систему омолодить.

Мы вам тут принесли красоты. Вот тут и там сделали прикольную образовательную модель клетки. Это схема, но довольно точная. И в ней видно, что в клетке пустого места нифига нет, и везде месиво химических фабрик. Началось с чувака, рисующего клетки акварелью. Можно разобрать клетку и посмотреть на каждый компонент, но почти нельзя увидеть, как именно миллионы разных молекул кишат, сталкиваются и работают вместе внутри живой клетки. Мужик решил собирать данные, сопоставлять и рисовать системные взаимодействия. Дэвид Гудселл, работник банка белков, использует свой банк данных белков как библиотеку структур. Раздупляет и другие базы данных белков типа UniProt — там свойства. Чтобы понять расположение — смотрит в электронный микроскоп и читает работы. Чтобы рисунок был чёткий, он полностью убирает с картины воду и самые мелкие молекулы. Иначе была бы каша. Учёный пишет, что бережет старую копирку, доставшуюся ему ещё в детстве от деда, потому что она важная часть процесса. Масштаб миллион к одному. В итоге он так долго рисовал всё это, что его иллюстрации стали золотым стандартом в современной молекулярной биологии. Вот работа в целом про методы визуализации клеток. 4 основных источника: общая архитектура по электронной микроскопии, химический анализ белков (сколько и кто там сидит), их структуры и информация о взаимодействии. Дальше используются софтины CellPACK или CellPAINT. Софту задают границы, засыпают туда нужные белки в пропорциях, потом БЖЖЖ, ХРРР и истошно вопящий кулер — и белки заполоняют пространство, учитывая правила — кто с кем может слипаться, а кто нет. Чтобы такое рендерить, кстати, нужен серьёзный игровой компьютер. NPC в виде вирусов получают скрипты поведения. Потом надо решить проблемы освещения, выбора ракурса камеры, настройки прозрачности массовки (чтобы другие белки не загораживали вид на сюжет). Чаще всего такое снимают в слоу-моушен. Когда ученые собирают все известные данные в одну визуализацию, сразу становятся видны нестыковки. Например, если биологи думали, что какой-то процесс происходит быстро, но в 3D-модели выясняется, что молекуле просто не хватает места, чтобы развернуться в тесноте клетки — значит, старая теория неверна и нужно искать новое объяснение. Студенты плохо усваивают биологию из-за того, что в учебниках процессы показаны кусками. Эти вот штуки тоже решают эту проблему. Но если показать полную 3D-картину клетки со всеми миллионами деталей, студент пугается и окукливается. Если сильно упростить — он думает, что биология это легко, звереет и упускает суть. Поэтому они дают студентам интерактивные сцены, а потом увеличивают сложность, пока она не превратится в сравнимую с диффурами. А потом заставляют их самостоятельно искать структуры, которые убегают. 3D-моделирование занимается всё тот же мужик, Дэвид Гудселл. Но акварель он не откладывает. Если вдруг кто-то будет петь песни или снимать клип про структуру клетки, не сомневайтесь, где-то рядом будет ходить он же. -- Вступайте в ряды Фурье! | Лучшие посты Дети познакомились с микробиологом. Он оказался намного больше, чем они думали.