Выпущен open-source инструмент lossless-doc-compress для сжатия документов

Представлен open-source инструмент lossless-doc-compress, который сжимает документы, удаляя «воду» и сохраняя ключевые факты, цифры и код.

Инструмент позволяет автоматизировать очистку документов от лишнего текста, сохраняя при этом все важные данные.

Автоматическое удаление «воды», повторов и избыточных формулировок.
Сохранение критически важной информации: цифр, решений, кода и таблиц.
Генерация лога изменений и scorecard для контроля качества сжатия.
Возможность интеграции через npx для быстрой работы с документами.

На основе пятничного поста про промт:

Сожми документ максимально, не потеряв никакой информации.

Превратили этот подход в отдельный open-source skill — lossless-doc-compress. Скилл читает документ целиком и относит каждый фрагмент к одной из трёх категорий: KEEP — содержит информацию и остаётся без изменений; REMOVE — доказуемо избыточен и удаляется; FLAG — требует решения автора, поэтому остаётся в документе с пометкой. Он удаляет filler, пустой hedging, LLM-slop, дословные повторы и избыточные формулировки. Сохраняет факты, цифры, решения, оговорки, ограничения, названия систем, код и таблицы. Если есть сомнение — не удалять, дает отметку для автора Результат: три артефакта: Сжатый документ. Лог всех удалений и спорных мест. Scorecard: число слов до/после, процент сокращения и подтверждение сохранности содержания. npx skills add ML-SystemDesign/MLSystemDesign Код и инструкция: https://github.com/ML-SystemDesign/MLSystemDesign/tree/main/skills/lossless-doc-compress Это пост был прогнан через скилл

Кратко (AI)

Команда ML-SystemDesign представила open-source инструмент lossless-doc-compress, предназначенный для сжатия текстовых документов без потери смысла. Алгоритм классифицирует фрагменты текста на сохраняемые, удаляемые и требующие проверки, очищая документ от избыточных формулировок и «воды».

Выпущен open-source инструмент lossless-doc-compress для сжатия документов

Кратко (AI)

Обсуждение