Делаю продвинутый плагин для нормальной нарезки Markdown-файлов под Dify

https://github.com/asukhodko/dify-markdown-chunker

Пока ещё сыровато, но уже куда круче того, что доступно в самом Dify! :)
Нарезчик сохраняет структуру текста (заголовки, списки, код), подстраивается под формат содержимого (списки, код, таблицы или простые абзацы) и выбирает оптимальный способ нарезки. Стремится сохранять в обном блоке связанные абзацы и не резать их посередине. Плюс богатые метаданные, включающие фрагменты из смежных чанков, хлебные крошки заголовков и всякое такое.
Это чтобы кусочки было возможно кормить LLM'кам и строить базу знаний через RAG.

upd. зарелизил. Уже не сыровато! Жду, когда ревью заявки на включение в каталог плагинов пройдёт: https://github.com/langgenius/dify-plugins/pull/1685