Google Cloud представила формат знаний OKF

Google Cloud представила Open Knowledge Format (OKF) — новую спецификацию для хранения знаний в виде Markdown-файлов с переносом между разными системами.

Формат развивает подход «LLM wiki», который недавно стал популярным после публикаций Андрея Карпати, и делает его совместимым с разными инструментами. В версии OKF v0.1 знания описываются как каталог Markdown-файлов с YAML-frontmatter.

Спецификация сделана минимальной. Обязателен только один параметр — type. Ещё есть несколько необязательных полей: title, description, resource, tags и временные метки. Остальная информация размещается в теле Markdown-документа.

Связи между понятиями строятся через обычные Markdown-ссылки, за счёт чего формируется граф знаний. Пакет OKF можно открыть в любом редакторе, просматривать на GitHub и индексировать любым поисковым инструментом.

Google Cloud отмечает, что во многих компаниях знания распределены по разным системам: каталогам метаданных, внутренним wiki, комментариям в коде, ячейкам ноутбуков и личным знаниям инженеров. Из-за этого ИИ-агенту, которому нужно, например, написать SQL-запрос для конкретного датасета, приходится собирать контекст из разрозненных источников.

По данным Google Cloud, сегодня разработчики агентов решают эту задачу по отдельности, а поставщики каталогов заново создают похожие модели данных. В компании приводят в пример Obsidian Vaults, подключённые к агентам для программирования, файлы AGENTS.md и CLAUDE.md, а также репозитории с «metadata as code» у дата-команд.

Как утверждает Google Cloud, все эти подходы во многом похожи, но обычно создаются под конкретную задачу и плохо совместимы друг с другом. В результате знания остаются внутри той системы, где были созданы. OKF должен закрыть этот разрыв.

Формат требует только поле type. Какие типы документов использовать, какие дополнительные поля добавлять и как строить содержимое, решает создатель данных. За счёт этого производители и потребители данных не зависят друг от друга: пакет, собранный человеком, может использовать ИИ-агент, а набор, созданный машиной, — визуализатор.

Google Cloud также заявляет, что OKF работает с любым облачным провайдером, любой базой данных и любым фреймворком для агентов.

Вместе со спецификацией компания выпустила несколько эталонных реализаций:

  • агент для обогащения данных, который обходит датасеты BigQuery и создаёт OKF-документ для каждой таблицы;
  • статический HTML-визуализатор;
  • три примера наборов данных: для GA4 e-commerce, Stack Overflow и Bitcoin.

Google Cloud также обновила Knowledge Catalog, чтобы он мог принимать OKF и передавать его агентам. Спецификация и код опубликованы на GitHub. Интеграция с Knowledge Catalog описана в отдельной документации.

Источник: The Decoder, Google Cloud.

Читать новости ИИ и технологий в Telegram.


Оцените статью
Gimal-Ai