HackerNews

TOON – トークン指向オブジェクト表記法

TOON – Token Oriented Object Notation

https://github.com/johannschopplich/toon


TOON(トークン指向オブジェクト表記法)は、構造化データを大規模言語モデル(LLM)に渡すために設計されたコンパクトで人間に読みやすいフォーマットです。従来のJSONよりもトークン効率が高く、30%から60%少ないトークンで情報を伝えることが可能です。TOONは、YAMLのインデントベースの構造を取り入れ、CSVのタブ形式を使用しており、一貫性のある複雑なオブジェクトを扱うのに最適です。また、冗長な句読点を排除し、可読性を高めるためにインデントを使用する設計です。このフォーマットは、AIのデータ入力を効率化し、コストを削減することを目的としています。具体的なベンチマークも示されており、TOONは標準的なJSONやXMLと比べて大幅なトークン削減を実現しています。