📃Google представили NATURAL PLAN: бенчмарк для LLM для задач планирования на естественном языке

Представляет реалистичный бенчмарк для планированияс поездок, встреч и календарного планирования.

Это на удивление сложная задача для современных моделей.

https://arxiv.org/abs/2406.04520

@bigdatai