Статьи о больших языковых моделях

Четыре задачи и поисковые термины

• retrieval augmented generation — RAG, ответы с использованием найденных документов.
• instruction tuning — обучение выполнению инструкций.
• model quantization — уменьшение точности представления параметров для более экономного запуска.
• language model evaluation — оценка ответов и поведения языковых моделей.

Примеры условий для arXiv

Большая часть языковых исследований относится к cs.CL; также полезен cs.LG. Сокращение RAG лучше сочетать с языковой рубрикой, чтобы отсечь посторонние значения.

В «Сложном запросе» первый пример ищет генерацию с поиском. Второй находит работы об оценке языковых моделей.

cat:cs.CL AND (all:"retrieval augmented" OR all:RAG)
all:"language model" AND all:evaluation

Как следить только за нужным направлением

В боте нажмите «Добавить тему» → arXiv → «Ключевую фразу» и отправьте retrieval augmented generation, instruction tuning или model quantization. После ответа «Добавлено» откройте «Последние работы» выбранной подписки.

Если хотите оценить широту всей темы, добавьте large language model отдельным условием. Управлять объёмом уведомлений удобнее через удаление слишком широких подписок и ежедневную подборку в «Настройках».

Как выбрать работу для практического применения

Запишите, какая модель использована, открыт ли её запуск и сколько ресурсов нужно. В статье об оценке найдите примеры заданий и ошибок, а в работе о RAG — способ поиска и состав документов. Если авторы публикуют код, посмотрите, можно ли повторить небольшой пример до изучения всей системы.

Английские термины для поиска

retrieval augmented generation

генерация с поиском по документам

instruction tuning

обучение выполнению инструкций

model quantization

квантование модели

Частые вопросы