LLM (большая языковая модель)

Трансформер

Архитектура нейросети, представленная в 2017 году в статье «Attention Is All You Need», которая лежит в основе почти всех современных LLM. Её ключевая идея — механизм внимания (attention), позволяющий модели учитывать связи между всеми словами текста одновременно.

Промпт-инжиниринг

Искусство и практика составления запросов (промптов) к ИИ так, чтобы получить максимально точный и полезный ответ. Включает формулировку задачи, добавление примеров и контекста, уточнение формата вывода.

RAG (генерация с дополнением поиском)

Техника, при которой модель перед ответом сначала находит релевантные документы во внешней базе знаний, а затем использует их как контекст для генерации. Снижает риск галлюцинаций и позволяет отвечать на вопросы про свежие или узкоспециализированные данные.