Emma

Краткое содержание:

  • Retrieval Augmented Generation (RAG) — техника, популяризированная Meta в 2020 году, повышающая производительность языковых моделей, предоставляя соответствующий контекст модели вместе с вопросом/деталями задачи.
  • Функционирование RAG включает три этапа: подготовку данных, извлечение и генерацию. Он может быть использован для улучшения производительности языковых моделей в задачах, таких как резюмирование, перевод и т. д., и особенно полезен, когда набор данных является динамическим или недостаточно большим.