Полезно думать так: файнтюнинг учит модель «как говорить», а не «что знать». Он хорош, когда нужен устойчивый стиль (тон бренда в тысячах ответов), жёсткий формат (модель всегда отвечает валидной структурой под вашу систему) или узкий жанр, которого мало в открытых данных.
Чему он не учит — вашим фактам. Yandex AI Studio прямо предупреждает в документации, что новой информации, например базе знаний поддержки, модель генерации так не выучить. Исследование 2024 года (Gekhman и соавторы) показало и обратную сторону: чем больше новых фактов модель выучивает при дообучении, тем чаще она потом галлюцинирует. Цены, наличие, регламенты меняются каждый день, а дообученная модель заморожена на момент обучения. Знания в момент запроса подаёт
RAG. Поэтому на просьбу «дообучите модель на наших данных» наш первый встречный вопрос: «данные меняются?» Если да — вам почти наверняка нужен не файнтюнинг.