Kimi K3: что проверить перед использованием API
Kimi K3 имеет смысл проверять на том потоке, ради которого её хотят подключить. Обзор модели полезен, когда после чтения понятно, что делать в понедельник: какой public_id взять, какие входы подготовить, по какому правилу остановить пилот и где не строить предположений о лицензии или возможностях без первичного источника.
Коротко
Убедитесь, что Kimi K3 публична в каталоге на момент настройки.
Пилотируйте модель на данных с заранее известным критерием приёмки.
Отдельно проверяйте свойства API, качество ответа и внешние условия использования.
С чего начинается работа с Kimi K3
Откройте каталог моделей и скопируйте идентификатор без изменений. В Relay запрос выбирает модель по public_id, поэтому название из обзора или скриншота не заменяет значение в настройке. Для текстового пилота используйте поддерживаемый формат Chat Completions и отдельный ключ для эксперимента.
Ключ должен быть отделён от рабочего потока. Тогда расход и ошибки не смешаются с пользовательскими запросами, а эксперимент легко удалить или повторить. Не ставьте широкий маршрут до первого измерения: одна модель в тестовом ключе даёт заметно больше информации.
Как собрать пилотный набор
Выберите десять-пятнадцать входов из одного сценария. Для извлечения это могут быть обезличенные письма с проверяемыми полями. Для кода - уже закрытые задачи с тестом. Для ответа пользователю - обращения, где ревьюер может точно отделить факт от догадки.
Добавьте неудобные примеры: пропущенное поле, противоречие в тексте, слишком длинная инструкция, несколько допустимых вариантов. Модель, которая справляется только с ожидаемым вводом, создаст ложное ощущение готовности. Критерий лучше сформулировать до первого запуска, чтобы не подстроить его под красивый ответ.
Материал о проверке моделей на своих задачах помогает построить такой набор и сохранить его для повторного сравнения.
Что фиксировать у каждого прогона
Сохраните вход, версию промпта, public_id, результат валидатора и решение ревьюера. Если ответ не прошёл, отметьте причину: неверный формат, пропущенный факт, лишнее действие или неясный отказ. Просто строка «плохо ответила» не поможет исправить маршрут.
У API есть отдельная техническая сторона. Неверный ключ или недоступная модель дадут ответ с кодом ошибки, а не оценку качества. Справочник таких случаев находится в документации ошибок. Содержательную ошибку проверяйте своим валидатором или человеком, который знает ожидаемый результат.
Как считать цену принятого результата
После прогона откройте журнал запросов и отфильтруйте тестовый ключ. Сложите расход всех вызовов сценария, включая отклонённые попытки и повторы, затем разделите его на число принятых результатов. При нуле принятых результатов метрика не определена. Отдельно покажите расход отклонённых попыток. Итог полезнее, чем цена одного запроса: работа команды начинается после ответа модели, а не заканчивается в момент получения токенов.
Не переносите эту цифру на другой сценарий. Объём контекста, формат и число повторов меняют расход сильнее, чем название модели. Новый поток получает новый тест, даже если в нём снова участвует Kimi K3.
Что не следует выводить из одного обзора
Свойства весов, лицензионные условия, параметры подписок, внешние сервисы и политика разработчика не подтверждаются карточкой Relay. Проверяйте их на первичных страницах перед тем, как выбирать архитектуру или обещать возможность пользователям. Без такой проверки корректнее описать вопрос в техническом плане, а не выдавать предположение за факт.
Если нужен выбор между несколькими семействами, начните с сравнения моделей по сценариям. Оно помогает не перепутать проверку качества с условиями внешнего продукта.
Можно ли подключить Kimi K3 в рабочий поток сразу после карточки?
Технически карточка помогает получить точный идентификатор, но этого недостаточно для рабочего решения. Сначала проведите небольшой пилот на отдельном ключе, проверьте формат ответа и посчитайте повторные попытки. После этого можно назначать модели ограниченный сценарий с понятным критерием эскалации.
Как проверять модель, если в задаче нет готового эталонного ответа?
Сделайте проверку из нескольких наблюдаемых условий. Для текста это могут быть обязательные факты, запрет на неподтверждённые утверждения и редакторское решение. Для кода - тест, ограничение diff и ревью. Если условия нельзя сформулировать, сначала сузьте задачу, иначе сравнение будет спором о впечатлении.
Нужно ли показывать пользователю резервный путь модели?
Обычно нет. Резервный маршрут относится к доступности и настраивается на ключе. Перед включением прочитайте правила в документации: он срабатывает только до начала ответа, а фактическая цена зависит от выполнившего маршрут. Качество результата резервный путь не оценивает и не гарантирует.