Теги

Новости по тегу "operator"

RSS-лента
Абстрактная диаграмма: цепочка принятия роли IAM от Claude apps gateway к Bedrock-апстриму в отдельном аккаунте AWS, с уровнем принудительного применения guardrail

Claude Code 2.1.281: Bedrock-апстримы получили кросс-аккаунтный IAM и принудительный Guardrail

2.1.281 добавляет assume_role и guardrail в Bedrock-апстримы Claude apps gateway. assume_role обменивает IAM-учётные данные на per-developer STS-токены. guardrail применяет Bedrock guardrail к каждому запросу. Оба смещают границу доверия в мультиаккаунтных AWS-деплоях.

источник Anthropic
Абстрактная архитектурная диаграмма, показывающая трансформацию формы API-запросов при прохождении через шлюз, иллюстрирующая четыре ломающих изменения Claude Opus 5.5

Claude Opus 5.5: четыре ломающих изменения API и их влияние на маршрутизацию

Claude Opus 5.5: четыре ломающих изменения — thinking нельзя отключить, tool_choice типы any/tool возвращают 400, thinking-блоки не читаются не-Fable/Mythos моделями, computer_20251124 удалён. Конкретные исправления и влияние на резервную маршрутизацию.

источник Anthropic
Claude Code 2.1.275: регрессия шлюза — тег advisor_20260301 вызывает 400 на прокси с ANTHROPIC_BASE_URL, исправлено в 2.1.276

Claude Code 2.1.275 сломал все прокси-шлюзы. 2.1.276 исправил это в тот же день.

Тег advisor_20260301 в 2.1.275 сломал все прокси-шлюзы: 400 на каждый запрос. 2.1.276 вышел hotfix'ом в тот же день. Разбор механики сбоя, затронутых конфигураций и трёх дополнительных изменений для операторов.

источник Anthropic
Абстрактная схема уровня управления API-ключами организации над многопровайдерным маршрутизирующим gateway

Управление созданием API-ключей в OpenAI: как режим «только service account» закрывает дыру теневой маршрутизации

Новые орг-контроли OpenAI позволяют запретить создание личных API-ключей — первый механизм, структурно закрывающий теневую маршрутизацию в администрируемых организациях.

источник OpenAI
Claude API компакция по требованию и режим auto для разрешений: диаграмма пайплайна с фоновой суммаризацией и серверной оценкой доверия

Claude API: компакция по требованию и режим `auto` для разрешений меняют архитектуру агентных циклов

Два новых бета-обновления Claude API: `compact-2026-09-04` выносит суммаризацию в фоновый вызов, а режим `auto` передаёт оценку доверия к инструментам на сторону сервера. Оба меняют проектирование агентных циклов.

источник Anthropic
Диаграмма улучшений надёжности Claude Code 2.1.274 для операторов gateway: стабильность MCP-соединений и восстановление транскриптов

Claude Code 2.1.274: масштабное исправление MCP, конфигурация Postgres в gateway и самовосстановление транскриптов

Claude Code 2.1.274 устраняет шесть причин тихих сбоев MCP в production, добавляет store.connect_timeout_seconds и CLAUDE_CODE_GATEWAY_DRAIN_TIMEOUT_MS в Claude apps gateway, а также переводит повреждённые транскрипты на режим самовосстановления вместо бесконечного цикла.

источник Anthropic
Изменения Claude Code 2.1.273: hint-заголовки gateway и смена классификатора auto-режима, представленные как панель наблюдаемости прокси с сигналами классификации запросов

Claude Code 2.1.273: пять новых hint-заголовков для gateway и смена классификатора на Bedrock, Vertex и Foundry

Claude Code 2.1.273 добавляет opt-in hint-заголовки, передающие LLM-прокси класс запроса, тип агента и состояние компакции. Одновременно на Bedrock, Vertex AI и Foundry по умолчанию включается локальный классификатор auto-режима — откатить можно только это изменение.

источник Anthropic
Диаграмма маршрутизации с двумя активными API-эндпоинтами deepseek-v4-pro и deepseek-flash с разными лимитами конкурентности и ценовыми уровнями

DeepSeek V4 Pro пережил собственный дедлайн: что разворот означает для вашей политики маршрутизации

DeepSeek объявил 10 сентября, что V4 Pro будет отключён сегодня в 04:00 UTC. Вместо этого они отыграли назад под давлением пользователей, сохранив V4 Pro на прежних ценах. Разбираем актуальные параметры двух моделей и решения для routing-операторов.

источник DeepSeek
Абстрактная схема ротации и политики истечения API-ключей в multi-provider routing gateway

OpenAI теперь принудительно устанавливает срок действия API-ключей на уровне организации: что должны проверить операторы шлюзов

OpenAI теперь позволяет задавать максимальный срок жизни ключей на уровне организации или проекта. Существующие ключи не укорачиваются, но все новые обязаны истекать в рамках лимита — а ваш шлюз, вероятно, самое рискованное место хранения долгоживущих ключей.

источник OpenAI
Claude Code 2.1.269 operator changes: gateway timeout, concurrent agents cap, and deny rule scoping fix illustrated as a control panel

Claude Code 2.1.269: три оператор-уровневых изменения в релизе с 60+ исправлениями

Claude Code 2.1.269 добавляет настраиваемый таймаут обнаружения gateway, жёсткий лимит параллельных workflow-агентов и исправляет утечку deny-правил за границу их config-источника. Каждое из них меняет то, как операторы управляют Claude Code в масштабе.

источник Anthropic
Диаграмма исправлений gateway в Claude Code 2.1.268: HTTP 400 регрессия ANTHROPIC_BASE_URL и контроль gatewayInternalNetworks

Claude Code 2.1.268: Трёхверсионный сбой gateway, который прошёл незамеченным, и четыре новых контроля

Начиная с 2.1.265 каждый запрос через сторонний ANTHROPIC_BASE_URL endpoint завершался HTTP 400. Версия 2.1.268 устраняет регрессию, добавляет gatewayInternalNetworks, синхронизацию цен через gateway.yaml и байт-стабильный prompt cache для Bedrock, Vertex и Foundry.

источник Anthropic Claude Code
Редакционная иллюстрация с разветвляющимися путями API-маршрутизации, где ветвь agents sessions уходит в сторону от основного шлюза на тёмном приглушённом фоне

OpenAI Agents API Beta: Новый обход шлюза, который операторам необходимо учесть

Публичная бета Agents API от OpenAI вводит отдельное пространство имён client.beta.agents, не проходящее через /v1/chat/completions. Для команд с AI-шлюзами: слепые зоны в биллинге, пробелы в аудите и новый scope API key.

источник OpenAI
Диаграмма конфигурации оператора Claude Code 2.1.267 и архитектуры кэша промптов

Claude Code 2.1.267: Ограничение уровня Effort для операторов, стабилизация кэша промптов и исправление обхода контейнера маркетплейса

В 2.1.267: новый maxEffortLevel для Bedrock, Vertex и Foundry; флаг отключения снапшота промпта; исправление обхода контейнера маркетплейса. Плюс двенадцать исправлений кэша промптов, напрямую влияющих на стоимость токенов.

источник Anthropic Claude Code
Abstract API routing diagram showing deepseek-v4-pro requests being silently redirected to V4.1-Flash with a September 14 deadline

DeepSeek V4.1-Flash выходит с нативным зрением — и через четыре дня убивает deepseek-v4-pro

DeepSeek запустил V4.1-Flash с новым именем deepseek-flash и нативным зрением. 14 сентября в 12:00 по Пекину все запросы к deepseek-v4-pro уйдут на V4.1-Flash по ценам Flash. Имя и URL не меняются, код 200 — но модель другая. Дельта возможностей и что изменить до дедлайна.

источник DeepSeek
Схема ошибки аутентификации Claude Code gateway и исправление через обновление версии

Claude Code 2.1.266 исправляет регрессию gateway: кого затронуло и что делать

2.1.265 молча сломал все gateway- и proxy-конфигурации с CLAUDE_CODE_USE_GATEWAY, если рядом стоял API key или кастомная аутентификация. Разбираем точные условия, сообщение об ошибке и что версия добавляет для gateway-операторов.

источник Anthropic Claude Code
Техническая диаграмма, показывающая покрытие кэша промптов до и после границы результатов инструментов с выделенными платёжными токенами

Claude Code 2.1.260: Баг кэширования Fable 5.1, который незаметно опустошал кошелёк каждого агента с инструментами

Fable 5.1 кэшировал промпт, но не контекст после результатов инструментов: каждый вызов инструмента перевыставлялся по полной цене. 2.1.260 закрывает дыру в биллинге, добавляет причины промахов кэша и меняет управление CLAUDE.md.

источник Claude Code Changelog
Две разделяющиеся ветки ошибок API — 429 slow_down и 503 server_is_overloaded — с отдельными метками стратегии повторных запросов

OpenAI разделил 429 для ограничений: что 'slow_down' и 'server_is_overloaded' означают для вашей политики повторных запросов

OpenAI теперь возвращает разные коды ошибок для двух ситуаций: slow_down для слишком быстрого роста трафика и 503 server_is_overloaded для перегрузки модели.

источник OpenAI API Changelog
Диаграмма разветвления Chat Completions API и Responses API для вызовов инструментов GPT-6 Astra, с жёсткой блокировкой на пути Chat Completions

GPT-6 Astra отключает вызов инструментов через Chat Completions: что операторы должны изменить до направления трафика

GPT-6 Astra не принимает вызовы инструментов через Chat Completions, убирает temperature и top_p, добавляет два новых кода ошибок и запускает асинхронный мониторинг рассогласования. Разбираем, что реально ломается и как выглядит миграция на Responses API.

источник OpenAI API Changelog
Абстрактная схема: org-level MCP server governance — поток конфигурации от администратора к параллельным Claude Code сессиям

Claude Code 2.1.259: Org-Level MCP Server Push и исправление потери состояния при параллельных сессиях

Claude Code 2.1.259 добавляет managedMcpServers для централизованного развёртывания HTTP/SSE MCP серверов, меняет семантику allowedMcpServers и закрывает баг, из-за которого параллельные сессии тихо перезаписывали состояние ~/.claude.json в CI-окружениях.

источник Claude Code CHANGELOG
Абстрактная диаграмма маршрутизации API-запросов с узлами блокировки 400 и версионными шлюзами в технической визуализации конвейера

Fable 5.1 нарушает два оператора допущения: принудительные вызовы `tool_choice` и повторное использование Thinking Block

Fable 5.1 ломает два паттерна: `tool_choice: any` и `tool_choice: tool` возвращают 400, а Thinking Block версионно привязаны с проверкой префикса для новых аккаунтов. Оба требуют немедленной миграции.

источник Anthropic
Абстрактная схема маршрутизации с ветвлением коэффициентов стоимости по путям облачных провайдеров

Claude Code: рабочие пространства с data residency теперь несут надбавку 1,1× — это влияет на выбор provider

Claude Code 2.1.239 начал учитывать надбавку 1,1× за US-only inference в оценках /cost и строке статуса для data-residency workspace. Команды, маршрутизирующие через Bedrock или Vertex, обходят эту надбавку — разбираем, что это значит для выбора provider.

источник Claude Code Changelog
Абстрактная иллюстрация self-hosted runner, подключающегося через корпоративный egress proxy с динамически выдаваемым токеном авторизации

Claude Code 2.1.238: динамическая авторизация proxy и graceful shutdown для self-hosted runner

2.1.238 добавляет --proxy-authorization-command и --proxy-authorization-file для self-hosted runner, устраняя зависимость от статических заголовков при работе с корпоративными proxy. Также появился --defer-shutdown-max-min и расширен headersHelper.

источник Anthropic
Абстрактная иллюстрация: контрольная точка кэша восстанавливает эффективную передачу сигнала через слой AI-роутинга

Claude Code 2.1.237 исправляет prompt caching через LLM gateway — а 2.1.236 добавляет модель по умолчанию, которую можно переопределить

Claude Code 2.1.237 устраняет баг, который молча инвалидировал prompt cache для каждой сессии через custom base URL. Если вы маршрутизируете Claude Code через gateway, с момента версии 2.1.229 каждый запрос обрабатывался с полной стоимостью контекстного окна.

источник Anthropic
Абстрактная визуализация потока текстовых токенов со скрытыми паттернами водяного знака в распределении вероятностей

Текстовый водяной знак Claude приходит ко всем операторам: что Detection API SynthID-Text значит для вашего пайплайна

Будущие модели Claude встраивают водяной знак SynthID-Text глобально, отказаться нельзя. Detection API готовится. Операторам пайплайнов контент-модерации и compliance нужно понять, что знак доказывает и какие операции с токенами его уничтожают.

источник Anthropic
Абстрактная диаграмма: заголовки с идентичностью пользователя проходят через слой gateway к upstream-прокси

Claude Code 2.1.233: три изменения в gateway, о которых должен знать каждый operator

2.1.233 добавляет forward_user_identity настройку apps gateway для проброса идентичности разработчика в downstream-прокси, исправляет проглатывание ошибок 400/413 от Vertex и AWS, устраняет бесконечный цикл MCP v2 на serverless-хостах.

источник Anthropic
Claude Code 2.1.229 SSE keepalive gateway streaming Vertex AI Bedrock руководство оператора

Claude Code 2.1.229: SSE keepalive для Vertex и Bedrock устраняет тихие обрывы потока и ужесточает права на git push

Claude Code 2.1.229 добавляет SSE keepalive ping в gateway streaming-ответы во время долгих thinking-пауз, устраняя тихие idle-timeout разрывы на Vertex AI и Bedrock. /commit-push-pr теперь блокирует опасные git-флаги, sandbox — некорректные IPv6.

источник Claude Code Changelog
Схема разрешения model ID через gateway-прокси

Claude Code 2.1.223: исправлен баг обнаружения моделей в gateway, закрыты четыре обхода разрешений

Claude Code 2.1.223 исправляет баг, из-за которого Claude-модели с префиксными ID не отображались в кастомных API-шлюзах, закрывает четыре пути обхода разрешений и меняет поведение auto-compaction для моделей с окном 1М токенов.

источник Anthropic Claude Code
Абстрактная схема разрешения ARN-путей AWS Bedrock в отдельные уровни моделей с исправленным биллинговым реестром

Claude Code 2.1.218 устраняет скрытую ошибку биллинга Bedrock: операторы с ARN-маппингом моделей должны проверить исторические логи расходов

С февраля 2026 года Claude Code приписывал трафик Bedrock ARN к одному model ID, фиксируя ~$0.23 для Haiku и Opus одинаково. Версия 2.1.218 исправляет разрешение ARN, но исторические логи расходов gateway недостоверны.

источник Claude Code CHANGELOG
Абстрактная схема явных шлюзов управления, заменяющих пассивную автоматизацию, на тёмном техническом фоне с сдержанными акцентами TheRouter

Claude Code 2.1.215: /verify и /code-review больше не запускаются автоматически — что должен изменить каждый оператор

Версия 2.1.215 убирает автоматический запуск skill-команд /verify и /code-review. CI-пайплайны и фоновые агенты, полагавшиеся на пассивные контрольные точки, теперь обязаны вызывать их явно — иначе проверки просто не будут выполняться.

источник Anthropic Claude Code
Абстрактная схема многоуровневых шлюзов прав доступа и маршрутизационных путей на тёмном техническом фоне с приглушёнными акцентами TheRouter

Claude Code 2.1.214: семь исправлений обхода прав доступа, которые обязан проверить каждый оператор перед развёртыванием

Версия 2.1.214 закрывает семь путей обхода проверки прав в Bash и PowerShell, вводит обязательные запросы для Docker daemon-redirect, добавляет EndConversation в agentic-сессии и новые OTel-атрибуты для корреляции с биллингом на уровне gateway.

источник Anthropic Claude Code
Абстрактная схема маршрутизации с изображением контролей сессии и лимитов делегирования агентов

Claude Code 2.1.212: лимиты субагентов, автофон MCP и исправление кэширования на кастомных шлюзах

Версия 2.1.212 вводит настраиваемые лимиты субагентов и вызовов WebSearch на сессию, автоматически переносит долгие MCP-вызовы в фон и восстанавливает prompt caching за кастомными API gateway, Bedrock и Vertex.

источник Anthropic Claude Code
Абстрактная диаграмма жизненного цикла API ключей с таймерами истечения и мониторингом через Admin API на тёмном техническом фоне

Anthropic теперь требует срок истечения при создании API ключа: что операторы должны проверить до первого сбоя

Anthropic теперь требует решения о сроке истечения при создании API ключа. Admin API раскрывает поле expires_at для каждого ключа. Если ваша команда использует бессрочные ключи в production, изменение от 8 июля сбрасывает базовый уровень управления учётными данными.

источник Anthropic
Абстрактная редакционная графика в синих и нейтральных тонах, отображающая безопасный документооборот при включении HIPAA-совместимости для API-операторов

HIPAA для Claude API теперь подключается самостоятельно: что изменение BAA от 14 июля значит для операторов с медицинской нагрузкой

Anthropic сделала настройку HIPAA самостоятельной: администраторы Enterprise и API-организаций теперь принимают BAA и включают HIPAA в один клик — без отдела продаж. Что это меняет для routing-операторов с медицинскими нагрузками.

источник Anthropic
Абстрактная диаграмма API-вызовов, управляющих ролями и группами пользователей предприятия, в сдержанном тёмном техническом стиле

Admin API Claude Enterprise теперь управляет пользователями программно: что означает бета от 14 июля для операторов

14 июля Anthropic открыл бета-доступ к эндпоинтам управления пользователями Admin API для Claude Enterprise. Операторы теперь могут программно управлять участниками, назначать RBAC-группы и автоматизировать онбординг без входа в консоль.

источник Anthropic Platform
CVE-2026-55607 Claude Code sandbox escape чеклист аудита версий для операторов

CVE-2026-55607: Побег из песочницы Claude Code через worktree — чеклист аудита версий для операторов

CVE-2026-55607 — высококритичная уязвимость Claude Code: вредоносный репозиторий выводит coding agent за пределы macOS sandbox. Исправлено в 2.1.163, но операторам gateway требуется отдельный версионный контроль.

источник Anthropic / GitHub Security Advisory
Абстрактная схема маршрутизации на тёмном фоне: оборванный путь соединяется заново через сетевые узлы

Claude Code 2.1.203: Баг с потерей ANTHROPIC_BASE_URL молча отправлял запросы не на тот endpoint

Claude Code 2.1.203 исправляет критический баг: фоновые сессии агентов теряли ANTHROPIC_BASE_URL, отправляя API-ключи на endpoint по умолчанию и получая 401. Командам, роутящим Claude Code через кастомный AI gateway, необходимо срочно проверить окружение и обновиться.

источник Anthropic Claude Code
Абстрактная визуализация метрик производительности инженеров и управления токен-бюджетом для корпоративных AI-агентов программирования

Первое академическое исследование корпоративного развёртывания Claude Code: что 24% прирост в слияниях PR и миллионные расходы на токены значат для бюджетного управления

Microsoft Research впервые использовала прямую телеметрию для измерения ROI CLI-агентов программирования в масштабе предприятия — и задокументировала разрыв управления токен-бюджетом, вынудивший отозвать лицензии. Чеклист оператора перед масштабированием Claude Code.

источник arXiv
Абстрактная схема надёжного мультиагентного pipeline с верификацией TLS, retry backoff и защитой от ошибок

Claude Code 2.1.199: пять исправлений надёжности, которые каждый оператор обязан проверить прямо сейчас

Claude Code 2.1.199 устраняет пять критических проблем: ошибки TLS-прокси завершаются с подсказкой, subагенты перестают маскировать ошибки под успех, retry watchdog поднят до 300, починен kill-loop демона на Linux, SendMessage обнаруживает конфликт имён.

источник Anthropic Claude Code
Диаграмма трёх путей: Anthropic API напрямую, Claude Platform on AWS и Amazon Bedrock — с метками управления и размещения данных

Claude Platform on AWS: третий путь развёртывания, который обязан учитывать каждый оператор при настройке роутинга

Claude Platform on AWS предоставляет инфраструктуру под управлением Anthropic через биллинг AWS — с полной поддержкой beta-заголовков, Agent Skills и отдельным пулом мощностей для многоуровневого failover.

источник Anthropic Claude Platform
Техническая схема, показывающая два временных горизонта устаревания endpoint'ов Gemini Image API с датами отключения 25 июня и 17 августа как контрольными точками миграции для инженерных команд

Gemini API Image Generation 2026: как исправить failed to fetch после отключения preview-моделей

В 2026 году Gemini API проходит две миграции: после cutoff 25 июня preview-модели вызывают сбои failed to fetch, а GA-endpoint’ы Imagen 4 отключаются 17 августа. Проверьте model ID, перейдите на gemini-3.1-flash-image или gemini-3-pro-image и протестируйте generateContent.

источник Google AI for Developers
Claude Code 2.1.198 — схема gateway failover и маршрутизации через AWS

Claude Code 2.1.198: провайдер anthropicAws и продвижение цепочки failover — изменения на уровне gateway, которые необходимо знать операторам

Claude Code 2.1.198 добавляет Claude Platform на AWS как нативный upstream-провайдер gateway, продвигает цепочку failover при ошибках model-not-found и автоматически обновляет токены AWS STS — три изменения, напрямую влияющих на конфигурацию fallback у команд маршрутизации.

источник Anthropic Claude Code
Grok Build sandbox glob deny list защита на уровне ядра диаграмма маршрутизации оператора

Grok Build 0.2.66: glob-паттерны для deny-листов sandbox и защита на уровне ядра — что операторы обязаны проверить

Grok Build 0.2.66: glob-паттерны в deny-листах sandbox, kernel-level защита файловой системы для кастомных профилей и автовосстановление MCP-серверов — три изменения для аудита операторами перед деплоем.

источник xAI
Техническая схема изменений параметров API Claude Sonnet 5 с путями 400-ошибок и аннотациями разницы токенизатора

Три критических изменения API в Claude Sonnet 5: что обязан проверить каждый оператор перед миграцией

Claude Sonnet 5 несёт три скрытые угрозы для production: adaptive thinking включён по умолчанию, temperature/top_p/top_k с нестандартными значениями возвращают 400, новый tokenizer раздувает количество токенов примерно на 30%. Чеклист для операторов.

источник Anthropic
Техническая схема архитектуры чипа OpenAI Jalapeño с уровнями вычислений, памяти и сети, отражающая новый уровень инфраструктуры провайдера для команд маршрутизации AI

Чип Jalapeño от OpenAI: что означает собственный ASIC для пропускной способности API и маршрутизации

OpenAI и Broadcom представили Jalapeño — первый собственный ускоритель вывода LLM от OpenAI. Разбираем, что переход на проприетарный кремний означает для пропускной способности API, ценового тренда и решений по маршрутизации у AI-команд.

источник OpenAI
Редакционная схема wan2.7 video API routing: async video jobs проходят через регионы, очереди и fallback lanes

wan2.7 T2V Генерация Видео в DashScope: Маршрутизация Асинхронных Задач и Регионы Развертывания

DashScope предоставляет wan2.7-t2v для генерации видео по тексту, изображению и референсу через асинхронное API в Китае, международном и американском скоупах. Выберите регион, стратегию опроса job и fallback-пути до production.

источник Alibaba Cloud Model Studio
Абстрактная схема потока токенов в API-ответе с фильтрующим шлюзом, который выборочно отбрасывает уже обработанные блоки результатов поиска — иллюстрация параметра response_inclusion для контроля затрат

Claude API снижает затраты на поиск в агентных пайплайнах: параметр response_inclusion, который должен знать каждый оператор

Обновление платформы Anthropic от 11 июня добавляет response_inclusion к web_search_20260318 и web_fetch_20260318, позволяя операторам исключать уже обработанные блоки результатов поиска из API-ответа и снижать расходы на output-токены в многошаговых агентных воркфлоу.

источник Anthropic
Абстрактная визуализация safety gate, блокирующего деструктивную операцию в автоматизированном агентном pipeline

Claude Code 2.1.183: Auto mode блокирует деструктивные git- и IaC-команды — три изменения, которые должны проверить операторы gateway-развёртываний

Claude Code 2.1.183 ужесточает auto mode: деструктивные git- и инфраструктурные команды теперь заблокированы по умолчанию, закрыта уязвимость обхода approval через webhook-триггеры, исправлена утечка MCP auth stub в headless-режиме.

источник Anthropic / Claude Code
Схема песочницы с таймером 90 секунд и ветвлением маршрутизации: detection_timeout или успешный вывод

Инструмент выполнения кода Claude получает 90-секундный бюджет ячейки: что операторам нужно изменить в агентных конвейерах

code_execution_20260521 раскрывает 90-секундный лимит ячейки в описании инструмента: Claude планирует ячейки заранее, при превышении — detection_timeout. Операторам нужно обновить версию инструмента, логику повторов и стратегию разбивки ячеек.

источник Anthropic
Абстрактная схема, показывающая слои eval harness между моделью и benchmark-баллом, с ветвями routing-решений

Руководство OpenAI по eval harness: почему benchmark-баллы нельзя напрямую использовать для routing-решений

OpenAI опубликовала подробное руководство по проектированию надёжных сторонних оценок моделей. Главный вывод для операторов: выбор harness меняет измеренные возможности модели, поэтому benchmark-баллы требуют контекста перед применением в routing-политике.

источник OpenAI
Помощь и контакты