Cohere: Command R (08-2024)

cohere/command-r-08-2024

Command-r-08-2024 — это обновление Command R с улучшенной производительностью для многоязычной генерации с расширенным поиском (RAG) и использования инструментов. В более широком смысле, он лучше справляется с математикой, программированием и рассуждениями и конкурирует с предыдущей версией более крупной модели Command R+. Прочитайте пост о запуске здесь (откроется в новой вкладке). Использование этой модели регулируется Политикой использования Cohere(откроется в новой вкладке) и Соглашением SaaS(откроется в новой вкладке).

Модальности

Цена ввод / вывод

от17 ₽/M

от69 ₽/M

за 1M токенов

Контекст128K

Релиз30 авг. 2024 г.

Провайдеры

Одна и та же модель может быть доступна у разных провайдеров. Маршрутизация выбирает эндпоинт по политике, цене, задержке и доступности.

Провайдер	Тариф	Задержка P50	Ток/с P50
ru_openrouter	Ввод25 ₽/M Вывод99 ₽/M	—	—
polza	Ввод17 ₽/M Вывод69 ₽/M	—	—
bothub	Ввод24 ₽/M Вывод97 ₽/M	—	—

Тарифы

Тарифы зависят от модальности: токены (₽/1M), аудио/embedding (часто только ввод), видео и запуски — в отдельных единицах. Текущие тарифы по провайдерам — в таблице выше; ниже — история прайс-листа в разрезе провайдеров (₽/1M токенов, 7 дней). Провайдеры — в подсказке на графике.

Вводот 17 ₽за 1M токенов

Выводот 69 ₽за 1M токенов

Производительность

Пропускная способность — скорость генерации (ток/с, выше лучше). Задержка — полный round-trip (ниже лучше). TTFT — время до первого токена (ниже лучше). Графики разбиты по провайдерам — нажмите expand для деталей.

Пропускная способность—лучший провайдер

Задержка—P50, лучший провайдер

Бенчмарки

Для этой модели пока нет опубликованных результатов бенчмарков.

Активность

Объём запросов и токенов к модели за последние 7 дней.

Доступность

Доля успешных ответов за период. Мониторинг эндпоинтов и автоматический fallback при ошибках upstream.

Быстрый старт

Готовый код для вызова модели. API совместим с OpenAI — достаточно указать base_url LLM Mart. Меняется только slug модели: cohere/command-r-08-2024.

curl -s "https://llmmart.ru/api/v1/chat/completions" \
  -H "Authorization: Bearer $LLM_ROUTER_API_KEY" \
  -H "Content-Type: application/json" \
  -d '{
    "model": "cohere/command-r-08-2024",
    "messages": [
      {"role": "user", "content": "Привет!"}
    ]
  }'

Нужен API-ключ организации — создайте ключ в личном кабинете или см. инструкцию. Подробнее: первый запрос к модели и примеры SDK.