Тег
#русский язык
Статьи блога Persona с тегом «русский язык» — 5 материалов.
Статей с тегом: 5
Что такое токен
Токен — не слово и не буква, а кусок текста, которым модель оперирует на самом деле. Разбираем, почему русская фраза стоит вдвое дороже английской того же смысла.
ТехнологииЧто такое токенизация
Токенизация — правило, по которому текст режется на куски перед подачей в модель. У каждой модели оно своё, поэтому один и тот же запрос у разных провайдеров стоит по-разному.
ОсновыИИ-ассистент на русском: какие модели реально говорят по-русски
«Отвечает по-русски» и «думает по-русски» — разные вещи, и разница видна в токенизации и в счёте за API. Методика самопроверки и таблица расхода на одинаковом тексте.
Своя модельEmbed-модели для поиска по памяти: чем они отличаются
Embed-модели различаются двумя вещами, которые решают всё: качеством на русском и размерностью вектора. Считаем размер индекса арифметикой и разбираем цену смены модели.
ГайдыКак выбрать модель для русского языка
Четыре проверочных промпта на падежи, аббревиатуры, канцелярит и транслитерацию отсеивают модели за полчаса — быстрее и точнее любого англоязычного рейтинга.
На этой странице совпадений нет
Живой фильтр ищет только по загруженным карточкам. Нажмите «Найти», чтобы искать по всему блогу.