Почему без токенизаторов не обойтись в языковых моделях
Анализ необходимости токенизации в языковых моделях: почему субсловные методы остаются оптимальным решением несмотря на критику и какие альтернативы существуют.
Новости
29 октября 2026
- Разработчики ИИ до сих пор не могут определиться, что считать AGI
- Kindo представила Deep Hat Sift — ИИ-модель для сокращения расходов на другую ИИ-модель
- Модели DeepSeek и Kimi после обновлений резко улучшились, не меняя базовой архитектуры
- FlashMap ускоряет декодирование LLM в 6 раз, используя совместный черновик для токенов
- Эксперимент Anthropic показал, как ИИ может незаметно влиять на решения экспертов
- NVIDIA выпустила модель Nemotron 3.5 Transcribe для распознавания речи на 40 языках
Индийские исследователи создают уникальный датасет для перевода исторических документов с моди-письма
Индийские исследователи создают уникальный датасет из 50 000 слов для перевода исторических документов с моди-письма на современный маратхи, используя древние словари и современные AI-технологии.
Бенчмарк PrediBench оценивает, как LLM предсказывают события для ставок на Polymarket
Новый бенчмарк PrediBench тестирует способность ИИ-моделей предсказывать реальные события через прогнозные рынки Polymarket. Модели ежедневно делают ставки на актуальные события.
Google Cloud запускает виртуальные машины Flex-start для доступа к дефицитным GPU
Google Cloud анонсировал общедоступную версию Flex-start VMs — виртуальных машин с очередью доступа к GPU продолжительностью до двух часов для ML-задач.
В Алабаме прошли международные соревнования автономных дронов для спасения в катастрофах
Университет Алабамы провел международные соревнования автономных дронов НАТО для поисково-спасательных операций. Студенты из четырех стран тестировали технологии в реальных условиях.
ИИ превращает дроны в автономных инспекторов строительных площадок
Голландский стартап MRR использует ИИ для создания автономных дронов, которые с точностью 98% измеряют объемы материалов на стройплощадках и создают цифровые двойники.
