Как решить проблему нестабильности LLM-оценок в корпоративных приложениях
Scale обнаружила фундаментальную проблему нестабильности LLM-оценок с вариативностью до 15% и предложила решение через когорту из трех моделей-судей.
Scale AI
Scale AI — инфраструктура для обучения AI. Разметка данных, RLHF, оценка моделей. Поставщик данных для OpenAI, Meta и других гигантов.
Новости
Scale AI запускает в США национальную программу обучения школьников основам ИИ
Scale AI запускает масштабную программу обучения ИИ для американских школьников и учителей с конкретными цифрами: 1000 педагогов и 500 тысяч студентов к 2029 году.
Низкооплачиваемых работников из Африки массово нанимают, чтобы обучать языковые ИИ-модели
Расследование показывает, как африканские работники становятся разменной монетой в гонке ИИ-разработок, страдая от тактики «трудового хеджирования» вместо обещанной стабильной занятости.
Инструментальные цепочки ИИ: почему стандартный подход к обработке данных не работает и как это исправить
Scale AI обнаружила фундаментальную проблему цепочки инструментов в LLM и предложила революционный подход: заставить модели генерировать планы вместо выполнения задач.
Scale AI представила метод обучения ИИ через структурированные рубрики вместо простых оценок
Scale AI представила Rubrics as Rewards — метод обучения ИИ через детализированные чек-листы вместо упрощенных оценок, что даёт до 28% улучшения качества ответов.
Партнерство Meta и Scale AI трещит по швам
Стратегическое партнерство Meta* и Scale AI сталкивается с проблемами: отток ключевых сотрудников, предпочтение конкурентов и вопросы к качеству данных.
