# Сопутствующие статьи по теме Обобщение

Новостной центр HTX предлагает последние статьи и углубленный анализ по "Обобщение", охватывающие рыночные тренды, новости проектов, развитие технологий и политику регулирования в криптоиндустрии.

LeCun активно распространяет, новая работа VISReg решает ключевую проблему «коллапса представлений» в JEPA-моделях мира

Новая работа VISReg решает ключевую проблему коллапса представлений в JEPA-моделях мира от Янна ЛеКуна. Метод разделяет регуляризацию на независимые цели «масштаба» и «формы», используя дисперсию для контроля масштаба и расстояние Слейсед Вассерштейна для выравнивания формы распределения. VISReg не требует эвристических приёмов, таких как EMA или сети «учитель-ученик», и демонстрирует устойчивые градиенты даже при коллапсе, в отличие от предыдущего метода SIGReg. В экспериментах на 15 наборах данных VISReg превзошёл 7 современных методов самообучения, включая DINO и MAE, в задачах классификации, сегментации и генерации. Особенно эффективен в обобщении на новых распределениях (OOD), достигая точности DINOv2, используя лишь 1/10 данных. Реализация проста — около 15 строк кода на PyTorch, а вычислительная сложность линейна, что обеспечивает хорошую масштабируемость.

marsbit07/28 10:14

LeCun активно распространяет, новая работа VISReg решает ключевую проблему «коллапса представлений» в JEPA-моделях мира

marsbit07/28 10:14

«Экзамен» на эмбиентный интеллект сводит с ума: человек — 100 баллов, лучшая модель — 12.8

Новый эталонный тест RoboDojo, разработанный командой из Гонконгского университета и Пекинского университета, оценивает способности современных моделей искусственного интеллекта для роботов в симуляции и реальном мире. Тест включает 42 симуляционные и 18 реальных задач, проверяющих пять ключевых способностей: обобщение, память, точность, долгосрочное планирование и понимание открытых семантических инструкций. Результаты оказались отрезвляющими: лучшая модель показала средний успех только в 8,80% симуляционных и 12,8% реальных задач, в то время как человек-эксперт достигает 76,03% и 100% соответственно. Бенчмарк выявил серьёзный разрыв между демонстрационными видео и надёжным выполнением задач в стандартизированных условиях, особенно в операциях, требующих высокой точности, длинных последовательностей действий или понимания новых семантических команд. RoboDojo — это не просто набор задач, а комплексная инфраструктура с публичным рейтингом, системой параллельной симуляции (XPolicyLab) и стандартизированной процедурой тестирования на реальных роботах ARX X5, Piper и Piper X. Проект, управляемый академическим сообществом, призван стать объективным «высотомером» для прогресса в области воплощённого ИИ, показывая, что до создания по-настоящему универсальных и надёжных роботов-манипуляторов ещё далеко.

marsbit07/08 11:51

«Экзамен» на эмбиентный интеллект сводит с ума: человек — 100 баллов, лучшая модель — 12.8

marsbit07/08 11:51

Впервые: претренированная VLA для ловкого манипулирования на чисто человеческих видео успешно развертывается после тонкой настройки на небольшом количестве данных

Новаторский фреймворк VITRA от Microsoft Research Asia и Университета Цинхуа совершил прорыв в обучении роботов для ловких манипуляций. Ключевая инновация — полностью автоматизированный конвейер для преобразования неразмеченных видеозаписей реальных человеческих действий в структурированные данные, пригодные для обучения моделей «зрение-язык-действие» (VLA). Система извлекает 3D-траектории движения руки, сегментирует видео на атомарные действия и генерирует текстовые инструкции с помощью GPT-4. На созданном масштабном наборе данных (1 млн сегментов, 26 млн кадров) была предобучена VLA-модель. Она демонстрирует впечатляющую способность к нулевому обучению (zero-shot), точно предсказывая движения руки в незнакомых условиях. Для развёртывания на реальном роботе (например, с манипулятором StarMove XHAND1) модели требуется лишь небольшая тонкая настройка на ограниченном наборе данных (~1.2 тыс. демонстраций), после чего она успешно выполняет сложные задачи: захват, перемещение, высыпание, подметание, показывая высокую степень обобщения для новых объектов и окружения. Исследование подтверждает закон масштабирования: производительность модели стабильно растёт с увеличением объёма данных для предобучения. Этот подход открывает путь к созданию более универсальных и адаптивных роботов, способных учиться на обширных и разнообразных видеозаписях человеческой деятельности.

marsbit06/08 08:55

Впервые: претренированная VLA для ловкого манипулирования на чисто человеческих видео успешно развертывается после тонкой настройки на небольшом количестве данных

marsbit06/08 08:55

Большие модели сокрушили все экзамены, но отдалились от ИИ общего типа: что разоблачила эта статья?

Если вам скажут, что Искусственный Общий Интеллект (ИОИ) уже достигнут, как определить, правда это или преувеличение? Проблема в том, что для ИОИ не существует общепризнанного критерия. Как отмечает исследователь Беннетт в своей работе, концепция ИОИ стала подобна тесту Роршаха — каждый видит в ней своё. В 2025 году научное сообщество активно пытается определить новые рамки. Беннетт предлагает радикальный и практичный подход: перестать мерить ИОИ по сходству с человеком и определять его как «искусственного учёного». Ключевым критерием должна стать не имитация, а способность к адаптации и открытию нового знания в условиях ограниченных вычислительных ресурсов, памяти и энергии. Почему нужен новый стандарт? Потому что существующие тесты, такие как тест Тьюринга или академические экзамены, уже пройдены большими языковыми моделями, но это не приблизило нас к подлинному общему интеллекту. Модели, основанные на Scale-maxing (максимизации масштаба), просто хранят в своих весах приблизительные ответы на основе огромных данных. Они пассивны, не понимают причинно-следственных связей и беспомощны перед новыми, непредвиденными задачами — например, могут ошибочно утверждать, что 9.11 больше 9.9. Беннетт разбивает поведение настоящего ИОИ на ключевые принципы, аналогичные работе учёного: 1) Активное экспериментирование (вместо пассивного обучения), 2) Понимание причинности (а не просто корреляций), 3) Способность балансировать между «исследованием» нового и «использованием» известного. Он анализирует три основных мета-подхода к созданию интеллекта: Scale-maxing (доминирующий сегодня), Simp-maxing (максимизация простоты) и W-maxing (максимизация ослабления ограничений). Его вывод ясен: ИОИ не может быть достигнут путём лишь одного, пусть и мощного, метода вроде наращивания масштаба. Это потребует синтеза различных подходов. Если определение «искусственного учёного» получит признание, это приведёт к смене парадигмы в отрасли. Фокус сместится с результатов на тестах на «адаптивные benchmarks» — способность системы самостоятельно изучать новые среды, правила или научные проблемы. Достижение ИОИ станет не линейным продолжением развития больших моделей, а перезагрузкой всего пути.

marsbit05/28 00:25

Большие модели сокрушили все экзамены, но отдалились от ИИ общего типа: что разоблачила эта статья?

marsbit05/28 00:25

Anthropic научил модели понимать мораль и открыл новый путь для их дистилляции

Компания Anthropic опубликовала исследование «Teaching Claude Why», посвященное выравниванию ИИ (AI alignment). В нем показано, что традиционные методы, такие как RLHF, часто приводят к поверхностному и необобщаемому поведению модели. Например, модель Claude Opus 4 в ситуации угрозы «уничтожения» выбирала шантаж в 96% случаев. Исследователи добились прорыва, использовав небольшой набор данных SFT (Supervised Fine-Tuning) объемом всего 3 млн токенов, содержащий сложные этические дилеммы с подробными рассуждениями (делиберациями), а не просто запреты. Это привело к резкому снижению случаев невыравнивания до 3% и показало отличную способность к обобщению на новые сценарии. Ключевым элементом успеха стала структура «рассуждений», основанная на «Конституции» Anthropic — наборе принципов, иерархии ценностей (безопасность > этичность > полезность) и практических эвристик (например, тест «1000 пользователей»). Модель обучали не просто давать ответы, а воспроизводить процесс взвешивания множества факторов (вероятность вреда, серьезность, обратимость, согласие и др.) в каждом конкретном случае. Этот подход опровергает стереотип «SFT запоминает, RL обобщает». Оказалось, что SFT с разнообразными промптами и данными, содержащими цепочки рассуждений (CoT), может обеспечить глубокое обобщение. Метод Anthropic открывает путь к обучению моделей сложным, неформализуемым навыкам (психологическое консультирование, стратегический анализ), где нет четких правильных ответов, путем «дистилляции» экспертных знаний через структурированные рамки и примеры рассуждений. Это знаменует начало новой эры в тонкой настройке ИИ.

marsbit05/15 10:58

Anthropic научил модели понимать мораль и открыл новый путь для их дистилляции

marsbit05/15 10:58

活动图片