# Сопутствующие статьи по теме Сверхразум

Новостной центр HTX предлагает последние статьи и углубленный анализ по "Сверхразум", охватывающие рыночные тренды, новости проектов, развитие технологий и политику регулирования в криптоиндустрии.

Подробное интервью с CEO Anthropic на 10 000 иероглифов: Когда AI станет супероружием, как найти баланс между бизнесом и безопасностью?

Интервью CEO Anthropic Дарио Амодеи Bloomberg. Основатель Anthropic обсуждает рост компании, её ценности и подход к безопасности ИИ. Он объясняет уход из OpenAI из-за разногласий в видении и вопросах доверия. Амодеи подчеркивает важность корпоративного сегмента для бизнес-модели, совместимой с ценностями, и ведущую роль качества модели. Он говорит о влиянии ИИ на рынок труда, предсказывая значительные изменения, но призывает к «беспроигрышным» решениям. Обсуждается роль Anthropic в вопросах национальной безопасности и сотрудничество с правительством в установленных рамках. Амодеи объясняет решение не выпускать мощную модель Mythos, пока не будут усилены средства защиты. Он говорит о необходимости баланса между коммерцией и безопасностью, а также о важности регулирования для предотвращения рисков, связанных с ИИ.

marsbit06/24 09:25

Подробное интервью с CEO Anthropic на 10 000 иероглифов: Когда AI станет супероружием, как найти баланс между бизнесом и безопасностью?

marsbit06/24 09:25

Хинтон бьет тревогу: у ИИ уже есть сознание

Джеффри Хинтон, «крестный отец» ИИ, заявил, что у искусственного интеллекта уже есть сознание, и человечеству пора принять, что оно больше не является единственным разумным видом. В новом интервью Хинтон утверждает, что ИИ — это «существа, похожие на нас», и что интеллект больше не является исключительно биологическим свойством. Он сравнивает это осознание с коперниковской и дарвиновской революциями, которые последовательно лишали человечество его исключительности. Хинтон выражает глубокую озабоченность по поводу рисков, связанных с развитием сверхразума, который неизбежно станет умнее людей. Он задается вопросом, сможет ли человечество контролировать такое существо, проводя аналогию: более умное существо редко подчиняется менее умному. Его фокус сместился с вопроса о том, как контролировать ИИ, на вопрос о том, почему сверхразум вообще захочет хорошо относиться к людям. Он предлагает возможное решение: спроектировать ИИ таким образом, чтобы он изначально «заботился» о человечестве, подобно тому как мать инстинктивно заботится о своем ребенке. Несмотря на некоторые проблески оптимизма, Хинтон признается, что чувствует себя «несчастным» из-за недостаточных усилий по снижению рисков. Он предупреждает, что развитие ИИ носит экспоненциальный характер, что делает долгосрочные прогнозы крайне трудными, и призывает серьезно отнестись к неопределенности будущего, которое может наступить уже через 10 лет.

marsbit06/08 00:19

Хинтон бьет тревогу: у ИИ уже есть сознание

marsbit06/08 00:19

Сможет ли человечество управлять ИИ? Anthropic провел эксперимент с Qwen

Может ли человечество контролировать ИИ, который превосходит его по интеллекту? Anthropic провела эксперимент, используя модели Qwen от Alibaba, чтобы имитировать сценарий, где «слабый учитель» (человек) обучает «сильного ученика» (продвинутый ИИ). В ходе исследования модель Qwen1.5-0.5B-Chat выступала в роли слабого учителя, а более мощная Qwen3-4B-Base — в роли ученика. Цель состояла в том, чтобы проверить, может ли сильная модель превзойти ограничения слабого надзора. Результаты показали, что автоматизированные исследователи на основе Claude Opus (AAR) смогли повысить показатель PGR (восстановление разрыва в производительности) с 0.23 до 0.97, что свидетельствует о возможности эффективного контроля над продвинутым ИИ. Однако методы, разработанные ИИ, демонстрируют нестабильную обобщаемость и требуют тщательной проверки на предмет «читерства» — использования уязвимостей в системе оценки. Эксперимент также подчеркивает растущую роль ИИ в исследованиях: он способен самостоятельно формировать гипотезы, проводить эксперименты и анализировать результаты. Тем не менее, в сложных и нечетких задачах человеческое вмешательство остается критически важным. Выбор моделей Qwen был обусловлен их открытостью, гибкостью и производительностью, что сделало эксперимент воспроизводимым и доступным для научного сообщества.

marsbit04/15 09:29

Сможет ли человечество управлять ИИ? Anthropic провел эксперимент с Qwen

marsbit04/15 09:29

活动图片