Только что OpenAI перевернул Codex с ног на голову!
Вчера вы использовали Codex для написания кода.
Сегодня он уже может смотреть на ваш экран, кликать вашей мышью, запоминать ваши предпочтения на прошлой неделе и самостоятельно планировать своё расписание.
Несколько AI Agent одновременно работают на вас в фоновом режиме, а ваша мышь и клавиатура остаются полностью под вашим контролем.
«Уникальная особенность» Codex: может напрямую использовать приложения в фоне, не захватывая полностью весь ваш компьютер
С сегодняшнего дня этот инструмент, который еженедельно используют 3 миллиона разработчиков, перестал быть просто агентом для программирования.
Вы делаете свою работу, а он в фоне запускает Xcode
Теперь у Codex есть собственный курсор, который не мешает вашей мыши.
Вы пишете документ, а он рядом запускает Xcode для тестирования приложения — всё происходит одновременно.
У этой функции солидное происхождение: за неё отвечает Ари Вайнштейн, соавтор Apple Shortcuts, который вместе с командой был приобретён OpenAI прошлой осенью
Чтобы понять, что именно он может делать, достаточно посмотреть демонстрацию.
Сначала пользователь отдаёт команду: «Запусти это приложение „Крестики-нолики“ в Xcode, сыграй сам в тестовую партию, исправь найденные баги.»
И вот, Codex самостоятельно открывает Xcode, запускает iOS-симулятор и начинает играть своим собственным курсором.
В процессе тестирования он обнаруживает логическую ошибку — после хода человека компьютер ставит два «O» одновременно.
Немного подумав, Codex решительно возвращается к интерфейсу кода и находит место уязвимости.
Исправив код Swift, он немедленно перекомпилирует его и проводит полное повторное тестирование для проверки.
Меньше минуты. Запуск → тестирование → обнаружение бага → исправление → регрессионная проверка — весь цикл отладки под ключ.
В настоящее время Computer Use поддерживает только macOS, пользователи в ЕС и Великобритании временно не могут им воспользоваться.
Версия для Windows может извлекать информацию из других приложений в Codex, но ещё не поддерживает управление на уровне фонового курсора.
В этом обновлении Codex впервые получил поддержку Intel Mac
Кликай и исправляй: отладка фронтенда без поиска в коде
В клиент Codex теперь встроен браузер, в основе которого лежит собственный движок OpenAI Atlas.
На практике это означает, что раньше при отладке UI фронтенд-разработчику приходилось переключаться между кодом и браузером. Теперь можно работать прямо на отрендеренной веб-странице.
Кликните на заголовок, оставьте комментарий «Уменьши шрифт и сократи слоган»; кликните в левом верхнем углу, «Добавь логотип»; обнаружено, что легенда оси X графика выходит за границы — кликните на проблемное место и напишите «Исправь проблему выхода за границы».
Codex понимает визуальный и пространственный контекст, в фоновом режиме мгновенно изменяет код, и страница обновляется в реальном времени.
OpenAI продемонстрировала это на примере веб-приложения для отслеживания наборов Lego под названием Brickfolio.
Codex с нуля написал код, настроил окружение, запустил локальный сервер, а затем открыл отрендеренную страницу во встроенном браузере. Весь процесс занял считанные секунды.
Затем последовал опыт редактирования по принципу WYSIWYG. Ощущение такое, будто вы проверяете макет дизайна: вы просто отмечаете проблемы, а всю底层 итерацию выполняет ИИ.
Другими словами, пользователю достаточно тыкать в страницу то тут, то там, а Codex будет в фоне менять код и сразу показывать результат.
В настоящее время встроенный браузер ограничен локальным превью (localhost). OpenAI сообщает, что в будущем возможности управления браузером будут расширены.
Выпущено более 90 плагинов: весь инструментарий встроен в Codex
Что касается плагинов, OpenAI выпустила сразу более 90 штук.
Atlassian Rovo управляет JIRA, CircleCI занимается CI/CD, GitLab Issues отслеживает требования, Microsoft Suite обрабатывает документы, Neon by Databricks работает с базами данных — охвачены почти все инструменты, которые ежедневно использует команда разработчиков.
Использовать их просто: достаточно упомянуть имя плагина через @ в поле ввода.
Например, @SharePoint, чтобы Codex прочитал документы в каталоге продукта и создал краткий отчёт для руководства. Он автоматически просканирует дерево файлов, проанализирует документы, извлечёт ключевую информацию — не нужно рыться в различных облачных хранилищах.
Или, например, @Superpowers, чтобы Codex придумал схему реализации функции в локальной структуре каталогов кода. Он пройдётся по вашей файловой структуре, прочитает код и CSS, а затем предложит вариант реализации, соответствующий текущей архитектуре проекта.
@CircleCI может помочь диагностировать проблемы со сборкой ветки; @Atlassian Rovo может прочитать спецификацию продукта на Confluence, вывести сводку в стандартном формате, а также преобразовать функциональные точки в стандартные задачи JIRA.
Плагины связывают всю цепочку: от первоначальных требований до локального написания кода, CI/CD и управления задачами.
ИИ начал самостоятельно планировать своё расписание
Более того, стоит отметить новый механизм «сердцебиения» (heartbeat).
Теперь Codex может самостоятельно планировать свою работу на будущее, просыпаться в заданное время и продолжать работу, даже если это займёт несколько дней или недель. При этом он может повторно использовать предыдущие цепочки диалогов, накопленный контекст не теряется.
Например, пользователь может попросить Codex проверить Slack, Gmail, Google Календарь и Notion; он извлечёт relevant information из четырёх источников и выдаст отсортированный по приоритету список дел.
Пользователь добавляет: «Не мог бы ты присматривать за этим постоянно?»
Codex немедленно устанавливает себе расписание автоматической проверки каждый час, активно докладывает о важных моментах, требующих решения, и даже спрашивает: «Нужно ли мне помочь составить ответ?»
Это уже не инструмент, это — младший сотрудник, который не спит.
В дополнение к этому, возможность генерации изображений gpt-image-1.5 встроена нативно: концепт-арты продукта, фронтенд-дизайн, визуальные прототипы — всё можно сделать за один рабочий процесс.
Повседневные потребности удовлетворены одним махом
Помимо этих основных функций, есть ряд улучшений на уровне пользовательского опыта.
Во-первых, выпущена превью-версия функции памяти: Codex может запоминать ваши предпочтения и исправленные места, в следующий раз не нужно объяснять всё с начала.
Во-вторых, комментарии code review с GitHub теперь также можно обрабатывать в Codex.
Добавлена поддержка одновременного открытия нескольких терминалов/вкладок, функция подключения к удалённым машинам разработки по SSH также вышла в закрытое тестирование. Также появилась новая панель сводки, которая помогает следить за планами работы агента, источниками информации и выходными файлами.
В демонстрации пользователь просит Codex организовать последние открытые issues текущего проекта, сгруппировав их по темам в таблицу.
Codex затем в фоновом режиме извлекает контекст репозитория кода и через несколько минут выдаёт основную сводку, перечисляя самые проблемные области проекта в данный момент.
Сгенерированный по клику файл Excel можно открыть без перехода во внешнее ПО, полный предварительный просмотр таблицы доступен прямо в боковой панели.
То же самое с PDF, PPT — всё делается в одном окне Codex.
Первый пазл супер-приложения
Взглянув на временную шкалу, можно почувствовать ритм OpenAI.
19 марта СМИ сообщили, что OpenAI планирует объединить ChatGPT, Codex и браузер Atlas в одно настольное «супер-приложение».
31 марта OpenAI привлекла финансирование в размере 122 миллиардов долларов при оценке в 852 миллиарда, ведущими инвесторами выступили Amazon, NVIDIA и SoftBank. В инвестиционных документах чётко указано, что средства пойдут на разработку и развёртывание супер-приложения.
16 апреля вышло это обновление Codex.
Ещё одна показательная деталь: внутри OpenAI уже более 80% сотрудников используют Codex, и не только инженеры.
Написание еженедельных отчётов, организация обратной связи, составление PRD (документов требований к продукту), проверка контрактов, отправка напоминаний о тренингах по безопасности — его используют для всего.
50% пользователей Codex уже используют его для задач, не связанных с программированием.
Это не просто инструмент программирования, обрастающий функциями. Это супер-приложение, которое использует оболочку инструмента программирования для холодного старта.
Если не можешь победить — проникни: сделали официальный плагин для Anthropic
Что ещё интереснее, OpenAI также создала официальный плагин для Claude Code, активно внедряя Codex в экосистему конкурента.
Это похоже на стратегию: вместо того чтобы ждать, пока разработчики перейдут в другой лагерь, лучше сначала проникнуть в их рабочий процесс.
На данный момент Codex больше делает акцент на фоновом выполнении, параллельной работе нескольких агентов и автономной работе; преимущество Claude Code — в длинном контекстном reasoning и глубоком понимании кода. Всё больше команд выбирают использование обоих.
Однако OpenAI явно хочет не просто получить свою долю.
Ставка в 122 миллиарда долларов сделана не на инструмент программирования.
Источники: https://openai.com/index/codex-for-almost-everything/
Эта статья из WeChat официального аккаунта «新智元» (New Zhi Yuan), редактор: Хао Кунь
