OpenAI telah mengambil langkah selanjutnya dalam integrasi kecerdasan buatan dengan penggunaan komputer sehari-hari dengan merombak total Codex, agen kode desktop-nya. Alat yang sebelumnya dikenal terutama untuk bantuan pemrograman, kini menjadi asisten yang mampu menangani aplikasi, mengingat preferensi, dan mengelola proyek hampir tanpa hambatan.
Dengan pembaruan ini, perusahaan yang dipimpin oleh Sam Altman semakin mendekatkan rencananya untuk menciptakan sebuah Sebuah "aplikasi super" desktop yang menyatukan ChatGPT, Codex, dan browser Atlas Anda.Langkah ini bertujuan untuk menyederhanakan pengalaman pengguna, memusatkan sumber daya dalam satu ruang kerja, dan bersaing dengan rival seperti Anthropic, terutama di lingkungan pengembangan perangkat lunak dan otomatisasi tingkat lanjut.
Codex belajar menggunakan komputer seperti pengguna lainnya.
Salah satu perubahan yang paling mencolok adalah bahwa Codex sekarang dapat mengontrol komputer di latar belakangAgen tersebut mampu melihat apa yang ada di layar, menggerakkan kursornya sendiri, mengklik, mengetik teks, dan bereaksi terhadap apa yang terjadi di aplikasi yang terpasang, tanpa mengganggu apa yang sedang dilakukan pengguna dengan mouse atau keyboard.
Kemampuan ini memungkinkan beberapa agen Codex untuk bekerja bersama. secara paralel di tim yang samaHal ini mencakup melakukan pengujian, mengubah konfigurasi, atau menjalankan tugas berulang sementara orang tersebut melanjutkan aktivitas normalnya. Ini membuka pintu untuk mengotomatisasi alur kerja yang sebelumnya membutuhkan pengawasan terus-menerus, seperti menguji aplikasi setelah setiap perubahan kode atau mengulangi tindakan antarmuka.
OpenAI mengusulkan fungsi ini sebagai cara agar asisten dapat beroperasi dengan alat yang tidak memiliki API atau integrasi langsung, sesuatu yang umum di banyak program desktop. Codex, dengan "melihat" layar dan mengendalikan kursor, dapat berinteraksi dengan aplikasi-aplikasi ini seperti halnya pengguna manusia, meskipun untuk saat ini dengan cara yang terkontrol dan dengan perhatian khusus pada keamanan.
Menurut perusahaan, penggunaan komputer awalnya tersedia di macOS melalui aplikasi desktop Codex, terhubung ke akun ChatGPT. Versi Windows akan hadir kemudian, setelah performanya diuji dan fitur-fiturnya disesuaikan dengan lingkungan Microsoft.
Dalam kasus Eropa dan Inggris Raya, OpenAI telah mengkonfirmasi bahwa kontrol komputer, kustomisasi tingkat lanjut, saran kontekstual, dan memori Fitur-fitur tersebut akan diaktifkan kemudian. Alasannya adalah perlunya menyesuaikan fitur-fitur ini dengan peraturan perlindungan data, sebuah persyaratan yang sangat ketat di Uni Eropa dan pasar Inggris.
Browser terintegrasi dan akses langsung ke halaman web.
Pembaruan ini juga memperkuat hubungan Codex dengan web berkat sebuah browser terintegrasi di dalam aplikasi itu sendiriAlih-alih hanya menerima instruksi teks umum, agen dapat menerima perintah langsung pada elemen spesifik suatu halaman.
Dalam pengembangan frontend, misalnya, pengguna dapat Pilih komponen web dan jelaskan perubahannya. Pengguna ingin melakukan sesuatu (seperti mengubah warna, ukuran teks, atau tata letak blok), dan Codex memahami instruksi tersebut dalam konteks visual spesifik itu. Hal ini menghindari keharusan menulis petunjuk panjang yang menjelaskan bagian situs mana yang perlu diubah.
Browser terintegrasi ini juga memungkinkan penggunaan Codex. Menganalisis konten, mengumpulkan informasi, dan menggunakannya sebagai konteks. Untuk tugas-tugas lain, seperti mendokumentasikan kode, meninjau spesifikasi produk, atau membandingkan dokumentasi teknis, semuanya dilakukan dalam lingkungan yang sama, tanpa harus beralih di antara beberapa jendela sistem operasi.
Membuat dan mengedit gambar dengan gpt-image-1.5
Pilar lain dari versi baru Codex adalah integrasi model tersebut. gpt-image-1.5 untuk membuat dan memodifikasi gambar Dari dalam aplikasi desktop itu sendiri, agen dapat membuat bagan, diagram, maket, atau sketsa visual dari teks, atau dengan menggabungkan instruksi dengan tangkapan layar dan cuplikan kode.
Kemampuan ini ditujukan langsung kepada tim yang bekerja di desain produk, antarmuka pengguna, atau prototipe video gameSebagai contoh, seorang pengembang dapat mengambil tangkapan layar antarmuka yang belum selesai, meminta Codex untuk menyarankan desain ulang menu atau skema warna baru, dan mendapatkan gambar yang dihasilkan yang sesuai dengan konteks tersebut, tanpa perlu mengganti alat.
Dengan semua hal terpusat di Codex, agen dapat Menggabungkan tugas pengkodean dan desain: Menulis logika suatu fungsi, memperbarui antarmuka pengguna (frontend) yang sesuai, dan menghasilkan mockup visual untuk dipresentasikan kepada tim, tanpa meninggalkan alur kerja atau harus membuka aplikasi pengeditan grafis eksternal.
Memori, konteks, dan otomatisasi tugas jangka panjang
Di luar kendali komputer dan pembuatan gambar, taruhan besar OpenAI dengan versi ini adalah melengkapi Codex dengan sebuah fitur. memori persisten dan manajemen konteks yang jauh lebih luasAlat ini dapat menggunakan kembali percakapan sebelumnya, menyimpan informasi penting, dan mengambilnya kembali saat dibutuhkan untuk melanjutkan proyek.
Fitur memori, yang sedang dirilis dalam versi pratinjau, memungkinkan Codex mengingat preferensi pribadi, koreksi yang sering dilakukan, atau data yang sulit dikumpulkanIni mencakup segala hal mulai dari susunan teknologi khas sebuah tim hingga cara pengorganisasian folder, format laporan yang paling umum digunakan, dan tag yang biasanya digunakan di GitHub untuk jenis masalah tertentu.
Dengan konteks yang terkumpul tersebut, agen dapat secara proaktif mengusulkan tugasIni dapat digunakan untuk menyarankan melanjutkan proyek yang belum selesai, merekomendasikan refactoring yang tertunda, atau memberi tahu pengguna tentang permintaan pull request yang sudah lama tertunda. Beberapa perusahaan sudah menggunakannya untuk melacak percakapan di Slack, Gmail, atau Notion dan bereaksi ketika peristiwa tertentu terjadi.
Kodeks juga bisa Rencanakan pekerjaan untuk masa depan dan aktifkan kembali diri Anda secara mandiri. untuk menyelesaikan tugas jangka panjang. Misalnya, sistem ini dapat mengelola antrian tinjauan kode selama berhari-hari atau berminggu-minggu, menangani komentar dan memperbarui dokumentasi tanpa pengembang harus terus-menerus memantaunya.
Lebih dari 90 add-on dan dukungan pengembang yang lebih baik.
Untuk melengkapi perubahan tersebut, OpenAI telah menambahkan hampir 90 plugin Codex baruIni termasuk integrasi dengan Microsoft Suite, GitLab Issues, Neon by Databricks, Render, dan Superpowers, serta dukungan untuk server MCP (Model Context Protocol). Tujuannya adalah untuk memberikan agen lebih banyak sumber konteks dan kemampuan operasional yang lebih besar.
Berkat plugin-plugin ini, Codex dapat Mengumpulkan informasi dari berbagai layanan dan mengambil tindakan berdasarkan informasi tersebut. Dari satu ruang kerja, Anda dapat meninjau masalah di GitLab, menanyakan data di lingkungan Databricks, memperbarui dokumen Office, atau berinteraksi dengan layanan penyebaran, tanpa memaksa pengguna untuk berpindah dari satu platform ke platform lain.
Dari segi teknis murni, pembaruan ini memperkuat alur kerja pengembang pada umumnyaKini Codex membantu Anda meninjau permintaan pull, mengelola beberapa tab terminal sekaligus, terhubung ke lingkungan pengembangan jarak jauh melalui SSH, dan membuka file dengan pratinjau yang kaya, baik itu PDF, spreadsheet, presentasi, atau dokumen dalam format lainnya.
Semua ini terkonsentrasi dalam pengalaman terpadu yang, menurut OpenAI sendiri, memungkinkan kemajuan yang lebih cepat. di semua tahapan siklus hidup perangkat lunakMulai dari penulisan kode awal hingga pengujian, penerapan, dokumentasi, dan pemeliharaan, dengan agen AI yang terus berkolaborasi dalam lingkungan desktop yang sama.
Ketersediaan, fokus pada pengembang, dan situasi di Eropa
Versi baru Codex sudah mulai diterapkan di aplikasi desktop untuk macOS Bagi mereka yang masuk menggunakan akun ChatGPT. Tidak semua fitur memerlukan jenis langganan yang sama, dan beberapa fitur canggih mungkin bergantung pada paket yang dibeli, seperti halnya dengan alat OpenAI lainnya.
Thibault Sottiaux, direktur Codex, menjelaskan bahwa pembaruan ini Ini secara khusus ditujukan untuk para pengembang.Meskipun tujuannya adalah untuk memperluasnya ke khalayak yang lebih umum di kemudian hari. Idenya adalah bahwa tim teknis akan menjadi yang pertama memanfaatkan agen baru dan alur kerja otomatis, dan seiring waktu, mentransfer model tersebut ke tugas-tugas perkantoran, manajemen dokumen, atau produktivitas pribadi.
OpenAI menekankan bahwa penggunaan daya komputasi dan memori diimplementasikan dengan cara tertentu. pendekatan keamanan dan kepatuhan peraturanHal ini sangat relevan di Uni Eropa dan Inggris Raya. Karena alasan ini, fitur kustomisasi tingkat lanjut, saran kontekstual, memori persisten, dan kontrol langsung sistem operasi akan membutuhkan waktu lebih lama untuk tersedia di pasar-pasar ini.
Bagaimanapun, perusahaan tersebut berpendapat bahwa evolusi Codex ini membuka pintu menuju sebuah Aplikasi super desktop yang berfokus pada otomatisasi cerdas.Di mana agen AI tidak hanya membantu menulis kode, tetapi juga mengoordinasikan tugas, beradaptasi dengan gaya kerja pengguna, dan menjaga agar proyek kompleks tetap berjalan dalam jangka waktu yang lama. Bagi pengembang perangkat lunak di Eropa, pesannya jelas: kemampuan baru akan datang, tetapi dengan penyesuaian yang diperlukan agar sesuai dengan kerangka peraturan yang ada.