GitHub Copilot kini tidak hanya membantu menulis kode, tetapi juga dapat berinteraksi langsung dengan aplikasi desktop melalui fitur Computer Use. Kemampuan yang diperkenalkan dalam public preview pada 1 Oktober 2026 ini memungkinkan Copilot membaca tampilan aplikasi, mengklik tombol, mengetik, menggulir halaman, hingga menjalankan pekerjaan lintas aplikasi. Teknologi kecerdasan buatan tersebut tersedia melalui GitHub Copilot CLI dan aplikasi GitHub Copilot pada Windows serta macOS. Dengan memberikan instruksi yang jelas dan izin akses yang sesuai, pengguna dapat mengotomatiskan berbagai pekerjaan berulang, termasuk pengelolaan dokumen, pembaruan presentasi, dan pemindahan informasi antaraplikasi tanpa harus membuat skrip otomatisasi khusus.
Fitur Computer Use Memperluas Kemampuan GitHub Copilot
Peluncuran fitur Computer Use menjadi perkembangan penting dalam pemanfaatan GitHub Copilot. Dalam penggunaan yang lebih dikenal, GitHub Copilot sering digunakan untuk membantu penulisan kode. Dengan hadirnya Computer Use, Copilot mampu menjalankan tindakan pada perangkat lunak komputer menggunakan perintah berbentuk percakapan. Kemampuan tersebut mendukung AI membaca informasi aplikasi, kemudian mengisi kolom sesuai kebutuhan pengguna. Dengan pendekatan tersebut, aktivitas administratif mampu disederhanakan tanpa harus membuat otomatisasi manual.
Kemampuan otomatisasi desktop ini dapat digunakan pada GitHub Copilot CLI dan aplikasi GitHub Copilot untuk perangkat desktop yang menggunakan Windows atau macOS. Pada tahap awal, fitur tersebut masih berada dalam pengembangan terbuka. Kondisi ini menunjukkan bahwa, cara kerja sistem masih dapat berubah berdasarkan evaluasi teknis. Salah satu manfaat utamanya adalah kompatibilitas dengan program berbasis antarmuka grafis yang tidak memiliki antarmuka perintah. Pada lingkungan aplikasi tersebut, Copilot dapat menggunakan interaksi visual seperti navigasi menu untuk menjalankan alur operasional. Namun demikian, pengguna masih perlu memberikan pengawasan terhadap tindakan.
Langkah Awal Menggunakan Otomatisasi Desktop GitHub Copilot
Untuk mulai memanfaatkan Computer Use, pengguna perlu memastikan bahwa perangkat telah memiliki aplikasi Copilot yang sesuai. Setelah aplikasi dibuka, buka menu pengaturan, kemudian pilih kategori Computer Use. Di dalam halaman pengaturan, ubah menjadi aktif pilihan Enable Computer Use agar Copilot dapat meminta akses aplikasi. Pada pengaturan awal, fitur ini berada dalam keadaan nonaktif. Mekanisme aktivasi tersebut menghadirkan kendali lebih besar kepada pengguna sebelum sistem menjalankan kendali antarmuka. Berkat aktivasi manual, pengguna memiliki kesempatan memilih kapan Copilot boleh menggunakan kemampuan desktop.
Untuk perangkat yang menjalankan macOS, pengaturan tambahan perlu dipenuhi agar Computer Use bisa berfungsi dengan program yang terpasang. Izin tersebut terdiri atas Accessibility dan Screen Recording. Melalui Accessibility, sistem dapat menjalankan tindakan pada tombol dan menu, sedangkan Screen Recording memungkinkan pemeriksaan konteks visual. Pengguna dapat mengikuti arahan pada halaman Computer Use. Sementara itu, pengaturan dasar tersedia pada menu Computer Use tanpa persyaratan izin macOS tersebut. Meski Windows memiliki mekanisme tersendiri, kendali atas perangkat lunak tetap mengikuti pengaturan izin.
Cara Mengaktifkan Computer Use dengan Perintah Terminal
Selain melalui aplikasi grafis, Computer Use bisa diaktifkan melalui GitHub Copilot CLI. Bagi pengembang yang menggunakan terminal, pendekatan tersebut menawarkan pengoperasian yang praktis. Ketika membuka sesi Copilot CLI yang sesuai dengan persyaratan layanan, pengguna bisa memasukkan perintah `/computer on` untuk memulai kemampuan interaksi desktop. Apabila ingin memeriksa status fitur, jalankan perintah `/computer show`. Sebaliknya, perintah `/computer off` dapat digunakan untuk menghentikan ketersediaan Computer Use. Berkat perintah sederhana tersebut, pengguna dapat mengatur status penggunaan alat sesuai kebutuhan pekerjaan.
Sesudah kemampuan desktop dinyalakan, pengguna dapat memberikan permintaan pekerjaan yang jelas. Pada aktivitas kerja sehari-hari, pengguna bisa menginstruksikan Copilot untuk menjalankan program yang tersedia, kemudian merangkum data di jendela aplikasi. Ketika pekerjaan membutuhkan pengeditan, Copilot dapat membantu pengetikan teks setelah akses aplikasi disetujui. Supaya instruksi tidak menimbulkan kebingungan, sebutkan aplikasi yang terlibat secara spesifik. Misalnya, pengguna dapat menyampaikan permintaan untuk memindahkan informasi antaraplikasi dengan ruang lingkup tugas yang terukur. Instruksi terarah tersebut berpotensi meminimalkan interaksi yang tidak diperlukan.
Contoh Otomatisasi Pekerjaan Desktop dengan GitHub Copilot
Contoh penggunaan yang relevan adalah otomatisasi pekerjaan administratif yang mengandalkan perangkat lunak berbeda. Untuk aktivitas profesional, pengguna sering harus memeriksa data secara manual. Dengan bantuan GitHub Copilot, aktivitas tertentu mampu disederhanakan. Sebagai contoh, Copilot bisa diminta membuka aplikasi laporan pengeluaran, kemudian meninjau status pekerjaan. Apabila pengguna mengizinkan, sistem berpotensi menjalankan pemindahan data ke aplikasi lain. Melalui alur tersebut, aktivitas administratif berulang berpotensi menjadi lebih efisien.
Computer Use turut relevan bagi organisasi yang memiliki perangkat lunak konvensional. Sebagian perangkat lunak bisnis mendukung otomatisasi melalui terminal. Situasi semacam ini berpotensi menjadikan otomatisasi lebih sulit. Melalui kemampuan membaca layar, Copilot dapat mencoba menjalankan aktivitas dengan kontrol aplikasi langsung. Dalam penerapan tertentu, pengguna dapat meminta untuk memeriksa status dalam sistem lama. Meski mampu membantu pekerjaan GUI, kelancaran interaksi perlu mempertimbangkan kondisi jendela yang menjadi sasaran pekerjaan.
Cara Mengendalikan Akses GitHub Copilot ke Aplikasi Desktop
Meski kemampuan AI semakin berkembang, pengamanan akses aplikasi tetap menjadi pertimbangan mendasar. Ketika Copilot berinteraksi program pada komputer, konten aplikasi dapat menjadi bagian dari konteks pemrosesan AI. Oleh sebab itu, pengguna perlu meninjau jenis informasi yang dapat diakses. GitHub Copilot meminta persetujuan sebelum mengendalikan aplikasi sesuai konfigurasi izin yang berlaku. Berkat proses persetujuan, pengguna bisa mengizinkan tindakan berdasarkan risiko aktivitas.
Selain izin sementara, GitHub Copilot mendukung pengaturan Always allow untuk program yang telah dipercaya. Dengan pengaturan izin tersimpan, Copilot dapat menggunakan kembali aplikasi yang mendapat otorisasi pengguna tanpa mengulang seluruh proses persetujuan. Meski mempermudah penggunaan berulang, penyimpanan otorisasi aplikasi sebaiknya dibatasi, terutama untuk aplikasi keuangan. Pengguna dapat meninjau otorisasi yang telah disimpan dan mencabut persetujuan tersimpan sesuai perubahan penggunaan. Sebagai tindakan penting, proses otomatisasi yang berjalan dapat dihentikan melalui tombol Stop atau tombol Esc sesuai antarmuka yang digunakan. Melalui kontrol tersebut, pengguna tetap memiliki kendali.
Kesimpulan: Computer Use Memperluas Peran GitHub Copilot
Pengenalan Computer Use menunjukkan perkembangan penting GitHub Copilot dari pendukung penulisan kode menuju otomatisasi aplikasi desktop. Melalui kemampuan membaca elemen antarmuka, Copilot berpotensi menjalankan pengelolaan dokumen menggunakan perintah percakapan. Kemampuan ini menjadi relevan bagi perangkat lunak lama yang belum mendukung integrasi modern. Walaupun memberikan kemudahan, penerapan sebaiknya disertai persetujuan akses agar hasil tetap sesuai kebutuhan.
Dalam perkembangan TEKNOLOGI, kemampuan AI berinteraksi dengan desktop mampu menghadirkan bagian penting produktivitas. Walaupun kemampuan tersebut terus berkembang, risiko salah klik tetap perlu diperhitungkan. Pengembang fitur tersebut menggarisbawahi bahwa computer use masih berada dalam public preview. Agar penggunaan lebih efektif, berikan instruksi yang spesifik dan periksa hasil tindakan. Apa pendapat Anda, apakah Computer Use GitHub Copilot dapat membantu aktivitas lintas aplikasi pada masa mendatang? Jangan ragu menyampaikan pandangan mengenai perkembangan otomatisasi berbasis AI.
