Menggunakan Fitur Computer Use GitHub Copilot untuk Mengotomatiskan Pekerjaan Desktop

GitHub Copilot kini tidak hanya membantu menulis kode, tetapi juga dapat berinteraksi langsung dengan aplikasi desktop melalui fitur Computer Use. Kemampuan yang diperkenalkan dalam public preview pada 1 Oktober 2026 ini memungkinkan Copilot membaca tampilan aplikasi, mengklik tombol, mengetik, menggulir halaman, hingga menjalankan pekerjaan lintas aplikasi. Teknologi kecerdasan buatan tersebut tersedia melalui GitHub Copilot CLI dan aplikasi GitHub Copilot pada Windows serta macOS. Dengan memberikan instruksi yang jelas dan izin akses yang sesuai, pengguna dapat mengotomatiskan berbagai pekerjaan berulang, termasuk pengelolaan dokumen, pembaruan presentasi, dan pemindahan informasi antaraplikasi tanpa harus membuat skrip otomatisasi khusus.

GitHub Copilot Memperkenalkan Computer Use untuk Otomatisasi Desktop

Peluncuran fitur Computer Use menandai perkembangan penting dalam pengembangan asisten kecerdasan buatan. Dalam penggunaan yang lebih dikenal, GitHub Copilot sering digunakan untuk membantu penulisan kode. Berkat perluasan fungsi tersebut, Copilot memiliki kemampuan bekerja pada perangkat lunak komputer menggunakan instruksi bahasa alami. Kemampuan tersebut memungkinkan AI mengamati elemen antarmuka, kemudian mengisi kolom sesuai instruksi yang telah diberikan. Dengan pendekatan tersebut, tugas yang melibatkan banyak langkah dapat dikerjakan secara lebih efisien tanpa bergantung sepenuhnya pada pengoperasian pengguna.

Kemampuan otomatisasi desktop ini tersedia dalam GitHub Copilot CLI dan aplikasi GitHub Copilot untuk komputer Windows maupun Mac. Saat pertama diperkenalkan, fitur tersebut tersedia sebagai pratinjau publik. Dengan status tersebut, fitur yang tersedia mungkin diperbarui berdasarkan perkembangan layanan. Salah satu manfaat utamanya adalah kemampuan menangani perangkat lunak konvensional yang tidak memiliki antarmuka perintah. Untuk perangkat lunak semacam ini, Copilot dapat menggunakan interaksi visual seperti navigasi menu untuk menjalankan alur operasional. Namun demikian, pengoperasiannya harus disertai pengawasan terhadap tindakan.

Cara Mengaktifkan Computer Use pada Aplikasi GitHub Copilot

Sebelum menggunakan Computer Use, pengguna sebaiknya memeriksa bahwa aplikasi GitHub Copilot telah tersedia. Ketika antarmuka GitHub Copilot tampil, pilih bagian pengaturan aplikasi, kemudian temukan halaman Computer Use. Melalui panel yang tersedia, ubah menjadi aktif pilihan Enable Computer Use agar alat otomatisasi komputer dapat digunakan. Pada pengaturan awal, fitur ini berada dalam keadaan nonaktif. Pengaturan awal ini menyediakan perlindungan tambahan kepada pengguna sebelum perangkat lunak menerima tindakan otomatis. Dengan demikian, pengguna bisa mengatur kapan fitur otomatisasi diperlukan.

Pada komputer Mac, izin sistem tertentu harus diberikan agar Computer Use bisa berfungsi dengan perangkat lunak desktop. Pengaturan keamanan yang dimaksud meliputi Accessibility dan Screen Recording. Accessibility digunakan untuk mengoperasikan kontrol aplikasi, sedangkan Screen Recording mendukung pembacaan tampilan. Pemilik Mac bisa menjalankan langkah izin dari macOS. Sementara itu, langkah memulai tersedia pada menu Computer Use tanpa persyaratan izin macOS tersebut. Walaupun prosesnya berbeda, kendali atas perangkat lunak tetap mengikuti pengaturan izin.

Cara Mengaktifkan Computer Use dengan Perintah Terminal

Selain melalui aplikasi grafis, Computer Use tersedia melalui GitHub Copilot CLI. Pengguna yang terbiasa antarmuka perintah, metode aktivasi ini memberikan kendali melalui sesi percakapan terminal. Setelah menjalankan sesi Copilot CLI yang mendukung fitur tersebut, pengguna perlu menjalankan perintah `/computer on` untuk mengaktifkan kemampuan interaksi desktop. Ketika perlu memastikan status fitur, jalankan perintah `/computer show`. Sementara itu, perintah `/computer off` memungkinkan pengguna menghentikan ketersediaan Computer Use. Dengan pilihan tersebut, pengguna dapat mengatur kapan otomatisasi aktif sesuai kondisi sesi.

Sesudah kemampuan desktop dinyalakan, pengguna memiliki kesempatan menyampaikan arahan tugas berbentuk percakapan. Pada aktivitas kerja sehari-hari, pengguna bisa menginstruksikan Copilot untuk menjalankan program yang tersedia, kemudian membaca informasi yang muncul. Ketika pekerjaan membutuhkan pengeditan, Copilot dapat membantu navigasi antarmuka setelah izin yang diperlukan diberikan. Untuk memperoleh hasil terbaik, jelaskan tujuan akhir secara terperinci. Dalam sebuah skenario, pengguna bisa memberikan permintaan untuk memperbarui bagian tertentu dalam presentasi dengan ketentuan pekerjaan yang ditentukan. Instruksi terarah tersebut dapat membatasi kesalahan tindakan.

Computer Use Membantu Mengelola Dokumen dan Aplikasi Lama

Contoh penggunaan yang relevan adalah penyederhanaan aktivitas desktop yang melibatkan beberapa aplikasi. Pada lingkungan bisnis, pengguna dapat menghabiskan waktu untuk memindahkan informasi. Dengan bantuan GitHub Copilot, beberapa langkah tersebut berpotensi diotomatisasi. Pada kebutuhan tertentu, Copilot dapat diarahkan untuk mengakses program administrasi, kemudian merangkum informasi pada layar. Apabila pengguna mengizinkan, sistem dapat melanjutkan pemindahan data ke aplikasi lain. Melalui alur tersebut, proses yang dilakukan secara manual mampu diselesaikan dengan bantuan otomatisasi.

Fitur ini juga bermanfaat bagi perusahaan dengan sistem internal khusus. Tidak semua aplikasi mendukung otomatisasi melalui terminal. Keterbatasan integrasi ini dapat menyebabkan pengembangan skrip lebih kompleks. Berkat interaksi berbasis antarmuka, Copilot dapat mencoba menjalankan tugas melalui tombol dan menu. Sebagai ilustrasi, pengguna dapat meminta untuk memperbarui informasi pada aplikasi desktop. Namun demikian, ketepatan tindakan perlu mempertimbangkan kondisi jendela yang menjadi sasaran pekerjaan.

Cara Mengendalikan Akses GitHub Copilot ke Aplikasi Desktop

Walaupun otomatisasi desktop dapat meningkatkan produktivitas, pengamanan akses aplikasi harus dipertahankan sebagai prioritas utama. Apabila sistem otomatisasi menggunakan program pada komputer, data dalam jendela dapat menjadi bagian dari konteks pemrosesan AI. Oleh sebab itu, pengguna perlu meninjau jenis informasi yang dapat diakses. GitHub Copilot menerapkan mekanisme izin sebelum mengendalikan aplikasi sesuai aturan kontrol sesi. Berkat proses persetujuan, pengguna memiliki kesempatan membatasi tindakan berdasarkan tingkat sensitivitas aplikasi.

Tidak hanya menyediakan otorisasi langsung, GitHub Copilot juga menawarkan pengaturan Always allow untuk program yang telah dipercaya. Jika opsi ini diaktifkan, Copilot memiliki akses berkelanjutan sesuai pengaturan aplikasi yang dimasukkan ke daftar izin tanpa memerlukan izin terpisah pada sesi berikutnya. Meski mempermudah penggunaan berulang, penggunaan Always allow harus dipertimbangkan secara cermat, terutama untuk sistem berisi data pribadi. Melalui halaman Computer Use, pengguna bisa mengelola otorisasi yang telah disimpan dan menghapus akses sesuai kebutuhan keamanan. Tidak kalah relevan, proses otomatisasi yang berjalan memiliki mekanisme penghentian melalui tombol Stop atau tombol Esc sesuai dukungan sesi. Berkat pengawasan aktif, pengguna tetap memiliki kendali.

Fitur Computer Use Menghubungkan AI dengan Pekerjaan Komputer Sehari Hari

Peluncuran Computer Use menandai perluasan kemampuan GitHub Copilot dari asisten pemrograman menuju otomatisasi aplikasi desktop. Berkat akses terhadap konteks visual, Copilot mampu mendukung pengisian data menggunakan perintah percakapan. Pendekatan otomatisasi tersebut bermanfaat terutama untuk program berbasis GUI yang membutuhkan interaksi manual. Walaupun memberikan kemudahan, pengoperasian masih membutuhkan persetujuan akses agar risiko kesalahan dapat dibatasi.

Dalam perkembangan TEKNOLOGI, teknologi computer use mampu menghadirkan pendukung aktivitas profesional. Meski otomatisasi menjadi lebih mudah, risiko salah klik harus menjadi perhatian. GitHub sendiri menjelaskan bahwa computer use belum keluar dari tahap pratinjau publik. Agar penggunaan lebih efektif, jelaskan aplikasi yang terlibat dan tinjau perubahan yang dibuat. Apa pendapat Anda, apakah Computer Use GitHub Copilot dapat membantu aktivitas lintas aplikasi pada masa mendatang? Anda dapat berbagi pengalaman mengenai fitur Computer Use.