Microsoft Copilot Studio memungkinkan perusahaan untuk membuat asisten AI khusus dan agen virtual melalui antarmuka grafis intuitif. Setelah dibuat, asisten dan agen ini dapat diuji dan dipublikasikan secara langsung dalam Copilot Studio.
Hari ini, Microsoft diumumkan Alat pratinjau penelitian baru di Copilot Studio yang disebut “Penggunaan Komputer.” Alat ini memungkinkan agen studio kopilot untuk berinteraksi dengan situs web atau aplikasi desktop apa pun seolah -olah mereka adalah alat itu sendiri. Agen sekarang dapat mengklik tombol, memilih menu, dan mengetikkan ke bidang di seluruh aplikasi dan situs web. Alat “Penggunaan Komputer” yang baru memungkinkan agen untuk beroperasi di lingkungan tanpa API yang tersedia untuk integrasi terprogram.
Didukung oleh Model Bahasa Besar (LLM), “Penggunaan Komputer” dapat secara otomatis beradaptasi dengan perubahan aplikasi dan situs web. Menurut Microsoft, alat ini mencakup kemampuan penalaran bawaan untuk menyelesaikan masalah secara mandiri.
Untuk memastikan alat “Penggunaan Komputer” siap untuk perusahaan, ia berjalan pada infrastruktur yang diselenggarakan oleh Microsoft, menghilangkan kebutuhan organisasi untuk mengelola server mereka sendiri. Microsoft menekankan bahwa data pelanggan tetap berada dalam batas cloud Microsoft dan tidak akan digunakan untuk melatih model bahasa besar.
Microsoft menyoroti cara -cara berikut di mana alat “Penggunaan Komputer” meningkatkan otomatisasi proses robot (RPA):
- Ini menanggapi perubahan dalam waktu nyata: Ketika tombol atau layar berubah, alat ini terus bekerja tanpa merusak aliran Anda.
- Mudah digunakan: Anda dapat menggambarkan apa yang Anda inginkan dalam bahasa alami, tidak ada pengkodean yang diperlukan, dan menguji dan memperbaiki prompt dengan video berdampingan real-time dari komputer menggunakan rantai penalaran dan otomatisasi UI yang direncanakan.
- Itu dibangun dengan kecerdasan: Agen melihat apa yang ada di layar dan membuat keputusan cerdas secara real time, bahkan di lingkungan yang kompleks atau terus berubah.
- Muncul dengan visibilitas penuh: Pembuat dapat melihat riwayat aktivitas penggunaan komputer sesuka hati, termasuk tangkapan layar yang ditangkap dan langkah -langkah penalaran.
Awal tahun ini, Openai mengumumkan Operatoryang menggunakan model Agen Penggunaan Komputer (CUA) yang menggabungkan kemampuan penglihatan GPT-4O dengan penalaran lanjutan melalui pembelajaran penguatan. Microsoft mungkin memanfaatkan teknologi mendasar yang sama di belakang operator untuk memberi daya pada alat “penggunaan komputer” baru ini di Copilot Studio.
Organisasi yang tertarik bisa Isi formulir ini Untuk mendapatkan undangan dari Microsoft untuk mencoba alat baru ini.
