Mengenal Copilot Vision, Alat AI Microsoft yang Bisa Melihat Apa yang Anda Lakukan di Web dan Berbicara dengan Anda Mengenainya

Kupas Tuntas, gemasulawesi - Copilot Vision adalah fitur buatan Microsoft yang menggunakan AI atau kecerdasan buatan untuk membantu pengguna.

Namun, Copilot Vision membawa konsep AI generatif ke arah yang baru.

Alih-alih membuat teks atau gambar berdasarkan perintah, ia dapat memahami dan bereaksi terhadap masukan visual serta memberikan konteks dan penjelasan.

Dilansir dari PC Mag, Copilot Vision saat ini dalam masa pratinjau terbatas di browser web Edge, yang berjalan di Android, iOS, macOS, dan Windows.

Fitur Google Lens di Chrome sedikit mirip, memungkinkan anda menyorot objek di halaman dan mendapatkan hasil pencarian di panel samping, tetapi tidak bersifat percakapan.

Sebaliknya, Copilot Vision adalah pendamping pencarian yang sesungguhnya, menyerap semua hal visual dan tekstual di halaman dan berbicara secara verbal dengan anda tentang hal itu.

Untuk saat ini, Copilot Vision hanya berfungsi untuk pelanggan Copilot Pro tertentu (dibiayai 20 Dolar per bulannya) dan sepenuhnya bersifat opsional.

Microsoft belum menyatakan apakah fitur tersebut akan tersedia untuk pengguna gratis.

Saat pertama kali digunakan, anda harus melalui proses startup yang sederhana, dan karena fitur ini berbasis ucapan (meskipun disebut Vision), anda perlu mengaktifkan mikrofon untuk fitur ini.

Setelah anda menekan tombol Copilot Vision di halaman terakhir proses pengaturan, ucapan AI Copilot Voice yang terdengar nyata akan menyambut anda.

Dengan mengeklik ikon roda gigi pengaturan, anda akan memiliki pilihan empat karakter suara: Canyon, Grove, Meadow, atau Wave.

Copilot Vision dapat menjelaskan dan memberi anda info tentang apa yang anda lihat di situs, tetapi juga dapat mengobrol tentang apa saja.

Interface untuk Copilot Vision sama sekali berbeda dari sidebar Copilot di browser Edge, yang merupakan interface chatbot standar seperti ChatGPT.

Copilot Vision muncul sebagai bar di bagian bawah halaman web dan mengecil menjadi bar indikator kecil di bagian tengah bawah layar saat tidak digunakan.

Saat pertama kali mengeklik ikon berbagi layar Copilot Vision, tepi jendela browser berubah sedikit, yang lebih terlihat dalam mode Terang daripada dalam mode Gelap.

Ikon mikrofon juga berubah menjadi merah untuk menunjukkan bahwa ikon tersebut aktif.

Halaman utama Copilot Vision menampilkan contoh hal yang dapat ditanyakan.

Misalnya, halaman web tersebut menampilkan empat anjing lucu dan menyarankan anda agar memerintahkannya untuk “ceritakan lebih lanjut tentang ras ini.”

Saran berikutnya adalah memerintahkannnya untuk "ringkas artikel ini," yang menunjukkan bahwa alat tersebut berfungsi dengan gambar dan teks di halaman web.

Dalam pengujian PC Mag, ketika penguji berhenti berbicara dengannya untuk beberapa saat, dia mendapat pesan yang mengatakan, "Maaf, tertidur sebentar! Coba sambungkan kembali."

Itu sebenarnya hal yang baik, karena anda tidak ingin alat tersebut terus mendengarkan jika anda tidak sengaja membiarkannya menyala.

Jika anda bertanya apakah anda dapat memberikan masukan kepada Copilot Vision secara langsung dengan suara anda, anda akan menerima jawaban: “Masukan anda akan diteruskan ke pengembang saya.”

Jika anda menyela Copilot Vision, suaranya dengan sopan berhenti.

Copilot Vision dapat aktif saat anda bermain game di web, tetapi tidak sebagai pesaing atau partner.

Sebaliknya, alat tersebut memberikan kiat strategi atau komentar tentang apa yang ada di layar.

Dokumentasi Microsoft menyatakan bahwa Copilot Vision tidak menggunakan masukan untuk pelatihan AI.

Dengan kata lain, alat ini tidak melihat informasi sensitif atau yang dilindungi secara hukum, termasuk kata sandi atau rekening bank.

Alat ini juga tidak melihat situs web pribadi, yang berarti konten apa pun yang ada di balik login atau paywall.

Dalam pengujian PC Mag, ketika penguji membuka situs web bank online Ally, Copilot Vision berhenti berfungsi.

Penguji mendapat pesan yang menawarkan opsi untuk reconnect atau menyambung kembali, tapi alat ini tidak dapat menyambung kembali hingga dia membuka situs web publik.

Copilot Vision hanya melihat tab browser tempat anda membukanya, dan alat ini juga tidak dapat membuka halaman web baru.

Itu bagus, karena anda tidak ingin AI mengambil tindakan sendiri jika terjadi kesalahan.

Alat ini juga tidak dapat mendeteksi posisi kursor anda, yang mungkin sebenarnya merugikan untuk saran bermain game.

Copilot Vision secara teknis tidak dapat melihat video, tetapi dapat memberikan komentar berdasarkan gambar diam dari video.

Alat ini juga tidak dapat mendengar dan menginterpretasikan audio halaman web.

Terakhir, Copilot Vision tidak dapat memberikan transkrip tertulis dari interaksi anda dengannya. (*/Armyanti)