Semua PC Windows 11 Akan Mendapatkan Fitur Copilot AI Tingkat Lanjut Ini

Microsoft menyimpannya alat AI paling kuat untuk pelanggan yang membayar pada fase pertama evolusi AI-nya. Kini, perusahaan telah mengumumkan serangkaian Kopilot fitur yang hadir di semua PC Windows 11, termasuk Voice, Copilot Vision, dan Copilot Actions.

Bersamaan dengan pembaruan ini, Microsoft meluncurkan kampanye iklan untuk memperkenalkan fitur-fitur baru ini kepada orang-orang. Waktunya bukanlah suatu kebetulan. jendela 10 dukungan berakhir pada 14 Oktoberdan kita akan melihat gelombang orang meningkatkan ke Windows 11; Microsoft tampaknya berniat menghadirkan fitur-fitur Copilot yang canggih di ujung jari sebanyak mungkin orang—dan meyakinkan mereka bahwa fitur-fitur tersebut layak untuk digunakan.

Ini Semua Tentang Suara

“Hei, Kopilot.” Itulah kata peringatan untuk asisten AI dalam mode suara, yang kini hadir di semua komputer Windows 11. Suka atau tidak suka, Microsoft ingin Anda memulainya berbicara dengan komputer Anda. Perusahaan ini memperkenalkan fitur Copilot baru di seluruh perangkat Windows 11, yang menampilkan interaksi suara langsung dengan Copilot di aplikasi dan di seluruh sistem operasi. Kemampuan ini telah tersedia di ponsel pintar selama bertahun-tahun dengan berbagai tingkat keberhasilan, seperti halnya kesuksesan Microsoft Copilot+ jajaran laptop.

“Sudah hampir empat dekade sejak PC mengubah cara Anda berinteraksi dengannya, yang utamanya adalah mouse dan keyboard,” kata Yusuf Mehdi, kepala pemasaran konsumen di Microsoft. “Tetapi bagaimana jika Anda dapat melakukan lebih dari itu dan berbicara dengannya? Dalam pikiran kami, suara akan menjadi mekanisme input ketiga yang digunakan pada PC Anda.”

Dorongan untuk berbicara langsung ke PC Anda memiliki beberapa data di baliknya. Mehdi mengutip pengamatan Microsoft sendiri tentang bagaimana orang berinteraksi dengan PC-nya melalui suara, seperti melalui dikte, pencatatan, pengetikan suara, dan transkripsi. Mehdi juga mengatakan orang-orang menggunakan aplikasi Copilot dua kali lebih banyak saat menggunakan suara dibandingkan mengetik, karena kemudahan penggunaannya. “Orang-orang berbicara melalui komputer mereka, mereka tidak berbicara ke komputer mereka atau dengan komputer mereka,” katanya. “Tetapi menurut kami itulah yang sebenarnya akan banyak berubah.”

Dengan Copilot bertenaga suara yang hadir di semua komputer Windows 11, Microsoft berharap orang-orang akan mulai lebih banyak menggunakan fitur AI-nya. Intinya bukan untuk mengganti mouse dan keyboard secara keseluruhan, melainkan membuat suara menjadi “tambahan,” seperti yang dikatakan Mehdi.

Mehdi sepertinya lupa menyebutkan “sentuhan” sebagai mekanisme input dari pembelajaran sejarahnya. Microsoft terkenal berinvestasi cukup banyak dalam upaya mengubah PC menjadi sistem operasi yang mengutamakan sentuhan jendela 8 dan itu dimasukkan ke dalam tablet Windows (dan Windows Phone), yang pada akhirnya ditinggalkan di luar perangkat tertentu seperti Permukaan Pro. Mungkin segalanya akan berbeda dengan suara.

Visi dan Tindakan Kopilot

Semakin banyak dorongan dan konteks yang Anda berikan pada AI, semakin banyak yang dapat dilakukannya. Itu tidak sepenuhnya intuitif dengan suara, tapi di situlah Copilot Vision berperan. Visi Kopilot memungkinkan AI melihat layar Anda dan menawarkan bantuan berdasarkan konteks ini. Ini sudah menjadi fitur Copilot+ PC sejak bulan Juninamun sekarang akan tersedia secara luas di semua komputer Windows 11, bahkan komputer tanpa NPU (neural processor Unit). Google baru-baru ini menambahkan kemampuan serupa ke browser Chrome-nya.

Salah satu kasus penggunaan Copilot Vision yang paling menonjol adalah untuk tutorial dalam aplikasi. Jika Anda mencari tindakan atau menu tertentu dalam perangkat lunak yang rumit, Copilot Vision dapat dengan cepat mengarahkan Anda ke arah yang benar. Ini adalah toolbar mengambang yang dapat mengikuti Anda ke aplikasi atau bagian mana pun dari Windows, berdasarkan konteks apa yang ada di layar Anda, apakah itu keseluruhan desktop atau hanya jendela tertentu.

Artinya, tidak perlu terlalu banyak dorongan, dan dikombinasikan dengan kontrol suara, ini lebih mirip dengan memiliki teman yang berpengetahuan luas yang berdiri di belakang Anda. Microsoft menyebutnya “Sorotan”, yang dapat dipicu hanya dengan meminta Copilot untuk “menunjukkan caranya”, baik saat mengedit foto, memeriksa kalender, atau menulis daftar belanjaan. Di beberapa aplikasi, seperti Word, Excel, dan PowerPoint, Copilot Vision bahkan bisa “melihat” apa yang ada di luar layar Anda yang sebenarnya, seperti slide dalam presentasi atau halaman di dokumen Word yang tidak dalam tampilan penuh.

Mehdi juga berbicara tentang Gaming Copilot yang menghadirkan Copilot Vision ke dalam dunia gaming, baik di PC maupun perangkat seperti baru. Sekutu ROG Xbox. Saya melihat demo aksinya, dengan asisten menawarkan arahan kepada pemain tentang misi apa yang harus diambil selanjutnya dalam petualangan dunia terbuka.

Ketika Copilot Vision digabungkan dengan Copilot Actions, segalanya menjadi menarik. Ini adalah pandangan Microsoft Agen AI. Tindakan Copilot dapat melakukan berbagai hal atas nama Anda secara lokal dengan aplikasi atau sistem operasi, hanya dengan mengikuti instruksi bahasa alami. Jadi, daripada meminta Copilot Vision menunjukkan kepada Anda di mana menemukan pengaturan yang tidak jelas itu di Adobe Photoshop, Copilot Actions bisa langsung mengaktifkannya untuk Anda. Anda dapat meminta Copilot Actions melakukan pengeditan yang sama pada folder yang penuh dengan foto atau mengekstrak informasi dari PDF berukuran besar.

Microsoft juga menunjukkan pratinjau arah Copilot Actions, yang menyoroti visi “menulis ulang” Windows 11 untuk AI. Sebuah fitur bernama Connectors, kini tersedia untuk Windows Insiders, memungkinkan Anda mengambil tindakan secara lokal di PC langsung dari aplikasi Copilot, seperti membuka file dari OneDrive, membuka email, atau bahkan membuat presentasi PowerPoint. Microsoft mengatakan aplikasi pihak ketiga seperti Google Kalender atau Gmail akan berfungsi dalam aplikasi Copilot.

Misalnya, Anda dapat meminta Copilot untuk menemukan detail janji temu dengan dokter gigi atau menemukan file tertentu dengan menjelaskannya. Selama Anda mengizinkan Copilot memiliki akses ke aplikasi tersebut, Copilot tidak hanya dapat menemukan aplikasi dan file tersebut, namun juga dapat mengambil tindakan terhadap atau di dalamnya. Meskipun ini mereplikasi beberapa fungsi Mengingatfitur AI yang bermasalah dengan keamanan, eksklusif untuk Kopilot+ PCMicrosoft mengatakan mereka akan hidup berdampingan. Fitur lain yang khusus untuk Copilot+, seperti Click to Do, akan tetap eksklusif untuk perangkat dengan NPU pada perangkat yang lebih kuat untuk pemrosesan AI yang lebih cepat.

Tindakan Copilot telah menjadi bagian dari alat perusahaan 365 Copilot Microsoft sejak akhir tahun 2024, tetapi ini adalah pertama kalinya tindakan tersebut diluncurkan secara luas kepada rata-rata pengguna Windows. Microsoft mengatakan itu akan tersedia “dalam beberapa bulan mendatang,” dan kali ini Anda akan dapat menggunakan Tindakan Copilot dengan perintah teks, bukan hanya suara.

Gagasan untuk mengambil tindakan pada aplikasi dari dalam pencarian tidak berbeda dengan apa yang dilakukan Apple dengan Tindakan Spotlight dan pintasan di macOS Tahoe. Namun ambisi Microsoft nampaknya jauh lebih besar. Untuk saat ini, Copilot masih merupakan sesuatu yang harus Anda panggil, baik dengan suara atau dengan mengklik aplikasi (terpasang di bilah pencarian Taskbar). Namun tidak sulit membayangkan Copilot berkembang menjadi antarmuka utama Windows.

Akankah hal ini benar-benar membuat orang lebih sering menggunakan Copilot? Itu sulit untuk dikatakan. Karena berbagai alasan, pengguna Windows cenderung mengubah perilaku secara perlahan, dan berpindah dari Windows 10 ke Windows 11 telah terbukti menjadi sebuah tantangan.