Google menampilkan Astra, saingan GPT-4 yang melihat dunia nyata melalui kamera ponsel

Selama acara pengembang tradisional Google I / O kita tahu itu Proyek Astra, satu baru inteligência buatan yang sedang dikembangkan oleh perusahaan. Didefinisikan sebagai a AI multimoda dengan dukungan untuk membuat berbagai jenis konten, memahami cara kerjanya dalam praktik dan bagaimana produk baru dapat berinteraksi dengan dunia nyata, memberikan jawaban atas pertanyaan sehari-hari.

Cara kerja Astra

Mudah didefinisikan sebagai agen AI yang harus diintegrasikan ke dalam aplikasi Gemini untuk smartphone Android, atau Proyek Astra “melihat” menggunakan kamera belakang smartphone dan mengirimkan respons real-time kepada penggunanya. Seolah-olah ponsel cerdas Anda menjadi hidup sehingga Anda dapat melihat segala sesuatu di sekitar Anda.

Selama acara Google hari ini, kami melihatnya Demis Hassan menguji AI dalam praktiknya — dan kepala Google DeepMind dan pemimpin upaya AI berjanji bahwa hal itu tidak dimanipulasi. Kami dibawa ke kantor di Inggris dan, begitu dia melihat seorang pembicara, pengguna meminta AI untuk mengidentifikasi salah satu komponennya, sebuah tweeter.

Demonstrasi menarik lainnya adalah membaca kode pemrograman di layar komputer. HAI Proyek Astra tidak hanya dapat mengidentifikasi bahwa monitor menampilkan kode, tetapi juga menunjukkan apa yang akan dilakukan saat kode tersebut dijalankan.

Terakhir, ketika ponsel cerdas dibawa ke jendela kantor dan pengguna menanyakan di lingkungan mana kantor tersebut berada, respons dikirimkan dalam waktu kurang dari lima detik.

O Google mendefinisikan Proyek Astra sebagai “agen AI yang berguna untuk setiap hari”, dan pengembangan tersebut dilakukan selama lima tahun terakhir untuk menghadirkan alat yang benar-benar membuat perbedaan dalam kehidupan sehari-hari pengguna.

Meskipun kami telah mencapai kemajuan luar biasa dalam mengembangkan sistem AI yang dapat memahami informasi multimodal, mengurangi waktu respons untuk sesuatu yang bersifat percakapan merupakan tantangan teknis yang sulit. Selama beberapa tahun terakhir, kami telah berupaya meningkatkan cara model kami memandang, bernalar, dan berbicara untuk membuat kecepatan dan kualitas interaksi menjadi lebih alami.

Google tentang Proyek Astra

Sumber Daya Memori

Yang paling menarik perhatian di Proyek Astra itu adalah kemungkinan baginya untuk menghafal segala sesuatu yang dilihat oleh kamera. Ketika pengguna menanyakan di mana letak kacamatanya, agen AI dengan cepat menjawab lokasi tepatnya, yaitu di sebelah apel merah.

Saat digunakan dengan kacamata pintar yang dirahasiakan, Proyek Astra Ia juga terkesan dengan melakukan optimasi yang membuat kehidupan sehari-hari lebih mudah bagi banyak orang. Gaya percakapan agen AI Google juga sangat ringan, menunjukkan bahwa perusahaan berkomitmen mengembangkan AI yang tidak mengesampingkan alam, meski tidak ada di kehidupan nyata.

Dengan memanfaatkan model ucapan inti kami, kami juga meningkatkan bunyinya, sehingga memberikan intonasi yang lebih luas kepada agen. Agen-agen ini dapat lebih memahami konteks di mana mereka digunakan dan merespons percakapan dengan cepat. Dengan teknologi seperti ini, mudah untuk membayangkan masa depan di mana manusia dapat memiliki asisten AI khusus di sisi mereka, melalui ponsel atau kacamata.

Google tentang Proyek Astra

Lihat contoh yang ditampilkan hari ini di acara berita Google:

Ketersediaan

Menurut datanya sendiri Google, atau Proyek Astra akan diintegrasikan ke dalam Google Gemini, menggantikan Asisten Google yang terkenal, akhir tahun ini. Pengguna awal kemungkinan besar akan melihat hal ini pada pertengahan September, saat di mana hal ini akan terjadi Google meluncurkan smartphone barunya pixel dan juga akan merilis Android 15 untuk produsen ponsel pintar di seluruh dunia.

Ide perusahaan ini adalah mengembangkan fitur-fitur kecil yang, bersama-sama, membentuk pilihan lengkap bagi penggunanya. HAI Proyek Astra hanyalah sebagian dari beberapa fitur baru yang dihadirkan di GoogleI/O 2024, namun jelas bahwa perusahaan yang menyebut istilah “AI” sebanyak 121 kali dalam acara yang berlangsung selama dua jam tersebut, akan berinvestasi lebih banyak lagi di pasar ini.

Asisten Google mendapatkan kegunaan baru

Sampai saat ini, asisten pribadi lainnya juga menyukainya Amazon Alexa e siri sangat fokus pada pengiriman tanggapan yang lebih sederhana dan file yang diunggah pengguna. Sejak Project Astra terintegrasi dengan Google Assistant, hadir di beberapa perangkat Android bahkan tersedia bagi mereka yang memiliki perangkat Apple, hal ini tentunya akan membuka era baru.

Pertanyaan besarnya adalah kapan hal ini harus terjadi dan khususnya bagaimana cara kerjanya dalam praktik. Karena masih dalam pengembangan, agen AI harus mengalami beberapa modifikasi sebelum dirilis ke semua orang, namun idenya menarik dan kini menjadi perhatian kita.

Apa yang Anda pikirkan Proyek Astra? Beritahu kami orang-orang Komentar!

Lihat juga

Gemini Tingkat Lanjut atau ChatGPT Plus? Lihat AI mana yang terbaik

Google mengumumkan Gemini 1.5 dengan kinerja 87% lebih baik

Diperiksa oleh Glaucon Vital pada 14/5/24.