Awal tahun ini, di I/O 2024, Google memamerkan kemampuan Lens baru yang didukung oleh teknologi AI generatif multi-modal yang memungkinkan pengguna mengajukan pertanyaan menggunakan video yang disebut Google Lens “Ask With Video” dan hal yang sama kini diluncurkan. Untuk perangkat Android dan iOS, Google Lens akan semakin memperluas kemampuannya.
Menurut Google, fitur “Tanya dengan Video” Lens dapat berguna dalam memecahkan masalah gadget. Dalam sebuah demo, Google mendemonstrasikan bagaimana fitur tersebut dapat digunakan untuk memecahkan masalah pemutar rekaman lama yang rusak tanpa harus melalui beberapa pencarian web yang rumit.
Bergantung pada pertanyaannya, hasil pencarian Google akan memberikan ikhtisar AI dengan kemungkinan jawaban dan link ke detail lebih lanjut tentangnya. Ask Lens dengan kemampuan video didukung oleh model ucapan Google yang canggih, persepsi visual yang mendalam, dan model Gemini khusus yang berjalan di cloud.
Saat Anda mengajukan pertanyaan, model Gemini khusus yang berjalan di cloud menganalisis video bingkai demi bingkai dan menghasilkan hasil pencarian yang relevan. Semua ini terjadi hanya dalam beberapa detik, sedangkan pencarian secara manual memerlukan waktu beberapa menit untuk mendapatkan hasil pencarian yang akurat. Kami menguji beberapa skenario dan hasil dari Google Lens hampir tepat sasaran.
Ini adalah fitur penting bagi para penggemar DIY (do-it-yourself) yang ingin memecahkan masalah atau memperbaiki sendiri gadgetnya.
Meskipun Google Lens tersedia sebagai aplikasi terpisah untuk ponsel pintar Android, tidak ada aplikasi Lens khusus untuk iPhone; Hal yang sama dapat diakses di aplikasi Google. Bahkan, Apple juga meluncurkan fitur serupa untuk iPhone bernama Visual Intelligence dengan Apple Intelligence, yang memungkinkan pengguna bertanya tentang apa pun dengan menahan tombol ambil di kamera.
