Apa saja fitur Gemini dan Google AI yang kita tunggu

Sekitar setahun terakhir, Google telah meninjau sejumlah fitur AI bermerek Gemini dan lainnya di seluruh aplikasi konsumennya. Berikut semua yang telah diumumkan dan kapan tersedia.

Piksel

Di akhir Made by Google 2023, Zoom Enhance yang “secara cerdas mengisi celah antar piksel dan memprediksi detail halus” dicantumkan untuk Pixel 8 Pro. Memanfaatkan “model gambar AI generatif khusus” pada perangkat, Google menganggap ini berguna ketika Anda lupa memperbesar.

Ini adalah aplikasi AI generatif yang luar biasa, membuka berbagai kemungkinan untuk membingkai dan mengedit gambar Anda. Jadi jenis peningkatan zoom yang biasa Anda lihat dalam fiksi ilmiah—ada di ponsel dalam genggaman Anda.

Pada bulan Oktober, Google mengatakan hal ini akan “datang kemudian.” Setelah tiga Penurunan Fitur Piksel, itu belum tiba. Belum jelas apakah model yang dimaksud Google adalah Gemini Nano dengan Multimodalitas. Pada titik ini, mungkin saja ia akan debut dengan Pixel 9 Pro seperti halnya ponsel tersebut fitur foto utama.

Beranda Google

Di aplikasi Google Home, AI generatif akan digunakan untuk meringkas kejadian menjadi “tampilan yang disederhanakan tentang apa yang terjadi baru-baru ini.” “Ringkasan cepat dan mudah” ini akan menggunakan poin-poin penting, sementara Anda juga dapat “Bertanya tentang rumah Anda” secara percakapan untuk menemukan klip riwayat video dan mendapatkan otomatisasi. “Fitur eksperimental” akan tersedia bagi pelanggan Nest Aware pada tahun 2024.

Fitbit

Fitbit Labs akan memungkinkan pengguna Fitbit Premium menguji dan memberikan umpan balik mengenai kemampuan AI eksperimental.

Salah satu fitur tersebut adalah chatbot yang memungkinkan Anda mengajukan pertanyaan tentang data Fitbit Anda dengan cara yang alami dan komunikatif. “Pelatihan yang dipersonalisasi” yang memperhitungkan sasaran kebugaran ini bertujuan untuk menghasilkan “pesan dan panduan yang dapat ditindaklanjuti,” dengan respons yang dapat mencakup bagan khusus.

• “Misalnya, Anda dapat menggali lebih dalam berapa menit zona aktif (AZM) yang Anda dapatkan dan korelasinya dengan seberapa memulihkan kualitas tidur Anda.”
• “…model ini mungkin dapat menganalisis variasi pola tidur dan kualitas tidur Anda, lalu menyarankan rekomendasi tentang cara mengubah intensitas latihan Anda berdasarkan wawasan tersebut.”

Di balik layar, ini didukung oleh hal baru LLM Kesehatan Pribadi dari Fitbit dan Google Research yang dibangun di Gemini. Pada bulan Maret, fitur ini akan hadir “akhir tahun ini” untuk “sejumlah kecil pengguna Android yang terdaftar dalam program Fitbit Labs di aplikasi seluler Fitbit.”

Foto Google

Tanyakan Foto akan memungkinkan Anda mengajukan pertanyaan tentang gambar dan video di perpustakaan Anda. Selain menemukan gambar, aplikasi ini dapat menarik informasi dan memberi Anda jawaban dalam bentuk teks. Didukung oleh Gemini, contoh pertanyaan termasuk “Tunjukkan foto terbaik dari setiap taman nasional yang pernah saya kunjungi” dan “Apa tema pesta ulang tahun Lena?” Aplikasi ini dapat digunakan untuk “menyarankan gambar terbaik” dan membuat teks untuk gambar tersebut. Ask Photos adalah “fitur eksperimental” yang akan segera diluncurkan, dengan Google yang telah mengumumkan lebih banyak kemampuan di masa mendatang.

Gmail + Google Ruang Kerja

Di Gmail untuk Android dan iOSAnda akan menemukan tombol Gemini di pojok kanan atas yang memungkinkan Anda menampilkan panel samping versi seluler untuk memasukkan perintah lengkap. Gmail juga mendapatkan Balasan Cerdas Kontekstual yang menawarkan saran yang lebih disesuaikan, terperinci, dan bernuansa. Fitur ini akan diluncurkan ke Workspace Labs pada bulan Juli.

Di Cloud Next 2024 pada bulan April, Google juga dipratinjau kemampuan perintah suara untuk Help me write di Gmail seluler. Sementara itu, fitur “pemolesan instan” akan “mengubah catatan kasar menjadi email lengkap dengan satu klik.”

Di web desktop, panel samping tersedia di Gmail, Google Drive, dan Docs/Sheets/Slide. Gemini selanjutnya akan hadir di Google Obrolan untuk meringkas percakapan dan menjawab pertanyaan.

Google Peta

Kembali pada bulan FebruariGoogle mengumumkan bahwa Maps akan menggunakan LLM untuk mendukung chatbot “Tanya tentang”. Anda dapat menggunakannya untuk menemukan tempat yang sesuai dengan permintaan Anda dengan dukungan untuk pertanyaan lanjutan. Chatbot ini didukung oleh detail tentang 250 juta tempat dan foto, video, serta ulasan yang dikirimkan pengguna.

krom

Gemini Nano adalah yang akan datang ke Chrome desktop untuk mendukung fitur browser seperti “Bantu saya menulis.” Ini harus tersedia di sebagian besar laptop dan desktop modern.

Pencarian Google

Selain meluncurkan AI Overviews, Google juga memberikan pratinjau sejumlah fitur yang akan datang yang pertama kali hadir di Search Labs:

• Anda akan dapat mengambil Ikhtisar AI Asli dan membuatnya “Lebih Sederhana” (hanya beberapa kalimat) atau “Membaginya” (respons lebih panjang).
• Kemampuan penalaran multi-langkah akan memungkinkan Anda mengajukan pertanyaan kompleks sekaligus daripada membaginya menjadi beberapa pertanyaan.
• Perencanaan makan dan perjalanan
• Halaman hasil pencarian yang diatur oleh AI
• Pencarian video: Rekam video dan ajukan pertanyaan tentangnya

Bahasa Indonesia: Android

Gemini Nano dengan Multimodality akan diluncurkan di Pixel “akhir tahun ini” dan mendukung fitur-fitur seperti deskripsi TalkBack di perangkat/offline, dan peringatan penipuan waktu nyata yang mendengarkan panggilan untuk pola yang dapat dikenali. Google akan membagikan informasi lebih lanjut akhir tahun ini.

Pada I/O 2024, Google juga mempratinjau bagaimana Gemini di Android akan segera menjadi panel overlay alih-alih membuka UI layar penuh untuk menampilkan hasil. Selain menjaga konteks, ini memungkinkan Anda menarik dan melepas gambar yang dihasilkan ke dalam percakapan. Untuk pelanggan Gemini Advanced, tombol “Tanyakan video ini” dan “Tanyakan PDF ini” akan melihat Gemini mencerna video dan dokumen. Ini akan diluncurkan “dalam beberapa bulan ke depan.” Selanjutnya, Saran Dinamis akan menggunakan Gemini Nano dengan Multimodality untuk memahami apa yang ada di layar Anda:

Misalnya, jika Anda mengaktifkan Gemini dalam percakapan yang membicarakan tentang Pickleball, sarannya mungkin mencakup “Temukan klub Pickleball di dekat saya” dan “Peraturan Pickleball untuk pemula”.

Tambahan lain yang sangat berguna di perangkat seluler adalah Ekstensi Gemini untuk Google Kalender, Tasks, dan Keep. Ini memungkinkan Anda mengambil gambar halaman dengan beberapa tanggal mendatang yang dapat diubah Gemini menjadi acara Kalender. Dalam beberapa bulan mendatang, “Utilitas” akan memungkinkan Gemini mengakses aplikasi Jam Android.

Kami juga menunggu Gemini seluler hadir di Pixel Tablet musim panas ini.

Gemini

Live akan membiarkan Anda memiliki percakapan dua arah dengan Gemini. Untuk membuat pengalaman lebih alami, Gemini akan memberikan tanggapan singkat yang dapat Anda sela untuk menambahkan informasi baru atau meminta klarifikasi. Anda dapat memilih dari 10 suara berbeda, dengan Google membayangkan Gemini Live berguna untuk persiapan wawancara atau latihan pidato. Ini akan tersedia dalam “bulan-bulan mendatang” untuk anggota Gemini Advanced.

“Akhir tahun ini,” Gemini Live akan memungkinkan Anda meluncurkan mode kamera langsung. Cukup tunjuk sesuatu di dunia nyata dan ajukan pertanyaan tentangnya. Ini didukung oleh Project Astra.

Permata adalah versi Gemini yang disesuaikan yang memungkinkan Anda memiliki “teman olahraga, juru masak pembantu, mitra pengkodean, atau pemandu menulis kreatif.” Anggota Gemini Advanced akan dapat membuat versi khusus, sementara semua pengguna akan memiliki akses ke Gems yang telah dibuat sebelumnya, seperti Learning Coach.

Cukup jelaskan apa yang Anda ingin Permata Anda lakukan dan bagaimana Anda ingin Permata tersebut merespons — seperti “Anda adalah pelatih lari saya, berikan saya rencana lari harian dan bersikaplah positif, optimis, dan memotivasi.” Gemini akan mengikuti instruksi tersebut dan, dengan satu klik, menyempurnakannya untuk menciptakan Permata yang memenuhi kebutuhan spesifik Anda.

Pengguna Gemini Advanced juga akan mendapatkan “perencana imersif” yang lebih dari sekadar menyarankan aktivitas namun juga memperhitungkan waktu perjalanan dan pemberhentian, serta minat orang, untuk membuat rencana perjalanan yang terperinci. Gemini akan menggunakan detail penerbangan/perjalanan di Gmail, rekomendasi Google Maps untuk makanan dan museum di dekat hotel Anda, dan Penelusuran untuk aktivitas lainnya.