Google mới đây ra mắt một bản cập nhật mới dành cho tính năng Gemini Live, trong đó Google cải thiện về khả năng tương tác cũng như trải nghiệm hội thoại của người dùng. Cho đến khi Project Astra được cập nhật cho Google Pixel 9 Series và Galaxy S25 Series thì người dùng sẽ được trải nghiệm những nâng cấp này.

Trong một email mà Google gửi, họ nhấn mạnh rằng Gemini đã được cải thiện để hiểu tốt hơn nhiều ngôn ngữ, phương ngữ hoặc giọng điệu trong một cuộc trò chuyện Live duy nhất và giúp người dùng dịch thuật.

Gemini 2.0 mà mô hình đa phương thức tốt nhất của Google hiện tại, nó có thể nhận Input là văn bản, hình ảnh, âm thanh hay video và output là văn bản và âm thanh. Google đã cũng giới thiệu Live API để các nhà phát triển xây dựng AI agents và sắp tới nó sẽ được cập nhật cho ứng dụng Gemini cho Pixel 9 và Galaxy S25 Series, đó chính là một phần trong Project Astra.

Lúc này Gemini có thể hiểu được và tương tác với nội dung trên màn hình, cho phép người dùng tương tác với mô hình AI trong thời gian thực bằng cách chia sẻ màn hình của mình.

Ngoài việc hiểu và tương tác, Gemini còn có thể tra cứu thông tin, hiểu ngữ cảnh, ghi nhớ ngữ cảnh và xử lý gián đoạn tốt, thực thi lệnh và tích hợp các công cụ khác của Google.

Hiện tại thì Google đã cập nhật trước tính năng "Talk Live about this" cho Pixel 9 Series và Galaxy S25 Series, tính năng này cho phép người dùng sử dụng Gemini Live để trò chuyện với Gemini về một video trên YouTube, về một file pdf trong Files (ứng dụng quản lý tệp tin của Google) hay về một hình ảnh.

Biểu tượng "Talk Live about this" xuất hiện ở trên biểu tượng "Ask about screen". Google cũng cho biết Gemini sẽ lưu dữ liệu hình ảnh, video và âm thanh trong phần Apps Activity của ứng dụng.