Lookout là một ứng dụng mới sử dụng tính năng nhận dạng hình ảnh và trí tuệ nhân tạo để mô tả một hiện trường thông qua chiếc camera của điện thoại . Google hiện đang thử nghiệm ứng dụng này và cho biết nó sẽ được phát hành vào cuối năm nay , bắt đầu từ các thiết bị Pixel . Nếu bạn đi vào hành lang một tòa nhà bằng một chiếc camera Android cầm trong tay hoặc đeo quanh cổ , hướng ra ngoài , thì Lookout sẽ phát hiện được người và các vật thể , chẳng hạn như cửa thang máy , và đọc văn bản gần đó . Ứng dụng này không cần phải kết nối internet . Google cho biết Lookout được thiết kế để giúp người dùng tương tác với những gì đang diễn ra mà không cần phải báo cho họ biết quá nhiều thông tin . Nó chỉ mô tả các mục quan trọng nhất . Nếu một người muốn ngăn chặn tường thuật , họ đặt một tay lên máy ảnh hoặc gõ vào nó một cái để tạm dừng ứng dụng . Công ty cho biết ứng dụng này sử dụng các công nghệ tương tự như Google Lens , một công cụ tìm kiếm trực quan . Nó kết hợp học máy ( machine learning ) , nhận dạng hình ảnh và một số mô hình học máy khác nhau . " Những gì người khiếm thị cần là tiếp cận thông tin " , Erin Lauridsen - giám đốc công nghệ truy cập tại LightHouse ở San Francisco , Mỹ , nói . "
Google muốn biến một chiếc điện thoại Android thông thường thành một người trợ giúp hoạt động bằng trí tuệ nhân tạo ( AI ) dành cho người khiếm thị .