Google đã sử dụng video youtube từ thử thách ma-nơ-canh để đào tạo ai

Mục lục:

Những gì bạn cần biết
Nhận thêm Pixel 3a
Google Pixel 3a

Những gì bạn cần biết

Google đang đào tạo AI của mình để tạo ra các bản đồ chuyên sâu cô lập các đối tượng người trong cảnh chỉ bằng một camera.
Để bắt đầu, Google đã sử dụng 2000 video YouTube từ Thử thách ma nơ canh để huấn luyện AI.
Kết quả sẽ dẫn đến khả năng thêm hiệu ứng cho video, chẳng hạn như chế độ dọc và được sử dụng cho thực tế Augmented.

Trong một bài đăng trên blog gần đây, Google đã nêu chi tiết cách nó hoạt động dựa trên nhận thức sâu sắc trong các video mà cả máy ảnh và chủ đề đều chuyển động. Khi bắt đầu, nghiên cứu cần truy cập vào một lượng lớn dữ liệu để đào tạo AI, và bước hợp lý đầu tiên là đào tạo nó để phát hiện mọi người trong một cảnh mà camera đang di chuyển nhưng mọi người ở trạng thái tĩnh.

Hóa ra, Google có tài nguyên hoàn hảo cho dữ liệu này dưới dạng video YouTube được quay cho Thử thách ma cà rồng. Trong thử thách này, một người hoặc một nhóm người sẽ đứng yên hoàn toàn khi một camera quay xung quanh vị trí của họ. Google đã sử dụng 2000 video từ thử thách để giúp đào tạo AI của mình để phát hiện hình người trong nhiều cảnh khác nhau.

Một điều khiến nghiên cứu này trở nên thú vị hơn nữa là việc Google đang dạy AI của mình tạo ra các bản đồ chuyên sâu bằng các cảnh quay được quay chỉ bằng một camera. Hầu hết các lần, nhiều camera phải được sử dụng để cảm nhận thông tin độ sâu trong một cảnh.

Google đã sử dụng một cái gì đó tương tự cho hình ảnh tĩnh để tạo hiệu ứng chế độ chân dung trên điện thoại Pixel. Tuy nhiên, điều này chỉ liên quan đến hình ảnh tĩnh. Phương pháp mới mà Google đang phát triển là đào tạo AI của mình để tạo ra một bản đồ chuyên sâu, nơi cả máy ảnh và chủ thể đang di chuyển trong một cảnh.

Bằng cách phân nhánh thành video, nó sẽ mở ra các tính năng trong tương lai để tạo hiệu ứng bokeh trong các cảnh video tương tự như chế độ chân dung trên điện thoại của bạn. Một lợi ích khác đến từ nghiên cứu này sẽ là kết quả được cải thiện cho thực tế mở rộng, chẳng hạn như Playmojis từ Sân chơi của Google.

Một khả năng khác sẽ là việc tạo ra hình ảnh 3D từ các cảnh 2D. Mặc dù phần cứng máy ảnh luôn cần thiết cho chụp ảnh và quay phim, nhưng những gì Google đã làm trong nhiều năm qua với phần mềm cho thấy, trong tương lai, các thuật toán sẽ quan trọng và giúp cung cấp trải nghiệm mới.