Runway huấn luyện robot bằng video trên internet, hiệu quả gần như ngang bằng với dữ liệu chuyên nghiệp

Động Sát Beating AI tin nhanh, Runway ra mắt mô hình robot Praxis-1, đưa khả năng huấn luyện mô hình video AI vào robot thực tế. Nó sẽ học cách vật thể di chuyển và con người hoàn thành nhiệm vụ từ lượng lớn video thông thường trước, rồi biến những kinh nghiệm này thành hành động của robot.

Runway đã thực hiện một bài kiểm tra đặt vật thể, sau khi tiền huấn luyện bằng video internet, sai số trung bình của robot là 16,1 cm; chuyển sang video điều khiển từ xa robot được thu thập chuyên biệt, sai số là 16,0 cm. Bài kiểm tra gồm tổng cộng 93 nhóm đánh giá, kết quả của hai phương pháp huấn luyện gần như ngang bằng.

Nếu hướng đi này tiếp tục mở rộng, dữ liệu mà huấn luyện robot thiếu nhất có thể tăng thêm vài bậc độ lớn. Con người điều khiển robot từ xa để thu thập dữ liệu cần thiết bị, địa điểm và nhân lực; video thông thường đã có khắp internet từ lâu. Điều Runway muốn làm là biến những video vốn không thể trực tiếp điều khiển robot này thành tài liệu huấn luyện để robot học hành động.

Praxis-1 đã được thử nghiệm trên nhiều loại robot của Noble Machines, Standard Bots và Ultra, bao gồm cánh tay robot, robot hai tay và robot di động. Runway còn trình diễn cùng một chiến lược chuyển từ studio sang nhà bếp để tiếp tục thực hiện nhiệm vụ. Mô hình hiện chỉ mở đơn đăng ký thử nghiệm sớm, trọng số dự kiến công khai trong vài tháng tới, số lượng tham số và đánh giá độc lập đầy đủ hơn vẫn chưa được công bố.