AI biến ảnh thành video nhảy múa

AI Disco có thể biến một bức ảnh tĩnh thành video sống động với những điệu nhảy xu hướng trên TikTok.

Các chuyên gia tại Đại học Công nghệ Nanyang (Singapore) và Microsoft giới thiệu mô hình AI mới có tên Disco, cho phép người dùng tạo video nhảy múa chỉ bằng một bức ảnh duy nhất.

Trước đây, một số ứng dụng hoán đổi khuôn mặt như Reface cũng gây sốt mạng xã hội khi cho phép người dùng tạo video chuyển động bằng một tấm ảnh chân dung. Tuy nhiên, ứng dụng này đơn giản là ghép mặt vào những video có sẵn.

Trong khi đó, mô hình AI Disco tạo cảm giác chân thật khi cho phép người dùng giữ lại cả tiền cảnh và nền của ảnh. AI cũng có thể học theo một vũ đạo mới và tái hiện thành hành động của người dùng. Ngoài ra, người dùng có thể tùy chọn nhiều vũ đạo từ những video khác nhau, chọn bối cảnh từ nguồn khác để sáng tạo.

Cách mô hình Disco học theo động tác của người nhảy. Nguồn: Disco

Để biến ảnh thành video nhảy múa bất kỳ, người dùng cần tải lên video có điệu nhảy gốc. AI sẽ phân tích và tái hiện các động tác. Sau đó, người dùng chọn ảnh cá nhân với tỷ lệ cơ thể gần bằng người mẫu trong video gốc. Disco sẽ tách nền, tách chi tiết trên cơ thể như tay chân, đầu, khuôn mặt rồi khớp với các động tác được hệ thống phân tích trước đó.

Nhóm đào tạo Disco cho biết họ dùng khoảng 700.000 ảnh chụp từ TikTok để dạy AI học các tư thế nhảy và tách người khỏi hậu cảnh. Sau đó, các nhà nghiên cứu tiếp tục tải lên 350 video nhảy múa, mỗi video dài 10-15 giây để AI học sâu hơn về cách con người chuyển động.

Theo Petapixel, Disco cho phép người dùng thực hiện mọi vũ đạo phổ biến trên TikTok mà không phải tốn công học và bắt chước.

"Với Disco, bạn có thể sáng tác bất kỳ thứ gì. Nếu muốn Elon Musk nhảy, bạn chỉ cần đưa hình ông vào hệ thống", tiến sĩ Tan Wang của Đại học Công nghệ Nanyang nói với New Scientist.

Trong khi đó, BGR nhận định công nghệ Disco có thể giúp người dùng TikTok "bắt trend" lập tức, nhưng cũng có thể khiến nội dung deepfake tràn lan mạng xã hội.

Không chỉ phục vụ người dùng mạng xã hội, Disco cũng được dùng trong hậu kỳ phim ảnh, chương trình truyền hình. Các nhà sản xuất có thể giúp diễn viên của họ khiêu vũ một cách tự nhiên mà không cần đến người đóng thế.