AI Làm Phim: Sử Dụng ComfyUI Với Mô Hình Stable Diffusion

AI làm hiệu ứng FX

Ứng Dụng Comfy UI 

Tới giờ thì AI vẫn chưa sửa được từng miếng và thay đổi visual kiểu ê giữ viên đạn đầu mà sửa cái đít tiếp giáp với nước, các phần nước bắn ra giữ nguyên nhưng sửa cái shape nước chính theo kiểu này với cái thân động là như sau …
Cơ bản là nhà nhà làm phim đẻ thêm rất nhiều role để prompt khiển các kiểu AI con đà điểu, anh em làm CGI ổn … quá ổn

Video trên là kết quả của SVD Stable Diffusion, prompt hình từ Mid Journey

Sử Dụng Comfy UI

Comfy UI sẽ giúp triển khai model Stable Diffusion không cần phải dùng Code mà thông qua giao diện đồ họa sử dụng node
https://github.com/comfyanonymous/ComfyUI
một trong các model hay được biết đến giúp tạo ra hình ảnh video từ Diffusion là ControlNet, tuy nhiên cũng có những ComfyUI build sẵn giúp người dùng sử dụng được ngay – build hẳn với SVD như sau:
https://github.com/thecooltechguy/ComfyUI-Stable-Video-Diffusion -> đã có bao gồm frame interpolation tức là làm mịn các frame khi số frame quá ít dẫn tới hình bị giật khi playback

Cách để triển khai nói chung các loại AI đều qua Python, ComfyUI cũng có thể triển khai được trên Windows dễ dàng, cách làm: https://artstablediffusion.com/installing-comfyui-on-windows/
Và vì do đây là các model Ai sẽ sử dụng rất nhiều tài nguyên để tạo ra hình và video nên người dùng cần phải có hệ thống máy tương đối là đủ sức chịu đựng về VRAM GPU. Đây là một video chia sẻ mẹo và thủ thuật giúp các máy ít VRAM vẫn có thể cố gắng trèo đèo lội suối với ComfyUI Stable Diffusion




Post Author: Vu Pham

Leave a Reply