Tạo Video AI Chất Lượng Cao với Hunyuan Video và ComfyUI

Bạn đã bao giờ mơ ước tự tạo ra những video độc đáo, sáng tạo chỉ bằng vài dòng mô tả? Hunyuan Video, một mô hình AI mã nguồn mở mới, sẽ biến giấc mơ đó thành hiện thực. Kết hợp sức mạnh của Hunyuan Video với giao diện trực quan của ComfyUI, bạn có thể tạo ra những thước phim ấn tượng một cách dễ dàng. Bài viết này sẽ hướng dẫn bạn từng bước để tạo video AI chất lượng cao, từ cài đặt phần mềm đến tối ưu hóa kết quả.

Phần Mềm Cần Thiết Để Tạo Video Hunyuan

Để bắt đầu hành trình sáng tạo video AI với Hunyuan Video, bạn cần chuẩn bị những công cụ sau:

• ComfyUI: Nền tảng chính để thực hiện quy trình tạo video. Bạn có thể cài đặt ComfyUI trên Windows, Mac hoặc sử dụng Google Colab.
• Hunyuan Video Model: Mô hình AI chịu trách nhiệm tạo video từ văn bản.
• Text Encoders: Các mô hình chuyển đổi văn bản thành định dạng mà Hunyuan Video có thể hiểu được.
• VAE (Variational Autoencoder): Mô hình nén và giải nén hình ảnh, giúp giảm tài nguyên tính toán.

Nếu bạn là người mới bắt đầu, hãy tham khảo hướng dẫn sử dụng ComfyUI cho người mới để làm quen với giao diện và các chức năng cơ bản.

Hunyuan Video là một mô hình AI mã nguồn mở được phát triển bởi Tencent, chuyên tạo video từ văn bản. Điều gì khiến Hunyuan Video nổi bật so với các đối thủ cạnh tranh?

• Mô Hình Lớn: Với 13 tỷ tham số, Hunyuan Video là mô hình text-to-video mã nguồn mở lớn nhất hiện nay. Điều này cho phép mô hình hiểu và tạo ra những video phức tạp, chi tiết hơn.
• Kết Hợp Tạo Ảnh và Video: Hunyuan Video sử dụng kiến trúc “dual-stream to single-stream” hybrid transformer. Mô hình xử lý token video và văn bản riêng biệt, sau đó hợp nhất chúng để tạo ra cả hình ảnh và video chất lượng cao.
• Text Encoder Đa Phương Thức: Khác với các mô hình khác, Hunyuan sử dụng visual LLM (Large Language Model) làm text encoder, giúp cải thiện độ chính xác trong việc kết hợp văn bản và hình ảnh.
• VAE 3D: Hunyuan sử dụng CausalConv3D để nén video và hình ảnh vào không gian tiềm ẩn, giảm đáng kể yêu cầu về tài nguyên mà vẫn duy trì được tính liên tục của video.
• Cơ Chế Viết Lại Prompt: Hunyuan Video có khả năng viết lại prompt để xử lý sự khác biệt trong yêu cầu của người dùng.
• Hiểu Chuyển Động Camera: Mô hình được huấn luyện với nhiều chuyển động camera khác nhau, cho phép bạn điều khiển góc quay và khung hình trong video. Các chuyển động hỗ trợ bao gồm: zoom in, zoom out, pan up, pan down, pan left, pan right, tilt up, tilt down, tilt left, tilt right, around left, around right, static shot, handheld shot.

Thời gian tạo video phụ thuộc vào cấu hình phần cứng của bạn. Với Hunyuan Video, bạn có thể tạo một video 480p (848 x 480) với 73 khung hình trong:

• 4.5 phút trên RTX4090.
• 11 phút trên Google Colab với runtime L4.

Để chạy Hunyuan Video trên ComfyUI, bạn cần một card đồ họa NVidia. Người dùng đã báo cáo rằng có thể chạy Hunyuan Video với VRAM từ 8 GB trở lên. Tuy nhiên, để có trải nghiệm tốt nhất, nên sử dụng card RTX4090 với 24 GB VRAM.

Quy trình sau đây sẽ hướng dẫn bạn tạo video Hunyuan ở độ phân giải 480p và lưu thành file MP4.

Bước 0: Cập Nhật ComfyUI

Đảm bảo ComfyUI của bạn đã được cập nhật lên phiên bản mới nhất. Cách đơn giản nhất là sử dụng ComfyUI Manager.

1. Nhấn nút Manager trên thanh công cụ.
2. Chọn Update ComfyUI.
3. Khởi động lại ComfyUI.

Bước 1: Tải Mô Hình Video

Tải Hunyuan video text-to-image model và đặt nó vào thư mục ComfyUI > models > diffusion_models.

Bước 2: Tải Text Encoders

Tải clip_l.safetensors và llava_llama3_fp8_scaled.safetensors. Đặt chúng vào thư mục ComfyUI > models > text_encoders.

Bước 3: Tải VAE

Tải hunyuan_video_vae_bf16.safetensors và đặt nó vào thư mục ComfyUI > models > vae.

Bước 4: Tải Workflow

Tải file JSON workflow Hunyuan video. Kéo và thả file vào giao diện ComfyUI.

Bước 5: Cài Đặt Các Node Bị Thiếu

Nếu bạn thấy các khối màu đỏ, có nghĩa là bạn chưa cài đặt các custom node cần thiết.

1. Nhấn Manager > Install missing custom nodes.
2. Cài đặt các node bị thiếu.
3. Khởi động lại ComfyUI.

Bước 6: Chỉnh Sửa Prompt

Thay đổi prompt để tạo video theo ý muốn của bạn.

Bước 7: Tạo Video

Nhấn nút Queue để bắt đầu quá trình tạo video.

Khắc phục sự cố

• RuntimeError: “replicationpad3dcuda” not implemented for ‘BFloat16’: Lỗi này xảy ra do phiên bản PyTorch đã cũ. Hãy cập nhật ComfyUI và PyTorch lên phiên bản mới nhất.

Hunyuan Video không chỉ tạo video mà còn có thể tạo ảnh tĩnh. Để làm điều này, bạn cần đặt số lượng khung hình (frames) về 1 và thay thế node lưu video bằng node hiển thị hoặc lưu ảnh.

Sau khi chỉnh sửa, bạn có thể thay đổi prompt và nhấn Queue để tạo ảnh.

Nâng tầm sáng tạo video với Hunyuan Video

Với hướng dẫn chi tiết này, bạn đã có thể tự mình tạo ra những video AI độc đáo và ấn tượng với Hunyuan Video và ComfyUI. Hãy khám phá thêm các tính năng nâng cao của Hunyuan Video để tạo ra những thước phim chuyên nghiệp và sáng tạo hơn nữa. Khả năng tạo video AI chất lượng cao mở ra những chân trời mới cho những nhà sáng tạo nội dung. Hãy tận dụng Hunyuan Video để kể những câu chuyện của riêng bạn và thu hút khán giả bằng những thước phim sống động và hấp dẫn.

Hunyuan Video: Công cụ AI tạo ra những video sống động từ câu chữ

Hunyuan Video, với khả năng tạo video từ văn bản một cách nhanh chóng và chất lượng cao, thực sự là một công cụ mạnh mẽ cho những người làm sáng tạo nội dung, mở ra những cơ hội mới để kể chuyện và thu hút khán giả.