Bốn công cụ video AI "đấu pháp", một bài viết hướng dẫn bạn cách sử dụng
Tuyển chọn TechFlowTuyển chọn TechFlow
Bốn công cụ video AI "đấu pháp", một bài viết hướng dẫn bạn cách sử dụng
Chọn một công cụ AI phù hợp nhất với bạn.
Chuyên sâu báo cáo Web3Tác giả: Mộc Mộc
Thị trường công cụ video AI ngày càng cạnh tranh khốc liệt, các bản nâng cấp liên tục xuất hiện khiến người dùng không kịp trở tay, đặc biệt là Gen-2, Pika 1.0, Stable Video Diffusion và Magic Animate – những sản phẩm này đang trở thành công cụ tạo video phổ biến nhất nhờ được hỗ trợ bởi các mô hình AI lớn mạnh mẽ.
Mặc dù các mô hình lớn về video hiện tại vẫn chưa đạt đến mức độ "chỉ cần mô tả một câu chuyện bằng văn bản là có thể tạo ra cả một bộ phim", nhưng chúng đã có thể tạo ra những đoạn video sinh động chỉ thông qua một chuỗi từ khóa gợi ý, đồng thời phát triển các khả năng đa phương thức mạnh mẽ như chuyển ảnh thành video.
Báo cáo Nguyên Vũ trụ đã thử nghiệm bốn công cụ video AI hàng đầu với hy vọng giúp bạn nhanh chóng làm quen và trải nghiệm. Cần lưu ý rằng khi nhập các từ khóa cho tất cả các công cụ này, tốt nhất nên sử dụng tiếng Anh vì hiệu quả tạo ra sẽ tốt hơn so với việc dùng từ khóa tiếng Trung. Tại đây, chúng tôi cũng mong muốn các công cụ tạo video AI nội địa của Trung Quốc có thể nhanh chóng bắt kịp, tạo ra những sản phẩm chất lượng phù hợp với người dùng nói tiếng Trung.
Runway Gen-2
Gen-2 là công cụ tạo video từ văn bản đầu tiên có sẵn công khai, do Runway Research phát triển. Các chức năng liên quan của nó bao gồm chuyển văn bản/hình ảnh thành video, định hướng phong cách video, mở rộng hình ảnh, xóa nền video chỉ bằng một cú nhấp, loại bỏ các phần tử cụ thể khỏi video, huấn luyện mô hình AI riêng biệt... Có thể nói đây hiện là công cụ tạo/chỉnh sửa video AI mạnh nhất hiện nay.
So với Gen-1, chức năng tạo video từ văn bản của Gen-2 đã cải thiện đáng kể. Hãy cùng xem kết quả tạo ra khi nhập vào cụm từ: "raccoon play snow ball fight in sunny snow Christmas playground" (gấu mè nhỏ chơi đùa đánh trận tuyết trong sân chơi Giáng sinh phủ tuyết dưới ánh nắng mặt trời). Về cả chất lượng hình ảnh lẫn bố cục, Gen-2 đều thể hiện rất xuất sắc. Tuy nhiên, vẫn tồn tại vấn đề thiếu sót từ khóa, ví dụ như trong hình ảnh không thể hiện rõ yếu tố "Giáng sinh" và hành động "đánh trận tuyết".
Chỉ vài ngày trước, Runway vừa ra mắt tính năng mới mang tên "Motion Brush" (cọ chuyển động), cho phép người dùng chỉ cần tô vùng trên hình ảnh để biến ảnh tĩnh thành nội dung động. Chức năng "cọ chuyển động" cực kỳ thân thiện với thao tác: chọn một bức ảnh, dùng cọ tô vùng muốn làm sống động, sau đó điều chỉnh hướng chuyển động mong muốn, bức ảnh tĩnh sẽ hoạt động theo đúng thiết lập.
Tuy nhiên, hiện tại "cọ chuyển động" vẫn còn một số hạn chế, ví dụ phù hợp với các cảnh di chuyển chậm, không thể tạo ra các cảnh vật di chuyển nhanh như xe hơi lao vun vút. Ngoài ra, nếu dùng cọ chuyển động thì các khu vực bên ngoài vùng tô vẽ gần như hoàn toàn đứng yên, không thể tinh chỉnh nhiều quỹ đạo chuyển động cho nhiều đối tượng khác nhau.
Hiện tại, tài khoản miễn phí của Runway chỉ có thể tạo video dài 4 giây, mỗi giây tiêu tốn 5 điểm tích lũy, tối đa tạo được 31 video và không thể gỡ watermark. Nếu bạn muốn tạo video với độ phân giải cao hơn, không có watermark và thời lượng dài hơn, bạn cần phải trả phí để nâng cấp tài khoản.
Ngoài ra, nếu bạn muốn học hỏi thêm về video AI, hãy thử kênh truyền hình Runway TV do chính Runway ra mắt. Kênh này phát lại vòng 24 giờ các video được tạo bởi AI; qua những video AI này, bạn có thể tìm thấy cảm hứng sáng tạo.
Địa chỉ trang web: https://app.runwayml.com/video-tools/teams/wuxiaohui557/ai-tools/gen-2
Pika 1.0
Pika 1.0 là phiên bản chính thức đầu tiên do Pika Labs phát hành, phòng thí nghiệm này là một công ty khởi nghiệp công nghệ AI do đội ngũ người Hoa sáng lập. Pika 1.0 không chỉ có thể tạo hoạt hình 3D, anime, phim hoạt hình và phim điện ảnh mà còn thực hiện được các chức năng trọng yếu như chuyển đổi phong cách, mở rộng khung hình và chỉnh sửa video. Pika 1.0 đặc biệt giỏi tạo hình ảnh theo phong cách anime và có thể tạo ra các video ngắn hiệu ứng điện ảnh.
Tiện ích nhỏ được cư dân mạng yêu thích nhất của Pika 1.0 chính là "phép thuật AI" - tức chức năng chỉnh sửa cục bộ. Cách đây vài tháng, đây vẫn là khả năng mới chỉ xuất hiện trong lĩnh vực vẽ AI, giờ đây "chỉnh sửa cục bộ" có thể thay đổi các đặc điểm cục bộ của chủ thể hay toàn bộ nền trong video, thao tác đơn giản, chỉ cần ba bước: tải lên video động; chọn vùng cần chỉnh sửa trong bảng điều khiển Pika; nhập từ khóa mô tả để nói với Pika bạn muốn thay thế bằng gì.
Ngoài chức năng "chỉnh sửa cục bộ", Pika 1.0 lần đầu tiên đưa chức năng "mở rộng hình ảnh" nổi tiếng của công cụ tạo ảnh từ văn bản Midjourney sang lĩnh vực video – đây là lần đầu tiên xuất hiện ở một công cụ tạo video AI. Khác với chức năng "mở rộng ảnh bằng AI" bị lạm dụng đến nhàm chán trên TikTok, khả năng mở rộng video của Pika 1.0 rất đáng tin cậy, không chỉ hình ảnh tự nhiên mà còn hợp lý về logic.
Hiện tại, Pika 1.0 cho phép người dùng trải nghiệm miễn phí nhưng cần đăng ký để lấy suất dùng thử. Nếu bạn vẫn đang chờ đợi, có thể thử đăng nhập qua Discord trên trang web chính thức. Tương tự Midjourney, người dùng cần sáng tạo trên đám mây thông qua Discord, đồng thời có thể trải nghiệm hai chức năng chính: văn bản-thành-video và ảnh-thành-video.
Sau khi vào máy chủ Discord của Pika 1.0, nhấn vào bất kỳ kênh nào trong mục Generat, nhập dấu "/", chọn "Create", rồi nhập từ khóa vào hộp thoại prompt hiện ra.
So với Gen-2, Pika 1.0 hiểu từ khóa gợi ý tốt hơn, nhưng chất lượng hình ảnh vẫn chưa bằng Gen-2, rất có thể do nguyên nhân liên quan đến việc xử lý trên nền tảng đám mây.
Nếu dùng ảnh để tạo video, sau khi nhập "/" chọn "animate", tải lên một bức ảnh và nhập mô tả từ khóa.
Hiệu quả chuyển đổi ảnh-thành-video của Pika 1.0 ngang ngửa với Gen-2.
Địa chỉ trang web: https://pika.art/waitlist
Stable Video Diffusion
Ngày 22 tháng 11, Stability AI đã công bố một dự án mã nguồn mở tạo video bằng AI: Stable Video Diffusion (SVD). Theo blog chính thức của Stability AI, SVD mới hỗ trợ tạo video từ văn bản và từ hình ảnh, đồng thời hỗ trợ chuyển đổi vật thể từ góc nhìn đơn sang đa góc nhìn, tức tổng hợp 3D. Hiệu quả tạo video không hề thua kém Runway Gen2 và Pika 1.0.
Hiện tại có hai cách dùng trực tuyến: một là bản demo trải nghiệm do chính thức phát hành trên Replicate, hai là một trang web trực tuyến mới ra mắt – cả hai đều miễn phí.
Chúng tôi đã thử nghiệm cách thứ nhất vì nó hỗ trợ điều chỉnh tham số và thao tác tương đối thuận tiện: tải ảnh lên, điều chỉnh các thông số như số khung hình, tỷ lệ khung hình, mức độ chuyển động tổng thể, v.v. Tuy nhiên, điểm trừ là hiệu quả tạo hình ảnh tương đối ngẫu nhiên, cần phải điều chỉnh liên tục để đạt được kết quả mong muốn.
Hiện tại, Stable Video Diffusion mới chỉ là mô hình cơ bản, chưa được sản phẩm hóa, nhưng phía công ty cho biết "đang có kế hoạch tiếp tục mở rộng để xây dựng hệ sinh thái tương tự như Stable Diffusion", đồng thời dự định cải tiến mô hình liên tục dựa trên phản hồi của người dùng về an toàn và chất lượng.
Địa chỉ trang web: Bản demo thử nghiệm và bản trực tuyến
-
https://replicate.com/stability-ai/stable-video-diffusion
-
https://stable-video-diffusion.com/
Magic Animate
MagicAnimate là một phương pháp tạo hoạt ảnh chân dung dựa trên mô hình lan tỏa (diffusion), nhằm tăng tính nhất quán theo thời gian, duy trì độ chân thực của ảnh gốc và nâng cao độ trung thực của hoạt ảnh, được giới thiệu chung bởi Show Lab thuộc Đại học Quốc gia Singapore và ByteDance.
Nói đơn giản, chỉ cần cung cấp một ảnh tham chiếu và một chuỗi tư thế (video), hệ thống có thể tạo ra một video hoạt ảnh theo chuyển động của tư thế, đồng thời giữ nguyên đặc điểm nhận dạng của ảnh tham chiếu. Thao tác cũng vô cùng đơn giản, cũng chỉ cần ba bước: tải lên một ảnh chân dung tĩnh; tải lên video demo động tác mong muốn; điều chỉnh các tham số.
MagicAnimate cũng cung cấp cách trải nghiệm cục bộ trên GitHub, những ai quan tâm có thể thử!
Địa chỉ trang web: https://github.com/magic-research/magic-animate
Chào mừng tham gia cộng đồng chính thức TechFlow
Nhóm Telegram:https://t.me/TechFlowDaily
Tài khoản Twitter chính thức:https://x.com/TechFlowPost
Tài khoản Twitter tiếng Anh:https://x.com/BlockFlow_News
