Đăng lần đầu vào ngày 11 tháng 9 năm 2024 và được cập nhật thông tin chi tiết về Generate Video.
Adobe vừa ra mắt Firefly Video Model , một mô hình AI mới sẽ mang AI tạo hình vào các công cụ sản xuất video của công ty như Premiere Pro và có khả năng là cả After Effects.
Khả năng của nó bao gồm tạo thêm khung âm thanh hoặc video từ một đoạn video clip hiện có và tạo các đoạn video clip mới từ hình ảnh tham chiếu hoặc lời nhắc văn bản.
Dưới đây, chúng tôi đã biên soạn các Câu hỏi thường gặp về Mô hình video Firefly, tính năng này vừa mới có sẵn thông qua tính năng Tạo video mới trong ứng dụng web Firefly.
Các mô hình AI tạo sinh của Firefly hiện có thể làm được gì?
Được phát hành vào năm ngoái , Firefly là một bộ công cụ nghệ thuật AI tạo sinh có sẵn dưới dạng ứng dụng web và được tích hợp vào các công cụ Adobe Creative Cloud.
Các mô hình AI cơ bản ban đầu hướng đến việc tạo ra hình ảnh tĩnh và hiện được tích hợp vào các ứng dụng bao gồm Photoshop và các công cụ Substance 3D .
Các tính năng chính của Firefly Video Model là gì?
Firefly Video Model mới mở rộng các khả năng đó sang hình ảnh chuyển động, tổng hợp cảnh quay video mới từ nhiều nguồn theo cách tương tự như các nền tảng như Runway .
Theo Adobe, các khả năng của nó bao gồm Generative Extend, cho phép mở rộng các đoạn video hiện có, tạo khung hình mới ở đầu hoặc cuối hoặc tạo thêm 'âm thanh phòng'.
Chuyển đổi hình ảnh thành video tạo ra các clip dựa trên ảnh tĩnh tham chiếu hoặc thậm chí là hình minh họa khái niệm.
Text to Video tạo video từ lời nhắc văn bản, với tùy chọn bổ sung để chỉ định các thuộc tính của camera như vị trí camera, mức thu phóng và các loại chuyển động camera phổ biến.
Firefly Video Model có thể tạo ra những loại video và hoạt hình nào?
Mặc dù Firefly Video Model có thể tạo ra hoạt hình 2D và 3D – bài đăng trên blog của Adobe cho thấy các ví dụ về cảnh quay được tạo ra giống với hoạt hình 3D, vẽ tay và stop-motion – trường hợp sử dụng ban đầu chính của nó là video tự nhiên hơn.
Theo Adobe, ứng dụng này “nổi trội trong việc tạo video về thế giới tự nhiên… như phong cảnh, thực vật hoặc động vật”.
Tuy nhiên, công ty cũng trích dẫn một loạt các ứng dụng khả thi khác, bao gồm tạo các thành phần FX như lửa, khói và bụi có thể được ghép vào các dự án VFX hoặc đồ họa chuyển động.
Mô hình video Firefly tốt như thế nào?
Mặc dù Mô hình video Firefly có khả năng tạo ra toàn bộ chuỗi video, nhưng các công cụ tạo video hiện tại gặp khó khăn trong việc duy trì tính nhất quán về thời gian và phong cách trong đầu ra của chúng.
Bài đăng trên blog của Adobe cho thấy mục đích sử dụng ban đầu của công cụ này là tạo tài liệu bổ sung cho các dự án được quay theo cách thông thường – về cơ bản là tạo cảnh quay lưu trữ AI – trích dẫn các trường hợp sử dụng như tạo cảnh quay B-roll và cảnh quay thiết lập bị thiếu.
Firefly Video Model sẽ được tích hợp vào những ứng dụng Adobe nào?
Mặc dù các công cụ Firefly có sẵn trực tuyến , Adobe cũng đang tích hợp chúng vào các công cụ Creative Cloud của mình ngày càng nhiều.
Cho đến nay, phần mềm chỉnh sửa video Premiere Pro là phần mềm duy nhất chắc chắn sẽ tích hợp Firefly Video Model, dự kiến sẽ tích hợp Generative Extend trong bản beta "vào cuối năm nay".
Tuy nhiên, bài đăng trên blog của Adobe cũng nhắc đến ứng dụng ghép ảnh After Effects. Trước đây, công ty này đã giới thiệu bản xem trước công nghệ của các công cụ AI tạo hình phù hợp với After Effects .
Mô hình Firefly Video AI được đào tạo trên dữ liệu nào?
Adobe mô tả mô hình Firefly Video AI là "an toàn về mặt thương mại và chỉ được đào tạo trên nội dung mà chúng tôi được phép sử dụng".
Đầu năm nay, công ty đã cập nhật Điều khoản sử dụng để loại trừ rõ ràng việc sử dụng nội dung của người dùng - ngoại trừ nội dung được tải lên thị trường nội dung Adobe Stock - để đào tạo các mô hình AI, sau phản ứng dữ dội của các nghệ sĩ.
Chi phí sử dụng mô hình Firefly Video AI là bao nhiêu?
Adobe chưa xác nhận giá của dịch vụ này, nhưng các dịch vụ AI tạo hình Firefly hiện tại đều dựa trên tín dụng. Bạn có thể tìm thấy thông tin chi tiết về giá tại đây .
Khi nào Firefly Video Model sẽ có sẵn?
Firefly Video Model hiện có sẵn thông qua ứng dụng web Firefly . Tính năng Generate Video mới của nó bao gồm cả khả năng chuyển văn bản thành video và chuyển hình ảnh thành video.
Generate Video hiện đang trong giai đoạn beta chỉ dành cho người được mời, nhưng bạn có thể đăng ký danh sách chờ qua liên kết bên dưới. Việc tạo video hiện chỉ giới hạn ở các tệp MP4 720p dài 5 giây.
By Jim Thacker
