Giới thiệu về RunwayML Gen-3 Alpha
RunwayML Gen 3 hay còn gọi là Gen 3 Alpha là mô hình tiên phong trong dòng mô hình sắp ra mắt, được Runway đào tạo trên nền tảng hạ tầng mới chuyên dụng cho việc huấn luyện đa phương thức quy mô lớn.
So với Gen-2, Gen 3 Alpha đại diện cho một bước tiến vượt bậc về độ trung thực, tính nhất quán và chuyển động hình ảnh.
Bài viết liên quan: RunwayML Gen 3 – Trải nghiệm đột phá với mô hình text/image to video
RunwayML Gen 3, được đào tạo cùng lúc trên video và hình ảnh, sẽ cung cấp năng lượng cho các công cụ Chuyển đổi Văn bản thành Video, Hình ảnh thành Video và Văn bản thành Hình ảnh của Runway, các chế độ điều khiển hiện có như Motion Brush, Advanced Camera Controls, Director Mode cũng như các công cụ sắp tới cho phép kiểm soát chi tiết hơn về cấu trúc, phong cách và chuyển động.
Gen-3 Alpha sẽ được phát hành với một bộ biện pháp bảo vệ mới, bao gồm hệ thống kiểm duyệt hình ảnh nội bộ mới và được cải thiện cùng với các tiêu chuẩn nguồn gốc C2PA.
Gen 3 Alpha của RunwayML có thể được sử dụng trong nhiều trường hợp khác nhau, bao gồm:
Tạo video từ văn bản:
- Tạo ra các đoạn video chất lượng cao từ mô tả văn bản.
Tạo video từ hình ảnh:
- Chuyển đổi hình ảnh thành video với các yếu tố chuyển động và cấu trúc cụ thể.
Kiểm soát chi tiết về cấu trúc, phong cách và chuyển động:
- Sử dụng các công cụ như Motion Brush, Advanced Camera Controls, và Director Mode để kiểm soát một cách tinh tế các yếu tố trong video.
Tạo ra nhân vật con người photorealistic:
- Gen 3 Alpha có khả năng tạo ra các nhân vật con người biểu cảm với nhiều hành động, cử chỉ và cảm xúc, mở ra cơ hội mới cho việc kể chuyện.
Sử dụng trong sản xuất phim, video âm nhạc, quảng cáo:
- Các công ty và nhà sáng tạo hàng đầu đã sử dụng Runway để tạo ra các thế giới mới cho các tour diễn, quảng cáo và các sản phẩm truyền thông khác.
Ngoài ra, Gen 3 Alpha còn có khả năng kiểm soát thời gian một cách tinh tế, cho phép tạo ra các chuyển đổi sáng tạo và khung hình chính xác cho các yếu tố trong cảnh. Đây là những ứng dụng cơ bản, và với sự phát triển liên tục, Gen 3 Alpha có thể được sử dụng trong nhiều lĩnh vực sáng tạo khác nữa.
Gen-3 Alpha is able to generate highly realistic and expressive human characters with a wide range of actions and emotions.
— Runway (@runwayml) June 19, 2024
Learn more at https://t.co/YQNE3eqoWf pic.twitter.com/LzfblSmKL5
Một vài ví dụ về RunwayML Gen 3 có thể làm được
Prompt: Close up shot of a living flame wisp darting through a bustling fantasy market at night.
Prompt: A FPV shot zooming through a tunnel into a vibrant underwater space.
Prompt: Ultra-fast disorienting hyperlapse racing through a tunnel into a labyrinth of rapidly growing vines.
Prompt: FPV, internal locomotive cab of a train moving at hyper-speed in an old European city.
Prompt: Handheld tracking shot, following a red ballon floating above the ground in abandon street.
Kiểm soát thời gian tinh tế Gen-3 Alpha đã được huấn luyện với những mô tả chi tiết và dày đặc về thời gian, cho phép tạo ra những chuyển đổi đầy sáng tạo và khung hình chính xác cho các yếu tố trong cảnh.
Prompt: An extreme close-up shot of an ant emerging from its nest. The camera pulls back revealing a neighborhood beyond the hill.
Nhân vật tạo hình con người cũng rất “Photorealistic”. Gen-3 Alpha nổi bật trong việc tạo ra các nhân vật con người biểu cảm với đa dạng hành động, cử chỉ và cảm xúc, mở ra những cơ hội mới cho việc kể chuyện.
Prompt: A cinematic wide portrait of a man with his face lit by the glow of a TV.
Việc đào tạo Gen-3 Alpha là một nỗ lực hợp tác từ một nhóm đa ngành bao gồm các nhà nghiên cứu, kỹ sư và nghệ sĩ. Gen-3 Alpha được thiết kế để có khả năng diễn giải một loạt các phong cách và thuật ngữ điện ảnh.
Việc tùy chỉnh các mô hình Gen-3 cho phép kiểm soát phong cách một cách chính xác và nhất quán hơn cho các nhân vật, đồng thời đáp ứng các yêu cầu cụ thể về nghệ thuật và kể chuyện, cùng nhiều tính năng khác.
