EMO (Emotive Portrait Alive) của tập đoàn Alibaba (trụ sở chính tại Hàng Châu, Trung Quốc) được coi như là bước tiến mới của AI tạo sinh. EMO được nhóm tác giả LinRui Tian, Qi Wang, LieFeng Bo và Bang Zhang của Viện Điện toán Thông minh (IIC) thuộc Alibaba nghiên cứu. Theo đó, AI này có khả năng tạo biểu cảm và âm thanh từ nhân vật trong ảnh. Với bất kỳ hình ảnh tĩnh nào, AI này đều có thể biến nó thành video có nói, hát với biểu cảm tự nhiên.
Thậm chí, EMO của Alibaba còn có thể tạo nét mặt, nhíu mắt và lắc lư theo điệu nhạc. Phần miệng của nhân vật cũng được AI thể hiện một cách tự nhiên.
Trong một số video được Alibaba công bố, hình ảnh sẽ được biến thành video và hát những bài được nhập vào một cách nhanh chóng. Ngoài tiếng Anh, tiếng Trung, EMO cũng có thể hỗ trợ được nhiều ngôn ngữ khác.
Alibaba presents EMO AI – All Demo Clips Upscaled to 4K
Đại diện của nhóm nghiên cứu cho biết, họ đã huấn luyện AI với một lượng lớn dữ liệu về hình ảnh, âm thanh, vieo để tạo biểu cảm khuôn mặt một cách chân thực, thông qua mô hình khuếch tán riêng có tên là Audio2Video.
Phương pháp được nhóm nghiên cứu của Alibaba áp dụng là tổng hợp, bỏ qua liên kết về mô hình 3D không gian hoặc những điểm mốc trên khuôn mặt và chuyển tiếp khung hình liền mạch để bảo toàn về tính nhất quán trong video, từ đó mang lại những bức ảnh động có tính biểu cảm cao, sống động như thật.
Từ một bức ảnh tĩnh, EMO của Alibaba có thể “hô biến” thành những video với biểu cảm tự nhiên và sống động. Ảnh cắt từ video
Hiện nay, dù dữ liệu của EMO đã được công bố trên Github, nhưng Alibaba vẫn chưa tiết lộ về thời gian phát hành đại trà AI này.
Với sự phát triển của EMO, nhiều người cho rằng AI này có thể góp phần làm thay đổi cách sản xuất phim ảnh và sản xuất nội dung hình ảnh khác ở Trung Quốc trong tương lai không xa.
Ngày 11/3 vừa qua, Alibaba thông báo sẽ đầu tư ít nhất là 5 tỷ HKD (khoảng 640 triệu USD) vào lĩnh vực giải trí Hồng Kông (Trung Quốc) trong 5 năm tới để hỗ trợ và tăng cường việc sản xuất phim ảnh và những nội dung hình ảnh khác. Thông báo bất ngờ này được đưa ra ở Chợ phim và truyền hình quốc tế Hồng Kông (Filmart), một triển lãm thương mại phim và video lớn được khai mạc tại thành phố này vào ngày 11/3.
Tập đoàn Alibaba cho biết, khoản hỗ trợ 640 triệu USD sẽ được dùng để sản xuất phim, phim truyền hình và nghệ thuật thị giác khác, đồng thời để phát triển nguồn nhân lực (trong đó có học bổng cho sinh viên học làm phim).
Tập đoàn Alibaba đang đón đầu làn sóng đầu tư vào AI ở Trung Quốc. Ảnh: Bloomberg
Hồng Kông (Trung Quốc) từng có một trong những ngành công nghiệp điện ảnh sôi động nhất trên thế giới, đặc biệt là trong những năm 1980 và 1990. Ở thời kỳ đỉnh cao, những ngôi sao nơi đây được coi là niềm tự hào của xứ Cảng Thơm khi được nhiều quốc gia trên toàn thế giới biết tới và yêu mến. Tuy nhiên, hiện nay, sự huy hoàng này đang dần bị chìm vào dĩ vãng, khi các ngành công nghiệp điện ảnh và giải trí khác ngày càng phát triển.
Tập đoàn nổi tiếng về thương mại điện tử đặt mục tiêu tăng cường việc cung cấp những nội dung thông qua lần đầu tư này. Trên thực tế, Alibaba có một số công ty con liên quan tới ngành giải trí, chẳng hạn như Alibaba Pictures, một công ty sản xuất phim và Youku Tudou, một nền tảng về dịch vụ phát video trực tuyến lớn.
Trong số đó, Alibaba Pictures đã được niêm yết trên Sở giao dịch chứng khoán Hồng Kông. Đây là một nền tảng tích hợp dựa trên Internet, bao gồm sản xuất, quảng bá, phân phối nội dung, quản lý bán vé rạp chiếu phim, cấp phép IP và dịch vụ dữ liệu cho ngành giải trí.
Trước đó, vào cuối tháng 2, tập đoàn Alibaba cũng đang đón đầu làn sóng đầu tư vào AI ở Trung Quốc. Tập đoàn này đã dẫn đầu trong vòng gọi vốn vào công ty khởi nghiệp Moonshot AI, với trị giá 1 tỷ USD. Vòng gọi vốn này giúp đẩy giá trị của công ty mới được một năm tuổi này tăng lên gấp 8 lần, khoảng 2,5 tỷ USD.
Moonshot AI được thành lập vào tháng 3/2023, là một trong những công ty khởi nghiệp nổi tiếng nhất phát triển công nghệ AI tạo sinh ở Trung Quốc, với kỳ vọng có thể cạnh tranh được với những “ông lớn” như Google và Open AI.
Thương vụ đầu tư này của tập đoàn Alibaba diễn ra trong bối cảnh các tập đoàn công nghệ và những công ty đầu tư mạo hiểm đang chi hàng tỷ USD cho việc đào tạo và phát triển những dịch vụ về AI.
Bài viết tham khảo nguồn: Bloomberg, SCMP, Alibaba
Đọc thêm
Nguồn: Sưu tầm