Theo Pinwan.com vào ngày 18 tháng 10, Đại học Fudan ở Trung Quốc và Baidu đã cùng nhau ra mắt mô hình AI mới Hallo2, có thể tạo ra hoạt hình nhân vật có độ phân giải 4K kéo dài hàng giờ và có thể được điều khiển chính xác thông qua lời nhắc bằng giọng nói và văn bản. Mô hình Hallo2 dựa trên các mô hình khuếch tán tiềm ẩn và giới thiệu một loạt công nghệ tiên tiến, chẳng hạn như công nghệ nâng cao dữ liệu Patch-drop, có thể đảm bảo tính ổn định của các ký tự được tạo ra; Công nghệ tăng cường nhiễu Gaussian, giúp cải thiện tính liên tục và chất lượng của hoạt ảnh; Công nghệ dự đoán bảng mã rời rạc VQGAN thực hiện việc tạo ra các video có độ phân giải cao và đảm bảo sự mạch lạc về mặt thời gian của các chi tiết hình ảnh; nó cũng có cơ chế kiểm soát lời nhắc văn bản để làm cho hình ảnh động trở nên biểu cảm và dễ kiểm soát hơn. Kết quả thử nghiệm cho thấy Hallo2 vượt trội hơn tất cả các phương pháp hiện có trong việc tạo ra hoạt ảnh nhân vật có chuỗi dài, chất lượng cao.
TRANG TỔNG HỢP, PHÂN TÍCH TIN TỨC VỀ KH-CN
