IMAX kết hợp AI, mang đến trải nghiệm điện ảnh đột phá

Trong bối cảnh tiêu thụ nội dung toàn cầu tăng cao và nhu cầu về nội dung không phải tiếng Anh vượt qua cả phim ảnh và chương trình tiếng Anh, IMAX đang tận dụng AI để mở rộng quy mô bản địa hóa nội dung gốc của mình.

Theo báo cáo của PwC, ngành công nghiệp giải trí và truyền thông đã tăng trưởng 5% lên 2,8 nghìn tỷ USD vào năm 2023. Ngành này dự kiến sẽ tiếp tục mở rộng, mặc dù với tốc độ tăng trưởng kép hàng năm khiêm tốn gần 4% lên 3,4 nghìn tỷ USD trong vòng 5 năm tới. Nội dung ngôn ngữ không phải tiếng Anh đang phát triển nhanh chóng ngay cả ở các thị trường tiếng Anh, bao gồm Mỹ, Anh, Úc và Canada. Năm ngoái, Netflix đã báo cáo lượng người xem nội dung không phải tiếng Anh ở Anh tăng 90% trong ba năm qua.

IMAX đã nhận thấy xu hướng này và hiện đang khám phá khả năng bản địa hóa bằng AI để thu hút thêm người xem.

Vào thứ Hai, công ty sản xuất rạp chiếu phim của Canada, được biết đến với các rạp chiếu phim khổng lồ và trải nghiệm phim nhập vai, đã thông báo hợp tác với startup Camb.ai có trụ sở tại Dubai để sử dụng các mô hình giọng nói AI của mình để dịch nội dung gốc, bao gồm phim tài liệu.

Camb.ai, công ty đã triển khai lồng tiếng AI và dịch thuật giọng nói cho các sự kiện và giải đấu thể thao trực tiếp, bao gồm Australian Open, Eurovision Sport và Major League Soccer, cung cấp mô hình Boli cho dịch thuật lời nói thành văn bản và Mars cho mô phỏng giọng nói. Các mô hình này có sẵn thông qua nền tảng DubStudio của startup, hỗ trợ 140 ngôn ngữ, bao gồm nhiều ngôn ngữ ít tài nguyên không có nhiều dữ liệu trên internet.

Akshat Prakash, đồng sáng lập và CTO của Camb.ai, cho biết trong một cuộc phỏng vấn độc quyền: “Các công ty như OpenAI và Anthropic có tầm nhìn khác về xã hội. Họ đang cố gắng xây dựng các mô hình rất ‘ngang’ và có thể bao quát một lượng lớn nhiệm vụ… Chúng tôi hoàn toàn không phải làm điều đó. Một số mô hình của chúng tôi có ít hơn 100 triệu tham số và siêu chuyên biệt”.

Prakash, cựu kỹ sư của Apple, người đã làm việc với nhóm phát triển các mô hình AI và ML cho Siri, đã đồng sáng lập Camb.ai với cha mình là Avneesh Prakash vào năm ngoái.

“Chúng tôi cách nhau một thế hệ, và lớn lên ở Ấn Độ. Cách nhau ba mươi năm, chúng tôi gặp phải những thách thức ngôn ngữ giống nhau”, CTO chia sẻ.

Ông cho biết Camb.ai đã đào tạo trước 70% mô hình của mình bằng cách sử dụng các bộ dữ liệu được cấp phép học thuật, có thể sử dụng cho mục đích thương mại. 30% còn lại liên quan đến việc tinh chỉnh dữ liệu mà công ty nhận được thông qua các đối tác ban đầu triển khai mô hình của mình để lồng tiếng và dịch thuật dựa trên AI.

“Những gì chúng tôi không làm, và chúng tôi đã rất cẩn thận và hoàn toàn tránh điều đó, là khả năng ‘cạo’ dữ liệu trên internet”, Prakash khẳng định. “Một số công ty cảm thấy rằng họ có thể thoát khỏi việc đó vì họ đang xây dựng một ứng dụng hoặc công cụ hướng đến người tiêu dùng và họ tin rằng việc ‘cạo’ dữ liệu, chẳng hạn như 10 petabyte dữ liệu trên internet là ổn”.

Camb.ai sử dụng phương pháp “ba lớp” để cung cấp dịch thuật dựa trên AI, bao gồm lớp nền tảng là các mô hình Boli và Mars, lớp cơ sở hạ tầng lưu trữ các mô hình AI này và sau đó là nền tảng DubStudio cho giao diện người dùng.

Không giống như các mô hình dựa trên AI khác, Boli của Camb.ai lấy các mã thông báo giọng nói đầu vào, tạo ra các mã thông báo văn bản đầu ra bằng ngôn ngữ được dịch và giữ lại các sắc thái, Prakash tuyên bố. Khi Boli tạo ra văn bản, Mars sẽ dịch văn bản thành giọng nói bằng cách sử dụng cùng một tín hiệu âm thanh đầu vào để ghi lại hiệu suất của âm thanh thực tế, bao gồm cả âm thanh xung quanh, chẳng hạn như nhạc nền của khán giả cổ vũ trong trường hợp sự kiện thể thao, ông nói.

Prakash nói rằng công nghệ của Camb.ai cung cấp dịch thuật giọng nói đồng thời lên đến 10 ngôn ngữ với độ trễ từ 20 đến 30 giây, có thể được bao phủ bởi độ trễ phát trực tuyến và phát sóng từ 30 đến 40 giây.

IMAX sẽ triển khai dịch thuật AI theo từng giai đoạn, bắt đầu với các ngôn ngữ có nhiều tài nguyên. Việc triển khai diễn ra sau khi thử nghiệm nội bộ công nghệ của Camb.ai trên nội dung gốc của mình.

“Mặc dù chúng tôi mới chỉ ở giai đoạn đầu của quan hệ đối tác, nhưng chúng tôi sẽ tiếp tục hợp tác để khám phá tốt hơn tiềm năng của nó và cách nó có thể giúp chúng tôi tiến lên tốt nhất”, Mark Welton, chủ tịch của IMAX Global cho biết.

Welton chỉ ra rằng việc triển khai AI sẽ giúp tiết kiệm chi phí dịch thuật mà không tiết lộ thông tin cụ thể.

Camb.ai hiện có đội ngũ 50 người. Vào tháng 2, công ty đã huy động được 4 triệu USD trong vòng hạt giống do Courtside Ventures dẫn đầu. Prakash chia sẻ rằng startup đang chốt một vòng gọi vốn pre-Series A lớn hơn để mở rộng phạm vi tiếp cận và số lượng nhân viên.