AI lồng tiếng trên Instagram và Facebook
Công cụ lồng tiếng bằng AI của Meta sẽ tự động dịch và lồng tiếng cho các video trên Instagram và Facebook, bắt đầu với các bản dịch tiếng Anh-Tây Ban Nha.
Meta đang mở rộng quyền truy cập vào công cụ dịch thuật dựa trên trí tuệ nhân tạo (AI), có khả năng tự động lồng tiếng video trên Instagram và Facebook sang một ngôn ngữ khác.
Công cụ này sử dụng AI không chỉ để dịch các từ được nói mà còn để tái tạo giọng nói của người dùng và đồng bộ hóa với chuyển động của miệng, tạo ra trải nghiệm xem tự nhiên hơn.
Khi ra mắt, tính năng này chỉ giới hạn ở các bản dịch từ tiếng Anh sang tiếng Tây Ban Nha và ngược lại. Điều này phản ánh bản xem trước ban đầu mà Meta đã chia sẻ tại sự kiện Connect vào năm ngoái. Người dùng sẽ thấy tùy chọn này trước khi đăng tải một thước phim ngắn (reel), nơi họ có thể bật "Dịch giọng nói bằng Meta AI".
Sau khi được kích hoạt, video có thể được lồng tiếng bằng ngôn ngữ đã chọn và các nhà sáng tạo cũng có tùy chọn bật tính năng khớp môi (lip-syncing) để căn chỉnh chính xác hơn với biểu cảm khuôn mặt.
Công ty đã thiết kế quy trình này đơn giản và dễ sử dụng. Trước khi đăng bài, người dùng có thể xem lại phiên bản lồng tiếng của video để đảm bảo bản dịch và đồng bộ hóa đáp ứng mong đợi của họ.
Tự động hiển thị và dán nhãn
Meta xác nhận rằng các thước phim đã được dịch sẽ tự động xuất hiện với người xem bằng ngôn ngữ họ ưu tiên mà không cần bất kỳ thao tác nào từ người sáng tạo hay khán giả. Ví dụ, một người dùng nói tiếng Tây Ban Nha khi xem một thước phim được tạo bằng tiếng Anh sẽ thấy phiên bản đã dịch theo mặc định.
Để đảm bảo tính minh bạch, mỗi thước phim đã dịch sẽ có nhãn "được tạo bằng Meta AI". Điều này đảm bảo người xem biết rằng giọng nói và chuyển động môi đã được tăng cường bằng AI, chứ không phải do người sáng tạo tự ghi âm.
Khả dụng cho nhà sáng tạo
Việc triển khai công cụ lồng tiếng bằng AI hiện đang giới hạn cho các nhóm người dùng cụ thể. Trên Facebook, tính năng này khả dụng cho các nhà sáng tạo có 1.000 người theo dõi trở lên. Trên Instagram, nó dành cho tất cả các tài khoản công khai.
Bằng cách bắt đầu với những nhóm này, Meta nhằm mục đích thử nghiệm và tinh chỉnh công nghệ, đồng thời thu thập phản hồi về hiệu suất và độ tin cậy.
Công ty vẫn chưa xác nhận khi nào tính năng này có thể được mở rộng sang các ngôn ngữ khác hoặc cơ sở người dùng rộng hơn. Tuy nhiên, sự ra mắt này phản ánh tham vọng lớn hơn của Meta trong việc giúp nội dung truyền thông xã hội dễ tiếp cận hơn trên mọi rào cản ngôn ngữ.
Meta tin rằng công cụ này sẽ giúp các nhà sáng tạo tiếp cận khán giả lớn hơn, đa dạng hơn bằng cách loại bỏ nhu cầu phụ đề hoặc các bản dịch riêng biệt. Khi công ty tiếp tục đầu tư mạnh vào AI, khả năng mới này có thể báo hiệu sự khởi đầu của nhiều công cụ ngôn ngữ và giọng nói tiên tiến hơn sẽ được tích hợp vào các nền tảng của họ.
Trào lưu công nghệ chung
Google, X và TikTok đều có những tính năng liên quan đến dịch thuật và lồng tiếng tự động, tuy nhiên mỗi nền tảng có cách tiếp cận và mức độ phát triển khác nhau.
Google: Google không có một tính năng lồng tiếng tự động tích hợp trực tiếp trên các nền tảng của mình như YouTube hay Google Photos theo cách mà Meta đang triển khai. Tuy nhiên, Google đã phát triển các công nghệ cốt lõi cho việc dịch và lồng tiếng bằng AI.
Google Workspace và các ứng dụng bên thứ ba: Google đã phát hành các API và công cụ dịch thuật giọng nói cho các nhà phát triển. Điều này cho phép các ứng dụng bên thứ ba, có mặt trên Google Play hoặc Google Workspace Marketplace, sử dụng công nghệ của Google để cung cấp tính năng dịch và lồng tiếng video. Các ứng dụng này thường cho phép người dùng nhập video và chọn ngôn ngữ để dịch, lồng tiếng.
YouTube: YouTube, thuộc sở hữu của Google, đã có tính năng phụ đề tự động từ lâu. Mặc dù chưa có tính năng lồng tiếng bằng AI chính thức, YouTube đã thử nghiệm tính năng lồng tiếng đa ngôn ngữ cho một số kênh và người sáng tạo, cho phép người dùng xem video với bản lồng tiếng do chính người sáng tạo cung cấp.
X (trước đây là Twitter): X đã công bố các kế hoạch lớn về việc tích hợp AI vào nền tảng của mình, nhưng chưa có thông tin chính thức về một tính năng lồng tiếng tự động rộng rãi tương tự như của Meta.
Tích hợp AI: X đang tập trung vào việc sử dụng AI để cải thiện trải nghiệm người dùng, từ việc đề xuất nội dung, phát hiện bot, đến kiểm duyệt nội dung.
Các ứng dụng bên thứ ba: Tương tự như Google, có nhiều ứng dụng và dịch vụ bên ngoài cung cấp tính năng lồng tiếng AI cho video và người dùng có thể sử dụng các công cụ này để tạo ra video đã được lồng tiếng và sau đó đăng tải lên X.
TikTok: TikTok đã tích hợp nhiều công cụ AI mạnh mẽ để phá vỡ rào cản ngôn ngữ.
Phụ đề và dịch tự động: TikTok đã có tính năng tự động tạo phụ đề và dịch bình luận từ lâu.
Dịch video: TikTok đã triển khai tính năng dịch video tự động, cho phép người dùng xem video với phụ đề được dịch theo thời gian thực.
Một số báo cáo cho thấy TikTok đang thử nghiệm các tính năng lồng tiếng bằng AI để dịch giọng nói trong video, nhưng thông tin về việc triển khai rộng rãi vẫn chưa được xác nhận. Tuy nhiên, các ứng dụng và dịch vụ bên thứ ba chuyên về lồng tiếng TikTok đã xuất hiện trên thị trường, cho thấy nhu cầu này là rất lớn.