Bilibili (Bilibili) a officiellement lancé sa « fonction de traduction originale AI » auto-développée. Cette fonction utilise une technologie révolutionnaire de génération de voix et de reconstruction vidéo pour restaurer avec précision la voix, le timbre et le souffle uniques de l'hôte UP, et réalise une synchronisation naturelle de la langue traduite et de la forme de la bouche, fournissant ainsi des solutions innovantes pour la communication multilingue de contenus de base tels que les jeux, la technologie et le contenu bidimensionnel.
Différent de la rigidité de la traduction automatique traditionnelle, le principal avantage de la traduction originale IA de Bilibili réside dans le traitement de localisation « authentique ». Sa technologie de base repose sur un modèle de génération de parole développé en interne. Il utilise des méthodes innovantes de contrôle de la durée de la parole et des émotions pour contrôler avec précision le rythme de la parole et séparer les caractéristiques de l'expression émotionnelle et de l'identité du locuteur. Cela garantit que la voix traduite conserve non seulement le style personnel du propriétaire de l'UP, mais qu'elle s'adapte également naturellement aux habitudes rythmiques de la langue cible.
En termes de synchronisation labiale et de traitement des sous-titres, l'équipe technique a combiné une technologie avancée de traitement vidéo intelligent pour effacer avec précision la zone de sous-titre originale et la redessiner avec un haut degré de restauration, de sorte que la forme de la bouche traduite et le contenu vocal correspondent parfaitement.Pour les difficultés de traduction telles que la terminologie du jeu et les mèmes bidimensionnels, la fonction introduit une technologie d'exploration approfondie et combine un moteur de traduction construit avec un grand modèle de langage pour augmenter la précision de la traduction des noms propres et des mèmes culturels à 90 %, résolvant ainsi efficacement le problème des « trous de rire » dans la communication interculturelle.
Actuellement, cette fonction prend en charge la traduction bilingue entre le chinois et l'anglais, couvrant entièrement les vidéos du site, les diffusions en direct etLes boutons d’interface traitent chaque jour des centaines de milliers de demandes de traduction de contenu non chinois.Selon l'équipe technique de Bilibili, le plan de suivi prendra en charge près de 10 langues dont le japonais et le coréen pour renforcer encore la couverture du cercle culturel de l'ACG.
Chen Rui, président-directeur général de Bilibili, a déclaré que cette fonctionnalité est une mise en œuvre clé de la stratégie de « contenu sans frontières » de la plateforme. Auparavant, Bilibili a achevé la fusion de la version nationale et de la version internationale de l'APP et a accumulé une riche expérience dans la localisation d'éléments culturels. Le lancement de la fonction de traduction originale de l'IA marque que Bilibili a pleinement mûri dans sa disposition technologique multilingue.
Les analystes du secteur ont souligné que la fonction de traduction originale de l'IA de Bilibili a atteint pour la première fois un haut degré de synergie entre « précision de la traduction - restauration de la voix - correspondance de la forme de la bouche » grâce à l'optimisation multi-objectifs et à la technologie d'apprentissage par renforcement, établissant ainsi une nouvelle référence technique pour les plates-formes vidéo longues.
Pour les propriétaires d'UP, cette fonctionnalité abaissera considérablement le seuil linguistique pour exporter du contenu à l'étranger, profitant particulièrement aux créateurs qui s'appuient sur des « voix humaines » comme les commentaires de jeux et les critiques d'animation. Pour les utilisateurs, qu'il s'agisse d'utilisateurs chinois regardant du contenu en langue étrangère ou d'utilisateurs étrangers visionnant des vidéos chinoises, ils peuvent vivre une expérience immersive presque « sans barrières de sous-titres ».