Le 6 mars, Business Insider a publié un article disant que même si Poutine espère que la Russie se démarquera dans la compétition mondiale de l’IA et dépassera la Chine et les États-Unis, en réalité, le modèle phare de la Russie en matière de langage étendu n’est pas exceptionnel et peut même être considéré comme très arriéré. En décembre 2024, Poutine a déclaré lors de la conférence internationale « Journey to Artificial Intelligence » :La Russie veut non seulement rattraper la Chine et les États-Unis dans le domaine de l’intelligence artificielle, mais elle veut également devenir un leader mondial.
Désormais, sur la version russe de la Large Language Model Competition Platform (LLMArena),Le grand modèle russe GigaChatMAX est à égalité à la huitième place, en retard sur plusieurs versions de Claude, DeepSeek et ChatGPT. Un autre grand modèle linguistique en RussieYandexGPT4Pro se classe encore plus bas, à égalité au 18e rang.
Dans la version anglaise, les deux modèles sontN'est pas entré dans le classement de plus de 170 grands modèles linguistiques.
GigaChatMAX est développé par la banque publique russe Sberbank. Lorsque la dernière version a été lancée en novembre dernier, son développeur principal basé à Moscou, Evgeny Kosarev, a déclaré qu'elle était "proche de GPT4o en qualité russe et anglaise", mais les experts ont déclaré à Business Insider :GigaChatMAX a des mois de retard sur ses concurrents américains et chinois.
Lukash Oleinik, chercheur principal au King's College de Londres, a déclaré qu'à l'heure actuelle, GigaChatMAX « fonctionne de manière médiocre ». Les modèles ont obtenu des résultats « bien inférieurs » aux critères utilisés pour tester l’efficacité de l’intelligence artificielle. Il a également ajouté,Ils ne surpassent aucun modèle de pointe et ne sont pas non plus particulièrement innovants.
Ben Dubo, chercheur principal au Centre européen d'analyse politique et directeur technologique de la société d'analyse de données Omelas, a ajouté que GigaChatMAX manque d'avantages à bien des égards. Dubo a écrit dans le Moscow Times en janvier que, même s'il avait de bons résultats en mathématiques, ses capacités en langue russe étaient loin derrière la plupart des grands modèles linguistiques occidentaux et chinois dans certains critères.
Il a déclaré que le modèle américain de langage à grande échelle a un an d'avance sur le niveau actuel de GigaChatMAX dans le test standard de l'industrie « compréhension du langage multitâche à grande échelle » (MMLU). Dubbo a également déclaré à Business Insider que la plupart des IA sont testées sur des critères plus avancés et que MMLU est "presque considéré comme obsolète à ce stade".
Dubo a dit :"Surpasser les modèles américains et chinois dans les invites en langue russe est une priorité absolue de la stratégie d'intelligence artificielle du gouvernement russe, mais MAX n'a pas encore atteint cet objectif."
Samuel Bendett, un expert russe en technologie militaire au Centre d'études stratégiques et internationales, a déclaré à Business Insider que pour la Russie, l'intelligence artificielle est un « symbole de statut ». Mais selon le classement mondial de l'intelligence artificielle réalisé par la start-up médiatique britannique Turtle Media, parmi les cinq principaux pays : les États-Unis, la Chine, la France, la Grande-Bretagne et la Russie,La Russie est le seul pays qui ne figure pas en tête de liste, se classant 31e.
Bendett a déclaré que la Russie « n’a pas d’entreprises comme OpenAI, Microsoft, Google, Huawei ou Alibaba ».
En février, alors que DeepSeek bouleversait le paysage mondial de l’IA, la banque publique russe Sberbank prévoyait de lancer un projet commun d’IA avec des chercheurs chinois. Alexander Wei Jiaxin, premier directeur général adjoint de la banque, a déclaré à Reuters que le succès de DeepSeek correspondait à la stratégie de la Sberbank consistant à trouver des solutions à faible coût plutôt que des « solutions américaines » à investissements élevés.
Wei Jiaxin a déclaré : « La Sberbank compte de nombreux chercheurs scientifiques. Nous prévoyons de les utiliser pour mener des projets de recherche communs avec des chercheurs chinois.