China Telecom, одна из государственных телекоммуникационных гигантов Китая, создала две большие языковые модели (LLM), которые были обучены исключительно на произведённых в стране чипах.
Этот прорыв является важным шагом в рамках продолжающихся усилий Китая по достижению самообеспеченности в области технологий искусственного интеллекта, особенно на фоне ужесточения ограничений США на доступ к передовым полупроводникам для конкурентов.
Согласно данным Института ИИ компании, одна из моделей — TeleChat2-115B, а также другая, пока неназванная, модель были обучены на десятках тысяч чипов китайского производства. Это достижение особенно примечательно в условиях более жёстких экспортных правил США, которые ограничили возможности Китая по покупке высококлассных процессоров у Nvidia и других иностранных компаний. В заявлении, опубликованном в WeChat, институт ИИ отметил, что эта веха демонстрирует способность Китая самостоятельно обучать большие языковые модели и открывает новую эру инноваций и самостоятельности в области технологий ИИ.
Масштаб этих моделей впечатляет. China Telecom сообщила, что неназванная LLM имеет 1 триллион параметров. В терминологии ИИ параметры — это переменные, которые помогают модели учиться в процессе обучения. Чем больше параметров, тем сложнее и мощнее становится ИИ.
Китайские компании стремятся не отставать от глобальных лидеров в области ИИ, находящихся за пределами страны. Ограничения на экспорт со стороны США, касающиеся новейших ИИ-чипов Nvidia, таких как A100 и H100, заставили Китай искать альтернативы. В результате китайские компании начали разрабатывать собственные процессоры, чтобы уменьшить зависимость от западных технологий. Например, модель TeleChat2-115B содержит примерно 100 миллиардов параметров и, таким образом, может демонстрировать те же результаты, что и ведущие мировые платформы.
China Telecom не уточнила, какая компания поставила отечественные чипы, использовавшиеся для обучения моделей. Однако, как обсуждалось ранее, чипы Ascend от Huawei играют ключевую роль в планах Китая по развитию ИИ.
Huawei, который в последние годы столкнулся с санкциями США, также усиливает свои усилия в области искусственного интеллекта. Компания недавно начала тестирование своего новейшего ИИ-процессора Ascend 910C с потенциальными клиентами на внутреннем рынке. Крупные китайские серверные компании, а также интернет-гиганты, которые ранее использовали чипы Nvidia, по-видимому, тестируют производительность нового чипа. Процессоры Ascend от Huawei, являющиеся одной из немногих жизнеспособных альтернатив аппаратному обеспечению Nvidia, рассматриваются как ключевой элемент стратегии Китая, который позволит уменьшить зависимость от зарубежных технологий.
Помимо Huawei, China Telecom сотрудничает с другими отечественными производителями чипов, такими как стартап Cambricon, специализирующийся на процессорах для ИИ. Эти партнерства отражают более широкую тенденцию в технологической отрасли Китая по созданию собственной экосистемы решений на базе ИИ, что помогает стране защититься от последствий экспортного контроля со стороны США.
Разрабатывая собственные чипы и технологии для ИИ, Китай постепенно снижает свою зависимость от оборудования зарубежного производства, в частности от крайне востребованных и, следовательно, дорогих графических процессоров Nvidia. Хотя санкции США затрудняют для китайских компаний приобретение новейшего оборудования Nvidia, на черном рынке появились предложения зарубежных чипов. Однако, чтобы избежать рисков серого рынка, многие китайские компании предпочитают покупать менее мощные альтернативы, такие как модели предыдущих поколений, чтобы сохранить доступ к официальной поддержке и сервисам Nvidia.
Достижение Китая отражает более широкую смену подхода к технологиям ИИ и полупроводников, делая акцент на самообеспеченности и устойчивости в условиях всё более конкурентной глобальной экономики и на фоне протекционистской торговой политики США.
Источник: Artificial Intelligence News