Китай запустил крупнейшую распределённую суперкомпьютерную сеть ИИ протяжённостью 2000 км
Китай ввёл в эксплуатацию одну из крупнейших в мире распределённых систем искусственного интеллекта, географически охватывающую более 2000 километров. Как сообщает издание Science and Technology Daily, национальная оптическая сеть связала разрозненные центры обработки данных по всей стране настолько эффективно, что они теперь могут работать «практически как единый гигантский компьютер».
Главный руководитель проекта, академик Китайской инженерной академии Лю Юньцзе, заявил, что система формирует распределённый пул вычислительных мощностей, способный достигать 98% эффективности отдельного центра обработки данных. Это объединение ключевых вычислительных ресурсов страны, разбросанных на огромной территории, в единую систему предназначено для ускорения обучения искусственного интеллекта и других исследований, требующих высокой вычислительной мощности.
По словам Лю Юньцзе, эта выделенная высокоскоростная «информационная магистраль» имеет революционное значение для сценариев с чрезвычайно высокими требованиями к реальному времени, таких как обучение больших моделей ИИ, телемедицина и промышленный интернет. Данная оптическая сеть является частью Национальной испытательной инфраструктуры сетей будущего, первого крупного национального инфраструктурного проекта Китая в секторе информационных и коммуникационных технологий. После более чем десяти лет разработок она официально начала работу.
Исследователи отмечают, что объект значительно сокращает как время, так и стоимость обучения моделей искусственного интеллекта. Обучение большой модели с сотнями миллиардов параметров обычно требует более 500 тысяч итераций. На новой детерминированной сети каждая итерация занимает всего около 16 секунд. Без этой технологии каждая итерация занимала бы более 20 секунд. Лю Юньцзе также отметил, что платформа идеально подходит для обслуживания национального проекта «Данные с Востока – вычисления на Западе», который переносит обработку данных в богатые энергией западные регионы Китая.
Разработка Национальной испытательной инфраструктуры сетей будущего началась в 2013 году. Сейчас она охватывает 40 городов с более чем 55 тысячами километров оптических линий передачи. Инфраструктура работает круглосуточно, поддерживая 128 гетерогенных сетей и 4096 параллельных сервисных испытаний, что делает её одной из самых масштабных испытательных площадок в мире. Команда проекта создала 206 международных и отечественных стандартов, получила 221 патент на изобретение и разработала первую в мире распределённую крупномасштабную сетевую операционную систему.
На церемонии запуска были продемонстрированы возможности сети: набор данных объёмом 72 терабайта с крупнейшего в мире радиотелескопа FAST был передан на расстояние в 1000 километров всего за 1,6 часа. В обычной интернет-среде такая передача заняла бы около 699 дней. Сверхбыстрая передача стала возможной благодаря детерминированному сетевому каналу, который гарантирует выделенную полосу пропускания, сверхнизкую задержку и практически нулевую потерю пакетов.
Как пояснил в ходе оценки проекта ещё один академик Китайской инженерной академии У Хэцюань, технологии, лежащие в основе инфраструктуры, уже поддерживали разработку стандартов 5G и 6G. В будущем как исследовательские институты, так и компании смогут тестировать на этой платформе различные новые технологии.