中 5만 5,000km 달하는 분산 AI 네트워크 구축했다

중국에서 대규모 분산형 AI 컴퓨팅 풀 미래네트워크기초시설(CENI)이 개설됐다고 중국 국영 매체가 보도했다. 이 고속 광네트워크는 중국 40개 도시에 걸쳐 있으며 전체 거리는 적도 1주보다 긴 5만 5,000km에 달하는 것으로 알려졌다.

보도에 따르면 지난 12월 3일 귀주사범대학 분교에 있는 500m 전파망원경 천안(天眼) 공동연구센터 데이터 게이트웨이를 CENI 네트워크로 구동했다. 천안이 관측한 천문 데이터는 72TB이며 기존 인터넷을 사용해 다른 대학 데이터센터로 이전하는 데 699일이 걸렸지만 CENI를 통해 1.6시간 만에 데이터 이전을 완료했다.

중국공정원 소속으로 미래네트워크실험시설 프로젝트 주임 책임자인 류윈제(劉雲傑)는 이 시스템이 갖춘 최대 장점은 효율성에 있다며 AI 대규모 모델 훈련, 원격의료, 산업용 인터넷 등 극히 높은 실시간성이 요구되는 시나리오에서 혁신적 존재가 될 것이라고 밝혔다. 천안을 활용한 실험과 같은 날 CENI는 난징에서 국가 검정을 통과하고 정식 운용을 시작했다.

CENI는 10년 이상 계획과 건설을 거쳐 중국 전역 40개 도시를 커버하며 광전송 전체 거리는 5만 5,000km를 초과한다고 발표됐다. CENI는 연중무휴 24시간 가동되며 128종류에 이르는 서로 다른 네트워크를 동시에 구동할 수 있고 동시에 서로 다른 서비스 4,096종 테스트도 동시 실행할 수 있다.

AI 분야에서도 CENI는 기여를 할 것으로 전망된다. 류 책임자는 수천억 개 파라미터를 가진 대규모 모델을 여러 도메인에 걸쳐 학습시키려면 50만 회 이상 반복 처리가 필요하다며 CENI에서는 1회 학습 반복 처리에 소요되는 시간이 불과 16초 정도이며 또 시설의 결정론적 네트워크 기능을 비활성화하고 간섭 플로를 도입하면 반복 처리 시간이 1회당 20초 이상 급격히 증가한다고 밝혔다. 다시 말해 결정론적 네트워크를 도입한 CENI를 활용하면 대규모 모델 학습을 수개월 단축할 수 있다는 설명이다.

또 중국은 2014년 수립한 주요 과학 인프라 정비 계획에서 동수서산(東數西算) 그러니까 동쪽 데이터, 서쪽 컴퓨팅이라는 뜻을 지닌 프로젝트를 발표했다. 이는 중국 서부 자원이 풍부한 지역과 중국 동부 데이터 및 개발 수요가 높은 지역을 연결하는 걸 목적으로 한다. CENI는 다양한 분야에 개방적인 지원을 지속 제공하는 자세를 보이고 있으며 첨단 분야에서 넓은 지역 내 협력을 실현하는 것도 기대된다.

보도에선 CENI는 중국 디지털화와 사이버 강국 구축을 가속화하고 기술 자립 수준을 향상시키기 위한 지속적인 추진력이 될 것이라고 밝혔다. 관련 내용은 이곳에서 확인할 수 있다.