중국 과학자들이 인퍼런스에서 AI 모델 학습으로 전환하고 있습니다.
하이웨이(Huawei) 칩이 DeepSeek‑V4‑Pro 모델의 사후 학습을 성공적으로 완료했습니다
* South China Morning Post 보도에 따르면 중국에서는 Huawei Ascend 910C 칩을 사용해 대형 AI 모델인 DeepSeek‑V4‑Pro를 완전히 재학습시켰습니다. 이는 미국 제재가 강화되는 가운데 단순 추론에서 복잡한 학습으로 전환하려는 국내 반도체 산업 발전의 중요한 단계입니다.
무엇이 일어났나요
프로젝트 개요: Huawei Technologies와 파트너(선전 순환도로 연구소, 선전 하얼빈 기술 대학 캠퍼스, 선전 대규모 데이터 연구소)가 DeepSeek‑V4‑Pro 모델을 학습시키기 위해 시작했습니다. 규모: 모델은 1.6조 개의 매개변수를 포함하며 최소 1000개의 Ascend 910C 칩 클러스터에서 실행되었습니다. 사후 학습: 완전한 “매개변수 기반” 재학습으로, 전체 모델 아키텍처가 보완되었으며 일부 레이어만이 아니라 전부가 업데이트되었습니다.
왜 중요한가
* 과거까지 중국 칩은 주로 추론(모델이 요청에 응답하는 과정)에 사용되었습니다.
* 새로운 프로젝트 덕분에 모델은 작업 중에 스스로 반성하고 조정할 수 있어, 이전의 일방향 데이터 흐름에 “복잡한 교차점과 루프”를 추가합니다. 이는 계산 및 통신 요구량을 증가시키지만 시스템을 보다 자율적으로 만듭니다.
예상 결과
* 선전 정부는 이 연구가 중국 AI 산업의 자립도를 높이고 외부 제재 상황에서도 국내 마이크로칩의 입지를 강화할 것이라고 밝혔습니다
댓글 (0)
의견을 남겨 주세요. 예의를 지키고 주제에서 벗어나지 말아 주세요.
댓글을 남기려면 로그인