12월 5일과 6일에 열린 "AI - 현실 재설계"라는 주제의 인공지능의 날 2023 행사에서 VinAI 인공지능 연구 및 응용 회사(Vingroup Corporation)는 베트남어를 위한 대규모 언어 모델인 PhoGPT에 대한 오픈 소스 연구 프로젝트를 발표했습니다.
PhoGPT는 OpenAI의 ChatGPT와 같은 독점 소프트웨어가 아닌 오픈소스 프로젝트입니다. 오픈소스이기 때문에 상업적 제약이 없으며, 누구나 PhoGPT를 사용하여 상업적 목적의 애플리케이션 유닛을 포함한 자체 애플리케이션을 개발할 수 있습니다. 즉, 국내 AI 기술 관련 애플리케이션을 개발하는 커뮤니티를 위한 플랫폼과 같은 역할을 합니다.
VinAI 인공지능 연구 및 애플리케이션 회사의 총괄 이사인 부이 하이 훙 박사에 따르면, 베트남어 모델의 한계는 이러한 모델이 최적의 성능을 달성하지 못하고 오픈 소스 코드가 부족하다는 것을 증명했습니다. 따라서 AI 커뮤니티, 특히 자연어 처리(NLP) 커뮤니티의 시급한 과제 중 하나는 높은 정확도와 성능으로 베트남어를 처리할 수 있는 새롭고 더욱 강력한 모델을 구축하는 것입니다.
AI 전문가들은 75억 개의 매개변수를 가진 빅데이터 언어 모델이 Transformer 디코딩 플랫폼 기반으로 구축되었으며, 이 모델은 Flash Attention 메커니즘, AliBi 컨텍스트 길이 외삽법 등 사용 가능한 가장 진보된 기술을 사용하여 처음부터 학습되었다고 말합니다.
이러한 기술은 모델이 맥락을 더 깊이 이해하는 데 도움이 될 뿐만 아니라 PhoGPT의 자연스러운 대화 및 상호작용 기능을 향상시킵니다. 이를 통해 PhoGPT는 다양한 사용자의 언어적 요구를 충족할 수 있는 다재다능하고 멀티태스킹이 가능한 도구가 됩니다.
부이 하이 훙 박사는 PhoGPT가 처음부터 자사에서 개발되었으며, 전 세계 의 다른 모델과는 무관하다고 덧붙였습니다. 오픈 소스 모델을 통해 베트남 커뮤니티는 PhoGPT를 더욱 효과적으로 활용하고 개선할 수 있습니다. PhoGPT 소스 코드를 공개하고 사용자에게 제공함으로써 사용자 커뮤니티가 맞춤형 고유 애플리케이션을 개발할 수 있는 환경을 조성하는 데 도움이 됩니다.
오픈 소스의 목표 중 하나는 사람들이 재작업에 시간을 허비하지 않고도 PhoGPT와 같은 대규모 언어 모델을 더 많이 개발할 수 있도록 기반을 마련하는 것입니다. 이를 통해 사회는 대규모 베트남어 언어 모델을 위한 양질의 오픈 소스 커뮤니티를 구축하고, 많은 기업이 참여하여 특정 분야에 적용할 수 있도록 긍정적인 효과를 창출할 것입니다. VinAI 인공지능 연구 및 애플리케이션 회사는 PhoGPT를 통해 개인 사용자를 위한 애플리케이션과 의료, 교육 등 베트남 기업을 위한 전문 지원 솔루션 패키지를 연구 개발할 계획이라고 밝혔습니다.
PhoGPT는 정부의 2030년까지의 AI 개발 전략에 맞춰 실용적이고 효과적인 애플리케이션을 개발하기 위한 기반으로서 고성능 베트남어 언어 모델 개발을 위한 첫 번째 기반을 마련했습니다.
바탄
[광고_2]
원천
댓글 (0)