허위정보 감시기관 NewsGuard의 보고서에 따르면, ChatGPT는 영어보다 중국어로 부정확한 정보를 보고할 가능성이 더 높습니다. 이러한 모델 자체는 다국어이지만, 해당 언어는 데이터 세트의 별도로 겹치는 영역이며, 이 모델은 특정 구문이나 예측이 해당 영역에서 얼마나 다른지 비교할 수 있는 메커니즘이 없습니다.

TechCrunch 에 따르면, 사용자가 ChatGPT에 영어로 응답해 달라고 요청하면 기본적으로 ChatGPT가 보유한 모든 영어 데이터를 가져오는 셈이고, 중국어의 경우도 마찬가지입니다.

3월에 바이두는 중국 검색 대기업의 인공지능(AI) 모델인 어니(Ernie)를 기반으로 한 챗봇인 "어니 봇(Ernie Bot)"을 출시했습니다. 미국과 중국 간의 치열한 기술 경쟁 속에서 바이두의 AI 투자와 개발은 더욱 많은 주목을 받고 있습니다.

로이터에 따르면 바이두는 AI 모델의 성능을 평가하는 데 사용되는 두 가지 벤치마크인 AGIEval과 C-Eval 데이터 세트를 사용하여 China Science Daily 에서 실시한 테스트 결과를 인용했습니다.

어니 3.5는 대학 입학 시험이나 변호사 시험 등 입학 및 능력 시험에 중점을 둔 내용으로 구성된 중국어 시험에서 뛰어난 능력을 보여주었습니다.

50가지 주제를 다루는 13,000개의 객관식 문제로 구성된 또 다른 중국어 테스트에서도 Ernie 3.5는 OpenAI의 두 경쟁자보다 여전히 우수한 성적을 거두었습니다. 하지만 미국의 대학들이 공동 개발한 과학과 사회 연구 문제를 포함한 세 번째 시험에서 Ernie 3.5는 ChatGPT와 GPT 4에 완전히 뒤처졌습니다.

바이두의 CTO인 하이펭 왕은 바이두의 대규모 언어 모델(LLM)인 Ernie Bot이 베타 버전을 출시한 지 불과 3개월 만에 Ernie 3.0을 기반으로 한 Ernie 3.5가 효율성, 기능 및 성능 면에서 개선되었다고 밝혔습니다. CTO에 따르면, 이러한 개선은 쓰기, 쿼리, 추론 및 코드 생성 측면에서뿐만 아니라 학습 성능과 추론 성능에서도 분명히 나타난다고 합니다.

또한 바이두는 새로운 모델이 바이두와 타사의 플러그인을 지원할 것이라고 밝혔습니다. 이 회사는 "바이두 검색" 플러그인이 통합되어 Ernie Bot이 정확하고 실시간 정보를 생성할 수 있는 기능을 갖추게 되었다고 밝혔습니다. 플러그인은 AI가 긴 텍스트를 요약하고 더 정확한 답변을 생성하는 등 특정 상황에서 작동할 수 있도록 하는 추가 애플리케이션입니다.

신화통신이 6월에 실시한 테스트에 따르면, 바이두의 Ernie Bot이 "중국의 ChatGPT" 중 1위를 차지했습니다. SCMP 에 따르면, 바이두는 클라우드 서비스와 같은 다른 제품에 Ernie Bot을 통합하기 위해 노력해 왔으며, 중국 생성 AI 스타트업에 투자하기 위해 1억 3,900만 달러 규모의 벤처 캐피털 펀드를 발표했습니다.

바이두의 CEO 겸 공동 창립자인 로빈 리(Robin Li)는 대규모 언어 모델이 점점 더 많은 분야에 침투하여 디지털 경제를 주도하는 핵심 요소가 될 것으로 예측한다고 말했습니다.