https://m.etnews.com/20231207000226

구글 '제미나이'로 AI 공세…평가는 “글쎄”

구글이 차세대 거대 언어 모델(LLM) ‘제미나이’를 공개하면서 텍스트만이 아닌 그림이나 영상을 보거나 듣고 대화할 수 있는 인공지능(AI) 시대가 개막됐다. 국1내외 전문가들은 ‘성능이 개선됐지만 혁명적인 수준에는 이르지 못했다’라고 평가했다. 구글은 지난 6일(현지

m.etnews.com

구글이 차세대 거대 언어 모델(LLM) '제미나이'를 공개하면서 텍스트만이 아닌 그림이나 영상을 보거나 듣고 대화할 수 있는 인공지능(AI) 시대가 개막됐다. 국1내외 전문가들은 '성능이 개선됐지만 혁명적인 수준에는 이르지 못했다'라고 평가했다.

국1내 업계는 제미나이가 멀티모달 AI 시대를 열었다는데는 동의하면서도 GPT-4를 성능에서 앞서지는 않는 것으로 봤다.

글로벌 AI 전문기업인 업스테이지의 박찬준 테크 리더는 “제미나이가 GPT-4를 완전히 능가했다고 보긴 어렵다”면서 “평가 방법에서 샷(Shot·문제)을 어떻게 주느냐에 따라서 GPT-4 성능이 더 좋을 수 있기 때문”이라고 말했다.

하정우 네이버클라우드 AI이노베이션 센터장도 “(구글이 공개한 제미나이 MMLU 성능을 보면) GPT-4는 5-샷(문제 해결 예시 5개를 모델에 제시하고 문제를 푸는 방식)을 기준으로 한 반면 제미나이는 연쇄적 사고(CoT)로 (문제 풀이를 32번 반복하는) 'CoT@32'를 진행했기 때문에 공정한 비교가 아니다”라면서 “제미나이 프로 버젼은 GPT-3.5나 GPT-4 사이 수준으로 추정된다”고 말했다.

도원철 코난테크놀로지 LLM 개발총괄 상무는 “실제 제미나이를 테스트한 전문가 그룹에서는 GPT-4를 능가하더라도 큰 격차는 아니다라는 평가”라면서 “구글 측 발표가 어느 정도 과장돼 있는 면이 있는 것 같다”고 말했다.