디시인사이드 갤러리

갤러리 이슈박스, 최근방문 갤러리

갤러리 본문 영역

AI 스타트업 아서. LLM 성능 측정 도구, 오픈소스로 풀릴 예정

GPTMAGAZINE갤로그로 이동합니다. 2023.08.18 11:08:49
조회 66 추천 0 댓글 0



  • 🔼 Arthur Bench, 다양한 언어 모델 테스트 가능
  • 🔼 대형 언어 모델의 성능 측정
  • 🔼 AWS와의 협력: 해커톤의 성과









뉴욕에 위치한 인공지능 스타트업인 아서는 '아서 벤치'라는 오픈소스 도구를 선보였습니다. 이 도구는 오픈AI의 GPT-3.5 Turbo, 메타의 LLaMA 2와 같은 대형 언어 모델의 성능을 평가하고 비교하는 데 특화되어 있습니다.



아서 벤치의 주요 특징은 다양한 언어 모델의 성능을 특정 사용 사례에 대해 테스트할 수 있으며, 모델의 정확성, 가독성 등 다양한 기준에 대한 메트릭을 제공합니다. 또한, 오픈소스 특성상 기업이나 사용자는 자신의 필요에 맞게 기준을 추가하여 사용할 수 있습니다.



이 도구는 금융 서비스 회사에서 투자 논문과 분석 작성을 가속화하는 데, 차량 제조업체에서는 고객의 질문에 빠르게 응답하기 위해, 그리고 Axios HQ와 같은 기업에서는 제품 개발에 활용되고 있습니다.



아서는 이 도구를 오픈소스로 제공함으로써 더 많은 사용자와 기업이 이를 활용하고 기여할 수 있도록 하였습니다. 또한, 아마존 웹서비스(AWS) 및 Cohere와의 협력을 통해 아서 벤치에 대한 새로운 메트릭 구축을 위한 해커톤도 개최하였습니다.



이전에는 '아서 쉴드'라는 도구를 통해 대형 언어 모델의 문제점을 모니터링하는 작업도 진행하였습니다. 이러한 노력을 통해 아서는 AI 분야에서의 선도적인 위치를 확립하려고 노력하고 있습니다.













◎GPT매거진 (https://www.gptmagazine.net)
지피티 기자 : gptmagazinebiz@gmail.com

추천 비추천

0

고정닉 0

0

댓글 영역

전체 댓글 0
등록순정렬 기준선택
본문 보기

하단 갤러리 리스트 영역

왼쪽 컨텐츠 영역

갤러리 리스트 영역

갤러리 리스트
번호 제목 글쓴이 작성일 조회 추천
설문 어떤 상황이 닥쳐도 지갑 절대 안 열 것 같은 스타는? 운영자 24/05/20 - -
170 AI 뉴스에 사용료를...? [2] GPTMAGAZINE갤로그로 이동합니다. 23.09.06 832 0
169 삼성전자, 비스포크 가전에 '생성형 AI' 도입 GPTMAGAZINE갤로그로 이동합니다. 23.09.04 127 0
168 내가 만드는 생성형 AI 모델! 새로운 인공지능 패러다임의 시작! GPTMAGAZINE갤로그로 이동합니다. 23.09.04 112 0
167 미국 대학들, 인공지능(AI) 기반의 입학 에세이에 대한 논란 [2] GPTMAGAZINE갤로그로 이동합니다. 23.09.04 856 1
166 국내 AI 산업, 5년 내 인력 결손 1만2800명 예상 GPTMAGAZINE갤로그로 이동합니다. 23.09.01 176 2
165 작은 섬 앵귈라, AI 도메인으로 화제 [1] GPTMAGAZINE갤로그로 이동합니다. 23.09.01 1081 2
164 타이포그래피에 특화된 생성형 AI, 이디어그램(Ideogram) GPTMAGAZINE갤로그로 이동합니다. 23.09.01 112 0
163 폴라리스 오피스 AI 내달 6일 출시 예정 [1] GPTMAGAZINE갤로그로 이동합니다. 23.08.31 198 0
161 애플, 'PINEAPPLE' 상표 등록 신청 [9] GPTMAGAZINE갤로그로 이동합니다. 23.08.30 1484 2
160 오픈AI의 GPT봇, 전 세계 웹사이트에서 차단 [3] GPTMAGAZINE갤로그로 이동합니다. 23.08.30 813 3
159 9월 12일, 애플 아이폰15 특별 이벤트에서 주목 해야 할 것들 [19] GPTMAGAZINE갤로그로 이동합니다. 23.08.30 5647 12
158 구글챗의 새로운 협업 도구 '듀엣AI' GPTMAGAZINE갤로그로 이동합니다. 23.08.30 121 0
157 구글, 딥페이크 방지 위한 SynthID 발표 GPTMAGAZINE갤로그로 이동합니다. 23.08.30 175 0
156 오픈AI, 챗GPT 엔터프라이즈 출시로 기업 대상 AI 서비스 확대 GPTMAGAZINE갤로그로 이동합니다. 23.08.29 103 0
155 행정안전부, AI 기반 업무지원 서비스 도입으로 공공부문 혁신 추진 [1] GPTMAGAZINE갤로그로 이동합니다. 23.08.29 801 1
154 스티븐 킹, AI 교육에 내 작품 사용, 반대하지 않아 [30] GPTMAGAZINE갤로그로 이동합니다. 23.08.29 1413 8
153 AI 생성 콘텐츠, 워터마크 국내 도입 결정 [3] GPTMAGAZINE갤로그로 이동합니다. 23.08.25 355 0
152 허깅페이스, 깃허브와 경쟁하는 AI 코드 저장소 GPTMAGAZINE갤로그로 이동합니다. 23.08.25 105 0
151 메타, 코딩용 언어 모델 '코드라마' 공개 GPTMAGAZINE갤로그로 이동합니다. 23.08.25 700 5
150 마이크로소프트 엣지, AI '스마트파인드' 도입 GPTMAGAZINE갤로그로 이동합니다. 23.08.24 780 0
149 네이버, 초거대 AI '하이퍼클로바X' 공개 GPTMAGAZINE갤로그로 이동합니다. 23.08.24 97 0
148 메타, 100개 언어 지원 AI 번역 모델 발표 GPTMAGAZINE갤로그로 이동합니다. 23.08.23 804 0
147 오픈AI, GPT-3.5 Turbo 미세 조정 기능 도입 GPTMAGAZINE갤로그로 이동합니다. 23.08.23 112 0
146 글로벌 기업들, AI 전문가 영입에 높은 연봉 제안 [2] GPTMAGAZINE갤로그로 이동합니다. 23.08.22 905 0
145 AI 모델 중 가장 터무니없는 거짓말을 하는 모델은? [3] GPTMAGAZINE갤로그로 이동합니다. 23.08.21 1161 1
144 애플, 폭스콘과의 계약으로 생성형 AI 개발 가속화 GPTMAGAZINE갤로그로 이동합니다. 23.08.21 82 0
143 메타, 저작권 있는 책으로 AI 훈련? [4] GPTMAGAZINE갤로그로 이동합니다. 23.08.21 1945 1
142 미국 법원, AI 창작물에 대한 저작권 인정 않해.. GPTMAGAZINE갤로그로 이동합니다. 23.08.21 73 0
141 ChatGPT의 정치적 편향, U.K. 연구자들 연구 발표 [14] GPTMAGAZINE갤로그로 이동합니다. 23.08.18 2562 10
AI 스타트업 아서. LLM 성능 측정 도구, 오픈소스로 풀릴 예정 GPTMAGAZINE갤로그로 이동합니다. 23.08.18 66 0
139 미국 언론사, 생성형 AI 가이드라인 도입 GPTMAGAZINE갤로그로 이동합니다. 23.08.18 357 0
138 오픈AI, AI 디자인 스튜디오 '글로벌 일루미네이션' 인수 GPTMAGAZINE갤로그로 이동합니다. 23.08.17 60 0
137 오픈AI, GPT-4는 인간의 콘텐츠 검토를 대체 GPTMAGAZINE갤로그로 이동합니다. 23.08.17 457 0
136 엔씨소프트, 국내 첫 AI 언어모델 'VARCO LLM' 공개 [12] GPTMAGAZINE갤로그로 이동합니다. 23.08.17 656 0
135 빌 게이츠, 챗GPT의 성과에 감탄 [11] GPTMAGAZINE갤로그로 이동합니다. 23.08.14 2528 4
134 인공지능도 구분 못하는 과제물 GPTMAGAZINE갤로그로 이동합니다. 23.08.14 479 1
133 애플, 스마트워치 10주년 기념 모델 출시 예고 [2] GPTMAGAZINE갤로그로 이동합니다. 23.08.14 467 1
131 게임 산업의 미래: AI가 중심에 서다 [2] GPTMAGAZINE갤로그로 이동합니다. 23.08.11 181 2
130 구글의 SVP 제임스 매니카, AI로 인한 인류멸종의 위험성 [8] GPTMAGAZINE갤로그로 이동합니다. 23.08.11 548 1
129 오픈AI, '사용자 지정 지시문' 기능 무료 사용자에게도 확장 발표 GPTMAGAZINE갤로그로 이동합니다. 23.08.11 567 1
128 SKT, AI 기술의 독립운동가 복원 [9] GPTMAGAZINE갤로그로 이동합니다. 23.08.10 798 3
127 마이크로소프트, 현장 근로자들을 위한 AI 강화 및 새로운 기능 발표 GPTMAGAZINE갤로그로 이동합니다. 23.08.10 820 1
126 구글, 'Project IDX'로 웹 브라우저 AI 개발환경 구축 [2] GPTMAGAZINE갤로그로 이동합니다. 23.08.09 227 2
125 스테빌리티AI, 코드 생성 AI '스테이블코드' 출시 GPTMAGAZINE갤로그로 이동합니다. 23.08.09 81 1
124 오픈AI, GPT-5 상표 등록 [8] GPTMAGAZINE갤로그로 이동합니다. 23.08.07 920 4
123 오픈AI에서 X.ai로: AI.com 도메인의 이동 GPTMAGAZINE갤로그로 이동합니다. 23.08.07 104 0
122 애플, 9월 13일 아이폰 15 시리즈 공개 예정 [21] GPTMAGAZINE갤로그로 이동합니다. 23.08.04 2128 5
121 네이버, AI '큐:'로 검색 엔진의 혁신 GPTMAGAZINE갤로그로 이동합니다. 23.08.04 76 0
120 ChatGPT의 최신 업데이트 [2] GPTMAGAZINE갤로그로 이동합니다. 23.08.04 692 2
119 메타, AI로 음악을 만드는 오디오크래프트 출시 [3] GPTMAGAZINE갤로그로 이동합니다. 23.08.03 306 2
갤러리 내부 검색
제목+내용게시물 정렬 옵션

오른쪽 컨텐츠 영역

실시간 베스트

1/8

뉴스

디시미디어

디시이슈

1/2