왜 영어에서 LLM의 성능이 가장 좋냐면 - 특이점이 온다 마이너 갤러리

기술적 특이점에 대해 의논하고 그와 관련된 과학 기술 정보와 소식을 공유하는 갤러리입니다. *갤러리 이름은 동명의 레이 커즈와일의 저서 <특이점이 온다 (The singularity is near)>를 의미합니다.

매니저

특갤용(118wshxhtx5h)

부매니저

ㅇㅇ(hamaster) 부패하는유전자!!!(sansss20…) 은바다(nmra3fmz…)

개설일

2019-08-01

[일반] 왜 영어에서 LLM의 성능이 가장 좋냐면

ㅇㅇ

2024.05.17 06:37:49

조회 360 추천 3 댓글 3

단순히 데이터가(그것도 *양질의*) 많아서 그렇다고 하면 안와닿을수도 있을텐데

이전에 유명했던 세종대왕 맥북 던짐 사건같을걸 예시로 들께

만약 세종대왕과 그와 연결된 조.선시대, 시대상, 한반도 역사 같은 텍스트를 촘촘하게 학습했다면

그 관련된 키워드 사이의 연관성에 대해 LLM이 알게돼 일종의 이해 비슷한걸 하는거지

아 한반도의 역사는 이렇고 조.선시대는 몇백년쯤 전이고 등등

학습된 데이터가 적다면 세종대왕은 알겠는데 어느시대 사람인지 모호하고 설사 연도로서 알더라도 정확한 시대에 대해 이해를 못하고 있다던가 하는거야

점묘화를 떠올려봐 점을 듬성듬성 찍으면 뭘 그리려고 하는지 이해할수 없지만 점을 많이 찍으면 많이 찍을수록 표현하고자 하는 대상이 명확해지는거지

영어와 한국어 학습 데이터양은 수십배가 차이가나

영어가 형성하는 월드모델이 8K 해상도라면 한국어는 기껏해야 HD 수준밖에 안된다는거지

바꿔말하면 지식의 양의 차이가 지혜의 차이와도 연결된다고 봐도 얼추 맞을거야

정확한 예시는 아니지만 대충 무슨말인지 이해할거라봐

물론 언어가 달라도 영어에서 학습했던 개념들이 한국어 생성에도 영향을 끼치기 때문에 어느정도 상향표준화가 되기는해

그러면 OAI에서 그냥 가장 좋은 영어로만 출력되게 번역 과정을 중간에 끼어넣으면 되는거 아니냐하면

뭐 최상의 성능을 위해서라면 그렇게해도돼.

그런데 한국어도 알고 일본어 아랍어 등등을 다 알고 학습한애한테 그러한 언어생성을 완전히 막아버리라고 말하는건 좀 이상하지?

고정닉 3

전체 댓글 0개

등록순

본문 보기

타인의 권리를 침해하거나 명예를 훼손하는 댓글은 운영원칙 및 관련 법률에 제재를 받을 수 있습니다.
Shift+Enter 키를 동시에 누르면 줄바꿈이 됩니다.

갤러리 리스트
번호	말머리	제목	글쓴이	작성일	조회	추천
2864	설문	비난 여론에도 뻔뻔하게 잘 살 것 같은 스타는?	운영자	24/06/03	-	-
488110	일반	살면서 OpenAI만큼 나를 긁은 사람이 없었다	ㅇㅇ(119.202)	06.07	94	0
488109	일반	근데 AI구리다고 말하면 왤케 흥분함? [13]	ㅇㅇ(118.34)	06.07	331	0
488108	일반	사람은 이때 다른 일을 할 의욕을 잃어버린다	ㅇㅇ(119.202)	06.07	80	0
488107	일반	중국도 좀 기대되는데 [6]	ㅇㅇ(180.69)	06.07	257	0
488106	일반	특이점 이후 자급자족 가능한 우주선이 만들어지면... [4]	ㅇㅇ	06.07	86	0
488105	일반	클로드 4 언제나오냐 [1]	ㅇㅇ	06.07	84	0
488104	일반	GPT-5 카운트다운 계정 흥미로운 점 [2]	도로시냥	06.07	372	0
488103	일반	gpt5는 내년에 출시될걸로 보임 [2]	ㅇㅇ	06.07	296	1
488102	일반	에이전트는 그냥 gpt5가 뭘 할 수 있는지 아닌가..	ㅇㅇ(114.71)	06.07	49	0
488101	일반	얼마나 개쩌는지 뭘 할 수 있는지 그것만 알려줘 [2]	ㅇㅇ(119.202)	06.07	100	0
488100	일반	알트게이 조심해야 함. [2]	ㅇㅇ	06.07	107	0
488099	일반	GPT5카운트다운싸1개 근황 [6]	퐁칸8	06.07	495	3
488098	일반	그럼 걔가 잘했으면 [1]	ㅇㅇ	06.07	294	5
488096	일반	출SAN율 때문에 나라 망한다 어쩐다하는데.. [5]	특이점특이점(14.55)	06.07	283	0
488095	일반	미라눈나 프론티어 곧 나온다고 했잖아요 [2]	ㅇㅇ(1.210)	06.07	169	0
488093	일반	살면서 본 찌라시중에 젤 웃기네 [5]	ㅇㅇ(175.214)	06.07	268	0
488092	일반	아일랜드라는 옛날영화 보는데 요한슨 개쩌네 [4]	ㅇㅇ(118.34)	06.07	304	2
488091	일반	[뇌피셜 찌라시] 사만다 → GPT4.5 / 단일 신경망 → GPT5 [1]	ㅇㅇ(221.167)	06.07	203	0
488090	일반	6월 13일에 큰 거 옴 [9]	ㅇㅇ(125.191)	06.07	270	0
488089	일반	[찌라시] 찌라시에 따르자면 GPT5 출시일은 [5]	ㅇㅇ(221.167)	06.07	477	3
488088	일반	트윗찌라시에 웰케 반응함	ㅇㅇ(112.186)	06.07	56	0
488087	일반	찌라시는 대부분 지미애플 미만잡임 [2]	ㅇㅇ(112.163)	06.07	95	0
488086	일반	찌라시 공신력은 역시 지미럴 사과햄 뿐이냐 [2]	ㅇㅇ(118.34)	06.07	121	0
488085	일반	올웨이즈 저새끼 요즘 자주보이지 않냐?	ㅇㅇ	06.07	63	0
488084	일반	에이전트가 뭐임? [3]	ㅇㅇ(39.122)	06.07	114	0
488083	일반	LMM 의 시대로의 개막 [5]	ㅇㅇ(221.167)	06.07	286	0
488082	일반	그래서 카운트다운 쓰는 새끼 뭐함 [2]	ㅇㅇ(39.125)	06.07	156	0
488081	일반	일러레갤 웃기노 [8]	도지500층	06.07	244	1
488080	일반	최신 찌라시) gpt5는 연말 / 프로젝트 폰노이만 진행중 [17]	ㅇㅇ(211.214)	06.07	651	7
488078	일반	탈옥이라는 건 없다. 왜	ㅇㅇ(211.208)	06.07	77	0
488077	일반	GPT5를 배포하는 건 기다릴 수 있어	ㅇㅇ(119.202)	06.07	74	0
488076	일반	어우 신선한 공기들어오니 좋네 ㅎㅎ	ㅇㅇ(58.124)	06.07	106	0
488074	일반	이새끼 반응만 봐도 예상 가기는 했음	ㅇㅇ(125.183)	06.07	216	0
488073	일반	GPT5 성능 이정도면 이해 가능함? ㄷㄷ [2]	ㅇㅇ(211.179)	06.07	252	0
488072	일반	엔비디아가 애플 시총을 땄느니 어쩌니 [4]	ㅇㅇ(118.235)	06.07	234	0
488071	일반	영상인식 기술은 절대 개발되면 안됨 [3]	ㅇㅇ(172.226)	06.07	182	0
488070	일반	뤼튼 이새끼들은 업스테이지급 기술도 없음	ㅇㅇ(110.145)	06.07	200	1
488068	일반	아 내가 실베 보냈다 ㅋ . ㅋ	ㅇㅇ	06.07	174	0
488067	정보/ 정보/뉴스	찌라시) 월요일날 gpt5 공개? [5]	ㅇㅇ(118.33)	06.07	468	1
488066	일반	llm의 한계는 아이러니 하게도 그 구조적 문제가 아니고 [1]	ㅇㅇ(110.145)	06.07	140	0
488065	일반	AI가 인류멸망 시킨다는데	WhiskyDelta	06.07	61	0
488064	일반	미개한 좆간놈들 우린 이미 특이점을 누리지! [3]	ㅇㅇ(222.120)	06.07	155	0
488063	일반	지금 20대면 죽기전에 특이점 오냐 [5]	ㅇㅇ(223.39)	06.07	190	0
488062	일반	빨리 영상 인식기술이 공개되야하는데	ㅇㅇ	06.07	41	0
488061	일반	최고의 경지	영크리에이터포에버	06.07	62	0
488060	일반	휴머노이드 보면 중국이 대안인가 싶다 [7]	ㅇㅇ(218.147)	06.07	270	0
488059	토의	개미가 코끼리를 세뇌할 수가 있을까? [4]	A.I.	06.07	120	1
488058	일반	스타십 저거 상용화는 언제쯤 될 거 같음? [2]	ㅇㅇ(112.158)	06.07	97	0
488057	일반	특붕쿤들 요요요 불쌍한 ㅅ ㅐ끼들아 ㅋㅋㅋ [1]	ㅇㅇ(211.184)	06.07	79	0
488056	일반	바벨탑이라고 생각하고 역사서대로 가면 3차 4차 대전이 제일 가능성있네	A.I.	06.07	86	0