음성합성엔진으로 곡을 번역해보자 - 설치편

LegenDUST · 2024.05.05 14:40:26

[시리즈] 음성합성엔진 튜토리얼

· 음성합성엔진으로 곡을 번역해보자 - 곡에 가사 넣기
· 음성합성엔진으로 곡을 번역해보자 - 번역편
· 음성합성엔진으로 곡을 번역해보자 - oto.ini와 받침편
· 음성합성엔진으로 곡을 번역해보자 - 설치편

열심히 작성해서 올렸지만 레이아웃이 다 깨진 관계로 빡쳐서 모바일로 다시 적는

음성합성엔진으로 곡을 번역해보자!

그 1. 설치편을 시작해보자.

솔직히 수요없는 공급이긴 하지만

그래도 혹시 한 명 정도 보고 관심을 가져주면 그거로 만족이다.

정보글 적어달라는 사람도 실제로 있었다. 놀랍게도.

오늘의 목표: OpenUTAU를 설치하고 테토가 말하게 해보자.

0. 사전 요구사항

컴퓨터가 필요하다. 당연하게도.

성능은 솔직히 그닥 상관 없다. 본인은 4년 된 노트북을 사용중이다.

운영체제는 Window를 기준으로 작성했으나, Linux와 Mac 역시 상관 없다.

일본어 실력은 딱 히라가나를 읽고 컴퓨터로 칠 수 있는 정도면 충분하다. 셐붕이들의 실력이 그 쯤은 되리라 믿는다.

그렇다면, 들어가자.

1. OpenUTAU 설치

OpenUTAU를 사용할 것이다.

UTAU는 들어봤을 것이다. 정말로 오래되고 이제 개발도 안 되는데다가 로케일 문제가 있어서 함부러 받고 사용하려다간 뷁어가 난무하는 도구다.

그래도 꽤 사랑받고 있기야 하지만, 낡은건 낡은거다.

UTAU와 호환될 수 있도록 새롭게 만든 프로그램이 OpenUTAU다.

깔끔하고 현대적이며, 무엇보다 아직도 활발히 개발중이다.

각설하고, 받아보자.

https://www.openutau.com/

Home

OpenUtau: Open singing synthesis platform / Open source UTAU successor

www.openutau.com

a15714ab041eb360be3335624481766946b9e68806c6601ab13217b81e24596e40bc8cb2d68fb383cafaa6

홈페이지에 접속해보자.

파란 색으로 위에 'Download Now'버튼이 영롱하다.

가볍게 무시해주자. 어짜피 눌러도 살짝 스크롤이 내려가는 것밖에 없다.

Download 아래에 네 개의 파란 버튼이 있는데, 적당한걸 누르자.

"난 내가 뭘 받아야 하는지 모르겠다" 싶으면 보통은 Windows x64를 누르면 된다.

내가 한 10년쯤 된 케케묵은 컴퓨터실/사지방 컴퓨터를 쓰고 있다 싶으면 Windows x86일 수도 있다.

Linux나 Mac은... 어짜피 다들 자기가 뭘 하는지 잘 알고 있을거다.

참고로 Mac에서 할 땐 보안을 꺼야 한다고 한다. 난 애플이 싫어.

압축 파일을 하나 받게 된다. 압축을 해제하자.

a15714ab041eb360be3335624481766946b9e68806c6601ab03616b11e24596ee603576b0b3f2aa991b9a8

수많은 dll파일들의 압박이 몰려온다.

몇몇 없는 폴더도 있을거다. vlabeler라던가 project같은 폴더. 없는게 정상이다.

아무튼, 쭈욱 스크롤을 내려보자. 귀찮다면 그냥 이 상태에서 키보드 o(0 아니고 O)키를 누르자.

a15714ab041eb360be3335624481766946b9e68806c6601ab03512b21e24596e407c235919838cda65e350

OpenUtau.exe가 보이는가? 이게 오픈우타우 실행파일이다.

더블클릭해서 실행해보자.

a04424ad2c06b47caf33044d44817669f876db3299236a452751846c915fbccf53dc2a523b4fceaceccee9

짜잔. 정상적으로 실행됐다.

그러면 이제 노랫소리를 들을 수 있을까?

아직이다. 가수도 없이 노래를 할 수는 없지 않는가.

가수를 설치해주도록 하자.

2. 가수 설치

잠깐 개인적인 이야기를 조금만 하자.

본인은 보카로 등 음성합성 곡들에 입문이 갤평에 비해 지나치게 느렸다.

정확하게 프세카를 시작하면서 그 쪽을 접했다. 물론 그 전에도 미쿠 정도는 알았지만.

하지만 미쿠는 유료인데다가 애초에 우타우용도 아니다.

프세카로 입문했는데 우타우 가수 중에서 아는게 있을 리가...

있더라. 그래도 갤에서 눈칫밥 좀 먹으면서 카사네 테토 이름 정도는 들어봤다.

내가 아는 유일한 우타우 보이스뱅크여서 테토를 써봤다.

목소리가 마음에 들더라.

아무튼 그런고로, 테토를 기준으로 진행하겠다. 다른 가수도 전반적으로 비슷할 것이다. 원하는 가수가 있다면 사용하자.

다만, 이용 약관은 잘 확인해주자. UTAU 이외의 프로그램에서 사용을 금지했다거나, (oto.ini 등) 파일의 수정을 금지한 음원은 되도록 쓰지 말자.

(파일 수정은 내가 이 시리즈를 계속 적는다면 언젠가 한 번은 다루게 될 것이라 미리 적어둔다.)

카사네 테토는 둘 다 오케이고, 이용에 큰 제약도 없다.

카사네 테토의 공식 웹사이트는 여기다.

https://kasaneteto.jp/

重音テト・オフィシャルサイト

重音テト・オフィシャルサイト

kasaneteto.jp

a15714ab041eb360be3335624481766946b9e68806c6601ab33617b41e24596e1fef443923164bbd5900ad4b

이런 사이트가 나올 것이다. 빨간 드릴머리 31살 0.8 아줌마 0.2 아저씨가 맞아준다.

아무튼 위쪽을 확인해보자. UTAU 音源(음원)이라고 적힌 부분이 보일 것이다. 거기를 클릭해주자.

a15714ab041eb360be3335624481766946b9e68806c6601ab33416b21e24596e1a6777c805620627728bc987

이런 화면이 나오고, 클릭하기 좋게 예쁜 버튼 두개가 보일 것이다. 이번에도 개무시해주자.

위쪽 버튼은 UTAU를, 아래쪽 버튼은 OpenUTAU를 다운받는 버튼인데, 우리는 이미 받았다.

스크롤을 조금 내려주자.

a15714ab041eb360be3335624481766946b9e68806c6601ab33313b71e24596e824e5fffd41b50c7a36683

현기증나게 많은 무언가가 반겨준다.

각각 테토의 여러 바리에이션들이다. 속삭임, 숨소리, 강한 소리, 약한 소리, 부드러운 소리 등...

전부 무시할거다. 노트북 용량 문제 등으로 고통받고 있어서 통상음원만 사용하고 있기도 하고.

a15714ab041eb360be3335624481766946b9e68806c6601ab23f13b11e24596eabddd3c1a467f4e84fe66578

通常音源ライブラリー(통상음원 라이브러리)를 눌러주자.

내가 용량이 좀 넉넉하고 (474MB) 시간도 좀 남고 테토를 다양하게 쓰고 싶은 의향이 있다 싶으면 (안 다룰 내용이다. 나도 몰라.) 그 위에 있는 OpenUTAU用日本語統合ライブラリー(OpenUTAU용 일본어 통합 라이브러리)를 받아도 무방하다.

통합 라이브러리에는 저 위에 나온 모든 음원들이 다 들어가 있다. 설치가 편하게 한 것.

아, 참, 적는걸 까먹었는데, 두 번째 버튼 (이름 더 긴 쪽)을 눌러서 받아주자.

연속음이 같이 있는 버전이다. 앞으로 계속 쓸 것이다.

아무튼, 통합 라이브러리던 통상음원이더 전부 다 받았으면 어디에 다운받았는지 정도는 기억해두자. 꼭 특정 폴더에 다운받을 필요는 없다.

따로 다운 받을 때 설정을 안 해줬다면 다운로드 폴더 안에 있을 확률이 높으니 참고하고.

a15714ab041eb360be3335624481766946b9e68806c6601ab53612b21e24596ea18aa20fdaa918d312bb93

다시 OpenUTAU로 돌아오자. 도구 -> 가수 설치를 눌러주자.

a15714ab041eb360be3335624481766946b9e68806c6601ab53414b41e24596ed7313163614eb6ed24a51b

파일 선택 다이얼로그가 나올텐데, 아까 기억해두라고 한 곳으로 가서 다운받은 zip파일을 선택해주자.

a15714ab041eb360be3335624481766946b9e68806c6601ab53214b11e24596e9736781454d342f8e68879

이런 창이 나오면, 글씨가 깨지지 않고 일본어로 잘 나오는 것만 확인하고 '다음으로'를 두 번 눌러주자.

a15714ab041eb360be3335624481766946b9e68806c6601ab53117b31e24596e5b26c18edac7b0489b8e71

통합음원으로 받지 않았다면 이런 창이 나올 것이다.

'utau'로 잘 설정되어있는지 확인하고 '가수 설치'를 누르자.

창 아래에 나타난 파란 선이 오른쪽 끝까지 도달하면 설치 완료.

3. 기본 설정

이제 테토가 노래할 수 있도록 몇 가지 설정을 해주자.

기초적인 것만이다.

OpenUTAU의 화면 왼쪽을 보면, '가수를 설정하세요'라고 적힌 부분이 있을 것이다. 클릭하자.

a15714ab041eb360be3335624481766946b9e68806c6601ab53f16b718651e27f0941e92f2433ced4371e4de3da9

카사네 테토가 있는 것이 보일 것이다. (重音어쩌고 써 있는게 카사네 테토다.)

클릭해주자.

a15714ab041eb360be3335624481766946b9e68806c6601ab53e16b01e24596ec3045c5f576f0284f07c75

그러면 이렇게 테토의 초상화가 보일 것이다.

조금 내가 찍은 스크린샷과는 다를건데,

a15714ab041eb360be3335624481766946b9e68806c6601ab53e12b81e24596e36c17bedfbac45337c624d

세 번째 줄에 DEFAULT, 네 번째 줄에 WORLDLINE-R이라고 되어 있을 것이다.

네번째 줄은 당장에 무시해주자.

DEFAULT라고 된 부분을 클릭해주자.

여기서 Phonemizer(포네마이저, 음소화기)를 설정하게 될 것이다.

잠깐 지루한 이론 수업을 하겠다.

일본어야 발음이 해봤자 100개가 안 되니까 가능한 발음들을 전부 녹음해두고 나중에 적당히 짜맞추면 음성 합성이 가능하다.

하지만 다른 언어는? 예컨데 한국어는 수만가지 발음이 가능하다. (계산은 당장에 귀찮으니까 안 할거다.)

그걸 성우에게 전부 녹음하라고는 할 수 없는 법이다.

그 대신에, 예컨데 "감"을 녹음하는 대신에 "가-"와 "-암"을 녹음한다.

나중에 "가-"와 "-암"을 적당히 끼워맞추면 "감" 발음이 되는 것이다.

이 "가-"와 "-암"을 음소라고 부른다. (언어학의 음소와는 조금 다르다. 양해해주길 바란다.)

그렇다고 '가-'와 '-암'을 매 번 '감'을 입력할 때마다 입력하기는 불편하니, 이걸 자동화해주는 중간 단계를 '음소화기'라고 부른다.

정말 여담으로 추가하자면

일본어도 이런 식으로 추가적으로 녹음하는게 있다.

음이 하나하나 따로 놀지 않고 자연스럽게 연결되게 하는 것인데

이걸 '연속음'이라고 부르고, 우리가 받은 테토 음원에도 연속음이 들어있다.

자동으로 연속음을 쓰게 될 것이다.

Neutrino 대신 OpenUTAU로 이 글을 적고 있는 것이 이 음소화기의 존재 때문이다.

서문이 길었고, DEFAULT라고 적힌 부분을 클릭해보자.

a15714ab041eb360be3335624481766946b9e68806c6601ab43613b41e24596e8bc145cbc03c13ae8404b3

여기서 더보기... -> KO -> [KO to JA] KO to JA Phonemizer를 선택해주자.

그러면 가사를 한글로 입력해도 테토가 부를 수 있는 일본어로 자동으로 바꿔 줄 것이다.

a15714ab041eb360be3335624481766946b9e68806c6601ab43213b61e24596efe054a7d02e7bce38ac6a2

이 상태가 (CLASSIC이라고 적힌 부분은 무시하자.) 됐다면 오케이.

잠깐 짬을 내서 이 패널을 설명하겠다.

트랙이란 쉽게 생각해서 가수다.

오픈우타우는 여러 가수가 한 번에 노래를 부르고 반주까지 깔 수 있게 해주기 때문에 꽤 편한 감이 있다.

그 가수 하나하나를 설정할 수 있게 해주는 것이 이 패널이다.

제일 위에서부터 왼쪽은

Track 1: 트랙 이름 및 변경

KO to JA: 음소화기 변경

CLASSIC: 리샘플러 변경. 이 시리즈를 계속 해나간가면 언젠가 설명할 때가 올거임

오른쪽은

M: 이 트랙 음소거

S: 이 트랙 솔로 (다른 트랙 음소거)

톱니바퀴: 리샘플러/웨이브툴 설정. 나도 잘 모르겠다만 나중에 한 번은 건드릴 수도 있다.

아래쪽은

긴 왼쪽 슬라이더: 트랙의 음량 변경

짧은 오른쪽 슬라이더: 좌우 음향 변경

이다.

이 정도면 설치와 기본 설정까지도 완료했다.

그래도 여기까지 왔는데 테토가 최소한 말은 해봐야 하지 않을까.

4. 말하기

a04424ad2c06b47caf33044d44817669f876db3299236a4426528069915fbccfac37af4f0c01164f4b5f05

붉은 색으로 표시해둔 부분 아무 곳이나 클릭해보자.

a15714ab041eb360be3335624481766946b9e68806c6601bb13f16b91e24596e4f34cdc058e0fce55534

이렇게, 빨간 박스가 만들어질 것이다. 이걸 Part라고 부른다.

(선택되지 않은 상태에서는 파란색이다.)

막 만들어진 박스를 더블클릭하자.

a15714ab041eb360be3335624481766946b9e68806c6601bb03715b81e24596e3afb3512fa617df999f69c

이런 창이 뜬다. 나오는 도움말은 꽤 유용하므로 차분히 읽어보고, T 버튼을 눌러서 도움말을 닫자.

a15714ab041eb360be3335624481766946b9e68806c6601bb03612b41e24596e32a2aaa3a5902ec4c01c

위 쪽에 이런 아이콘 모음이 있는 것이 보일 것이다.

두 번째에 있는 펜 아이콘이 설정되어 있는지 확인하자.

설정되어 있지 않다면 클릭하거나, 키보드에서 숫자 2키를 누르면 된다.

각각에 대해서는 언젠가 다시 설명하자. 설명할 날이 올지는 모르겠지만. 이거 생각보다 귀찮네.

a15714ab041eb360be3335624481766946b9e68806c6601bb03416b81e24596ef2ec8df0562e0a38178fd7

빨간 색으로 표시된 곳 아무 곳이나 클릭하고, 오른쪽으로 드래그해주자.

a15714ab041eb360be3335624481766946b9e68806c6601bb03317b01e24596ed361b89e19fa2afc7bf5cf

이렇게, 파란색 사각형이 생길 것이다.

이제 스페이스 바를 눌러 실행하면 소리 내기 완성

...이 될 리가 없다. 아무리 기다려봐도 아무 소리도 안 날 것이다.

아까 만들어진 사각형을 더블클릭하자.

a15714ab041eb360be3335624481766946b9e68806c6601bb03215b61e24596e2a974f12570285b6a29ada

이런 다이얼로그가 나올 것이다. 아래쪽의 리스트는 무시하고, 한글 한 글자를 입력해보자. 두 글자 이상이면 안된다.

나는 "감"을 입력하겠다.

a15714ab041eb360be3335624481766946b9e68806c6601bb03016b81e24596e351449d2d60752ee59d4

그러면 가사가 '감'으로 설정되면서, 아래쪽에 が와 aむ가 생긴 것이 보일 것이다.

음소화기가 알아서 '감'을 두 개로 나눈 것이다.

이제 스페이스바를 누르면... 왜 소리가 안 나는 것일까.

a15714ab041eb360be3335624481766946b9e68806c6601bb03f17b61e24596e7e562ca6e07e0c6c89b0

지금 가사 편집창이 나오기 전에 이것저것 설정했던 트랙 표시 창으로 나가보면 이렇게 보일 것이다.

현재 소리를 재생하고 있는 곳과 우리가 테토의 목소리를 넣은 곳과 꽤 멀리 떨어져 있어서다.

다시 가사 편집창으로 돌아가자.

a15714ab041eb360be3335624481766946b9e68806c6601bb03e16b31e24596e3d4716d8b1770b93e0b622

빨간색 동그라미로 표시해둔 부분을 클릭하자.

a15714ab041eb360be3335624481766946b9e68806c6601bb33717b31e24596ee4f375177470fa12082c

그렇다면 현재 재생중인 곳이 코앞까지 옴을 확인할 수 있다.

다시 스페이스 바를 눌러보자.

테토가 "가-므" 라고 하는 것을 들을 수 있을 것이다.

완벽한 발음은 아니더라도 (일본어에 ㅁ받침은 없다) 대충 비슷한 발음이 나온다.

오늘은 이 정도로 만족하도록 하자. 이 발음은 언젠가 고쳐줄 것이다.

끝맺으며

이래저래 바쁜 학식충이라서 다음에 언제 올라올지 모른다. 이거 적는데 이렇게 오래 잡아먹을지도 몰랐고.

그닥 다루기 어려운 툴은 아니니까 쉽사리 익숙해질 것이다.

그러면 오늘은 여기까지. 읽어줘서 감사하다.

번호	말머리	제목	글쓴이	작성일	조회	추천
3006	설문	여행 같이 다니면 고난이 예상되는 스타는?	운영자	25/04/28	-	-
694322	공지	프로세카 한국서버 미래시 (최근 수정: 250407) [19]	ㅇㅇ	24.03.06	136755	118
1127866	공지	[프로세카 한국서버 핵심 가이드 즐겨찾기] [28]	ㅇㅇ	24.12.02	7674	28
1208379	공지	갤방 용어 및 이용 규칙	*Can*	25.02.11	4121	18
1208333	공지	진행중인 이벤트&대회 목록	*Can*	25.02.11	2480	18
1208366	공지	한셐갤 규정	*Can*	25.02.11	2803	20
1208231	공지	한세카 종합 플레이 가이드 [1]	*Can*	25.02.11	9865	24
502656	공지	완장 호출벨 [5]	ㅇㅇ(223.38)	23.09.08	266653	829
1298903	⠀	하이스피드매치업~~~	틱택토	13:15	5	0
1298902	⠀	이따먹을 셐점심	ㅇㅇ	13:15	4	0
1298901	⠀	오늘 왤케 어지럽지 [1]	이치카는아침에이치카치카	13:15	6	0
1298900	⠀	포니테일 잘어울리는 뮤비 어떤게 있을까 [8]	ㅇㅇ	13:11	33	0
1298899	🎵갤방	실스업 180 로테랑 3판 38589 ㅊ [2]	ㅇㅇ	13:09	32	0
1298898	⠀	원더호이외치고싶어서주저앉아우는중 [8]	ㅇㅇ(210.96)	13:09	28	0
1298897	⠀	유우리 콘서트 가고싶다 [4]	네기토로P	13:09	19	0
1298896	⠀	첫 50랭이자 우리형 50랭 달성 [16]	ㅇㅇ	13:05	65	9
1298894	⠀	스포) 원더쇼 신곡 되게 좋네 [8]	에나낭뒷계	13:03	51	0
1298893	⠀	끼얏호우 [7]	족망겜	13:03	35	0
1298892	⠀	겜 광고의 세계 치열하네 [4]	ㅇㅇ	13:03	43	0
1298891	⠀	gpt짤 결과 애바라서 갤에 안올린거 있는데 [7]	이치카는아침에이치카치카	13:02	62	2
1298890	⠀	셐붕아 우리 190 로테랑하자 [2]	틱택토	13:00	35	0
1298889	⠀	선착순 셐붕이 한명❗+❗+ [4]	자루도르	13:00	59	0
1298888	⠀	그림 생성하는데 이상한거 나오길래 틀어막음 [28]	ㅇㅇ	12:59	90	2
1298887	⠀	미꾸 미꾸 [4]	Shapeless	12:59	26	0
1298886	⠀	이 플레이리스트를 어떻게 정상화시킬까 [6]	<b>유동닉	12:58	36	0
1298885	⠀	야김셐붕일로와봐 [3]	ㅇㅇ(210.96)	12:58	30	0
1298884	⠀	아 계산기 컴으로 수정해야하는데 일어나기 싫다 [7]	말과멜로디	12:57	25	0
1298883	🎵갤방	중퇴자유 2시반쫑 190 로테랑 85829 출	자루도르	12:56	14	0
1298882	⠀	해?석	<b>유동닉	12:56	33	0
1298881	⠀	텐마남매70번연탄곡치기 [4]	ㅇㅇ	12:55	46	12
1298880	⠀	월링카드는 월링 이벤트 끝나고 얻으려면 픽뜷뿐인가? [3]	13인의촉법소년이스쿨존을질주하오	12:55	45	0
1298879	⠀	달링달링 아이시테오쿠레 [2]	에나낭뒷계	12:55	21	0
1298878	⠀	점심 추천해줘 [7]	ソル	12:54	37	2
1298877	⠀	카나데 고아 맞는이유 [3]	ㅇㅇ(210.96)	12:53	50	1
1298876	⠀	낮잠자야지 [4]	ㅇㅇ	12:53	26	0
1298874	⠀	다들 놀러갔나 [3]	스티로폼?	12:51	39	0
1298873	⠀	믹구코스한사람인줄알았는데 [2]	ㅇㅇ	12:51	52	0
1298872	⠀	셐붕이에게 주는 선물 [3]	ㅇㅇ(116.38)	12:50	33	0
1298871	⠀	마후유로3행시 [1]	ㅇㅇ	12:50	24	0
1298870	⠀	꽃내림 수록 해줘.. [4]	소쿠미_	12:50	29	0
1298869	⠀	이정도면 돼지임? [12]	틱택토	12:49	66	0
1298868	⠀	나기 상 [4]	テト	12:48	40	0
1298867	⠀	야김셐붕씨발련아 [3]	ㅇㅇ(210.96)	12:43	47	0
1298866	⠀	"코이츠! 도오시테 이츠모 오쿠레루다요!" [4]	쌀순이	12:43	80	6
1298865	⠀	세카기갱 [6]	족망겜	12:43	38	0
1298864	⠀	이게 30이라니 [3]	ame.	12:42	36	0
1298863	⠀	셐붕 요리모 [8]	이찍카	12:40	65	0
1298862	⠀	ㄴ차기파딱감	ㅇㅇ(210.96)	12:40	15	0
1298861	⠀	아니 똥글싸놓고 씻고왔는데 [2]	<b>유동닉	12:39	47	3
1298860	⠀	아 오늘까지 일페가길 잘했다 [4]	Shapeless	12:39	42	0
1298859	⠀	친척집 가서 용돈 받고옴 [11]	소쿠미_	12:36	50	0
	뉴스	정은지 “14년 함께 한 IST 감사… 새로운 시작할 것”	디시트렌드	05.03

갤러리 검색

최근 방문

즐겨찾기

즐겨찾기 갤러리

프로젝트 세카이 한국서버 갤러리
마이너

머리말∙꼬리말

머리말∙꼬리말

색상 설정

스포일러 경고 설정

제목에서 경고

본문에서 경고

마이너 갤러리 이슈박스, 최근방문 갤러리

연관 갤러리

마이너 갤러리 소개

차단하기

[프로젝트 세카이 한국서버 갤러리]

갤러리 본문 영역

[정보/공략] 음성합성엔진으로 곡을 번역해보자 - 설치편앱에서 작성

추천 비추천

댓글 영역

① NFT 발행

② NFT 구매

파워링크 광고

하단 갤러리 리스트 영역

왼쪽 컨텐츠 영역

갤러리 리스트 영역

페이지 이동

오른쪽 컨텐츠 영역

알림 설정

알림

실시간 베스트

뉴스

디시미디어

디시이슈

개념글[신병(드라마)]

디시콘 리스트

디시콘

디시콘 검색결과(0)

인기 디시콘