VRChat 마이너 갤러리 저장소

제 목
일반 인공지능 활용 보이스체인지 1차 학습 종료 2번째.과정
글쓴이
ㅇㅇ
추천
11
댓글
0
원본 글 주소
https://gall.dcinside.com/vr/1885327
  • 2022-05-18 10:08:21
  • 220.70
							

1편 : https://gall.dcinside.com/mgallery/board/view/?id=vr&no=1875946&s_type=search_subject_memo&s_keyword=%EA%B0%9C%EC%A7%80%EB%9E%84%EC%A4%91&page=1




지난 시간까지의 과정은


내 목소리를 전부 녹음하고, 이를 인공지능에게 계~속 학습시키는 작업까지 이루어졌다.


구글에서 제공해주는 하루 연산량은 한계가 있다.

이를 대체하는 방법으로 구글 부계정을 파서 거기에 파일을 옮겨서 이어서 학습시키는 방법인데


학습된 파일은 생각보다 용량이 거대하다., 생각보다 귀찮은 작업이라 그냥 하루에 정해진 양만 학습시키는 방법을 이용한다.



그리고 결국 새벽 내에 학습이 이루어져서



a04829aa0f07b45f8a34155958c12a3a5c436999568b6ab20219db

나도 전문가가 아니기에 졷도 모르지만, 설명에 의하면 G/MEL의 tensor 부분이 음성과의 싱크율인지 뭔지인 것 같고

18~19에 가까우면 합격점이라고 했다. 낮으면 낮을수록 좋다고. 나같은 경우 지금까지 학습하면서 보통 21대가 나오다가 

슬슬 19대가 나오는 것이다.


24000이라고 쓰여진 것은 학습량이다. 한 사이클에 1000씩 오르는데, 0부터 지금까지 3일정도 걸린듯하다.


24000까지 왔으니까 학습을 종료시켜도 되는지에 대해선, 물론 아니다.

제작자 왈 : 학습은 계속 시키는 편이 좋다.




트레이닝이 어느정로 일단락 됬다면 인터페이스로 이동한다.


a04829aa0f07b45f8a34155958c12a3a5c436999568b68b1011dd0

와... 피지컬 지린다.... (딸깍 딸깍)


프로그래머 빙의해서 인터페이스 파일에서 시키는걸 다 처해준뒤 



7fe98076b59c28a8699fe8b115ef046ec7cc614a

몇회차 학습파일을 이용할것인지 적어주면 되는데


난 실제로는 25000회까지 학습을 했지만 G/mel tensor값이 24000회차가 좀더 낮았으므로 24000을 이용하기로 한다.



a14a20ad2f1ab44396f1c6bb11f11a393b710effb5f36a4f


이번에 테스트하는 것은 실시간 변환이 아닌 비리얼타임 보이스체인지기 때문에, 기존 음성을 활용한다.


음성을 넣어주면 되는데, 기본적으로 학습시킬때 쓰던 1~100번 음성 파일을 먼저 들어본다.


참고로 학습에 썼던 음성파일은 퀄리티가 나쁘지 않게 나온다. 당연히 학습한 발음 그대로니까...



나쁘지 않은 퀄리티다 싶어서, 추가적으로 새로 아무말이나 녹음해서 넣어본 결과, 학습에 이용한 음성보다는 떨어지지만,

시중의 보이스체인저보다는 낫다는 판단이 섰다.



혹시 한국어도 ....? 


a14a20ad2f1ab44396f1c6bb11f11a393b710ef8b5f46a40

바로 한국어로 녹음을 씹조져주고 테스트를 진행해보았다.


소프트웨어도 일본것, 학습자료 역시 일본어로 진행되었기 때문에 발음이 학습되지 않은 한국어를 얼마나 대응할 수 있을지 궁금했다.


결과는 보플에서 직접 확인하시길.





결론만 놓고보자면 아직까지는 만족인데 개인적인 욕심이랄가, 

앞으로 일주일 정도 더 학습을 시켜서 내 목소리가 아니면 살아갈 수 없는 소프트웨어로 해버리고 싶다는 생각이다.


애초에 브챗에서 써먹으려고 이 귀찮은 작업을 하고 있는거라, 실시간 변환이 메인이다.

실시간 리얼타임 체인지는 아직 테스트를 안해봤지만, 이 것 역시 정리가 되면 다음 글에서 보겠음



ps. 보플로 결과를 올릴 것인데, 비교를 위해서 제 찐따목소리 원본이 그대로 들어가있으니 주의바람



댓글이 없습니다.
번호 분류 제목 글쓴이 날짜 추천
1890567 일반 ㄴ이글념글가면 제로투춰준다는데? 라그나로크 2022-05-20 111
1890513 강좌 응애도 할수있다 아바타를 최적화 해보자 밥줘응애 2022-05-20 111
1890412 일반 ㄴ개추폭격 시작 안테나 2022-05-20 36
1890380 일반 오늘... 나... 생ㄹ리야... 착즙 2022-05-20 12
1889535 일반 시발 포동포도 2022-05-20 14
1887970 일반 라이즈가 놀라면? 서프라이즈 움비처럼 2022-05-19 10
1886970 일반 오늘은 생리날 찐꾸 2022-05-19 10
1886711 정보 게임탭에서 화면을 마우스로 쉽게 돌려볼수있는 에셋 핑크여우씨 2022-05-19 14
1885428 일반 짱깨는 인권이 없습니다 ㅇㅇ 2022-05-18 17
> 일반 인공지능 활용 보이스체인지 1차 학습 종료 2번째.과정 ㅇㅇ 220.70 2022-05-18 11
1884615 일반 헛저격한 211.217 필독 ㅇㅇ 175.223 2022-05-18 13
1883790 일반 이게 갤러리 가불기인가 먼가 그거냐?? Stably 2022-05-18 17
1882539 일반 이새끼 걍 차단먹여 ㅇㅇ 211.203 2022-05-17 13
1881302 일반 념글 저사람 좀 수상하긴 하노 ㅇㅇ 118.216 2022-05-17 14
1881203 일반 사나흘=.고래. 증거있음 ㅇㅇ 223.39 2022-05-17 15
1881132 일반 아아...내 친구를 잃어버렸다.. 브쳇늅 2022-05-17 11
1881120 일반 게이 아님 해명합니다 ㅇㅇ 118.235 2022-05-17 16
1881108 일반 그럼나도저격의저격의저격의저격함 도라지 2022-05-17 13
1881098 일반 게이컷 ㅇㅇ 2022-05-17 12
1881067 일반 글 22000개나 쌋길래 뭐지 했는데 ㅇㅇ 125.135 2022-05-17 13
1881052 일반 "브붕아~ 밥 먹고 놀아라~" ㅇㅇ 210.123 2022-05-17 14
1880898 일반 제가 잘못했구요 퍼지협회 2022-05-17 12
1880885 일반 별뜻은 없고 그냥 보다보니 웃긴거같음 사렌 2022-05-17 12
1880795 일반 저격하길래 친삭튀했음 퍼지협회 2022-05-17 13
1880783 일반 애미뒤진 일침병 도라지새끼나 어떻게좀 해봐라 ㅇㅇ 223.39 2022-05-17 30
1880747 일반 나?만념글이해안감? 도라지 2022-05-17 16
1880713 일반 거 근데 한대 때린김에 한번만 더 때립시다 Ganachocolate 2022-05-17 28
1880363 일반 "ㅋㅋㅋ 허어어접~♥ 소추~♥ 병신~♥" ㅇㅇ 210.123 2022-05-17 13
1879906 일반 사실 디씨에서 념글가는거 쉬움 라그나로크 2022-05-16 18
1879698 일반 저 시발새끼는 끝까지 추하네 백도라지무침 2022-05-16 17
1879206 일반 정말 미안하다 울페리아 게이 게이야. KoreanBural 2022-05-16 15
1878959 강좌 눈 셰이프키(Blink 셰이프키) 깨지는 것을 수정해보자 PDCH 2022-05-16 16
1877997 강좌 다른 사람이 만지면 바뀌는 옷장을 만들어보자 백도라지무침 2022-05-16 17
1877910 일반 씨발 저격 준비중이였는데 뺏겼네 사나흘 2022-05-16 10
1877891 일반 이게맞냐? ㅇㅇ 223.62 2022-05-16 11
1877302 일반 돚거대회 자신있음 intro 2022-05-16 11
1877131 일반 념글 햄버거 뿌린거 소신발언함 사나흘 2022-05-16 11
1875950 일반 호감고닉 소댬 영차 먹이고 싶으면 개 추 좀 박아볼까? ㅇㅇ 138.199 2022-05-15 30
1875076 사진/영상 3차 랜매 후기~ (62.7mb) 21 프롭 2022-05-15 11
1874896 일반 애미터진 병신새끼가 디시는 싫으면서 ㅇㅇ 222.108 2022-05-15 15
념글 삭제글 갤러리 랭킹