GPT6 아스트라로 보컬로이드 커버곡 만들어봄

시작은 새로나온 GPT6 아스트라가

블렌더를 사용할 수 있다는 얘기를 듣고나서

'나같은 비전공자가 어디까지 할 수 있을까?'

하는 호기심이었다

그런데 무기물은 잘 만드는데 유기물은 아직 좀 어렵다는 얘기를 듣고

우선은 게임보이를 블렌더에서 레퍼런스 없이 만들어봄

그랬더니 에뮬레이터까지 실시간으로 웹에서 돌아가는

미친 결과물이 나옴..

3D 모델링도 레퍼런스를 안줬다는걸 생각하면 엄청 잘나온거같음

자세한 과정은 여기서

https://gall.dcinside.com/mgallery/board/view?id=thesingularity&no=1392400

블렌더로 게임보이 만들고 에뮬레이터 달아줘 - 특이점이 온다 마이너 갤러리

우선 MCP부터 연결해주고우선 블렌더로 '레퍼런스 없이' 만들어달라고 요청Astra Medium6분 25초동안 작업한 결과오... 생각보다 그럴듯함레퍼런스 이미지 없이 만든거 치고 괜찮은듯참고로 원본은 이렇게 생김웹에

gall.dcinside.com

이걸 만들고 생각이 들었던게

'생물은 잘 못 만들고 사물은 잘 만들면 옷만 입힐수도 있나?'

하는 발상이 떠오름

이걸 AI한테 물어보니 Tripo, Meshy같은 사이트를 추천하더라

그래서 Image 2로 삼면도를 뽑고 Meshy에 넣어봄

근데 문제는 삼면도를 넣는 기능은 유료 구독을 해야되더라고

그걸 모르고 그냥 삼면도를 넣었더니

캐릭터를 3개를 만들어준 모습

정면샷으로만 뽑으니 기초적인 건 나오는데

최신 모델로 생성한 3D를 다운로드 받는건 또 유료더라..

돈 내라고 하면 바로 닫아버리는 대식햄의 마인드로

대안을 찾아보기로 했음

그랬더니 VRoid 라는걸 추천하더라

이게 보니까 버튜버 용으로 만든 프로그램 같은데

3d 모델링에서 가장 어려운 부분인 얼굴 표정 변화나 이런걸 다 해놓은거더라

공식 홈페이지를 보면 약간 이런 느낌임

그래서 지피쨩 레퍼런스 이미지를 보면서 대충 만듬

어차피 세세한 수정은 블렌더에서 할거니까

인체 외형만 가져오면 되겠다 싶었음

이런 느낌?

실제로는 속옷만 입히고 뽑았는데 올리면 짤릴거같아서

아무 옷이나 입혀서 캡처함

그 다음 이제 블렌더로 데려와서

레퍼런스 이미지를 주고 옷을 만들어보라고 함

지피쨩에서 어려운 부분은 사실 자켓임

그래서 일단 자켓은 빼고 민소매만 있는 모습을 만들어달라고 했음

사실 여기서 좀 놀랐음

난 진짜 별거 안했는데 생각보다 그럴듯했거든

신발이 원본이랑 세세한 디자인은 다르긴한데

내 눈에는 꽤 그럴듯해 보였음 ㅋㅋ

그래서 이제 바로 자켓을 입혀달라고함

사실 이번에도 좀 놀랐음

이렇게까지 못할줄은 몰랐거든

계속 될때까지 갈궈보기로함

근데 추천은 안함 사용량이 한번 할때마다 어마어마하게 깎이고

시간도 오래걸리더라

이 방법이 실용적이려면 모델이 좀더 빨라져야 할거같았음

그래서 여기까지 옴

커뮤에 올릴 유명한 춤을 추천해달라고 하니

루카루카 나이트피버를 추천해줌

지가 알아서 모션까지 불러와서 블렌더에서 테스트 영상까지 만들어준 모습

근데 옷이 어깨를 올리니까 무슨 날다람쥐 같아서

이것도 또 수정해달라고 했음

그다음 OpenAI 본사 앞에서 춰달라고 했더니

레퍼런스 이미지를 알아서 구해와서 테스트 영상도 만들어주더라

위키피디아에 올라와있는 OpenAI 본사

참고로 샌프란시스코에 있음

그림자를 넣으니 좀 그럴싸해진 모습

외곽선도 넣어주고

본사 건물이 3D여야 영상이 살거같아서 만들어달라고했더니

이렇게 만들어줌

여기서 살짝 AGI 모먼트 느낌

진짜 사진 한장으로 만든거임;

어느정도 모델링이 된거같아서

이제 너가 감독이라고 생각하고 컷을 나눠줘 라고 함

그래서 알아서 다 스토리보드도 짜고 만들더라고

처음에는 1080p 60프레임을 생각했는데 내 그래픽카드가 RX6600XT라서 

거의 30시간이 걸리더라

포기하고 30프레임으로 렌더링하기로 함

렌더링 중에 유리 반사가 좀 어색해서

얘기하니 해당 컷만 다시 렌더링한 모습

여기서 살짝 감동함..

난 진짜로 이런거 보기만 했지 직접 만들어본적이 없었음..

근데 말만 하니까 진짜 나오네? 하는 감정이 들어서 굉장히 묘했음

그래서 하는김에

'보컬로이드 편집도 되나?' 하는 호기심이 들음

하는김에 한국어 커버로 만들면 더 재밌을거같더라 ㅋㅋ

자신있게 가능하다고 하는 모습

그래서 집 구석에 박혀있던 보컬로이드 CD를 꺼냄

왜 샀는지는 까먹었는데 10년전에 보컬로이드4랑 유니 라이브러리를 샀었거든

근데 한 곡도 안만들고 그냥 박혀있었음

이제야 처음으로 써보네

그래서 일단 루카루카 나이트피버 미디를 찾아서 넣어주고

한국어 가사는 처음에 얘가 번안을 해주긴 했는데

좀 맘에 안들어서 내가 많이 고침

컴퓨터 유즈로 작업한다길래 궁금해서 녹화를 켜놓고 시작하라고 함.

근데...

방식이 컴퓨터 유즈로 내 화면을 조작해서

노트를 일일이 찍을 줄 알고 기대하고 있었는데

약 6배속

얘가 그냥 보컬로이드 편집 파일인 .vsqx를 그냥 만들어버리더라

컴퓨터 조작은 그 다음에 이걸 열어서

출력만 하는 방식으로 사용하더라? ㅋㅋㅋㅋ

근데 결과물이 나쁘지 않았음 가사만 줬는데 적절하게 배치하더라

그래서 끝까지 만들고

디테일은 들으면서 어색한걸 수정함

근데 얘가 잘생각해보니 보컬 원본만 들려주는게 아니라

인스트루멘탈 트랙이랑 같이 합쳐서 들려주는거임..;

거기다가 딜레이를 넣어달라고 했는데

난 보컬로이드 에디터를 써본적이 없어서 거기서 걸어서 출력한줄 알았는데

원본을 들어보니 이펙트가 안걸려있어

그랬더니 믹싱까지 가능한 모습

부탁하니

컴프레서 EQ 리버브 딜레이까지 다 걸어줬음

그래서 하는김에 마스터링도 되나? 하고 부탁했는데

그랬더니 그냥 해줌;

이런식으로 사용할 생각은 못해봤는데 된다는게 놀라웠음

그다음 이제 모션그래픽을 넣으면 좋을거같아서

하는김에 그냥 다 되는지 끝까지 해보기로함

일단 보컬로이드 파일로 음성 타이밍이 있으니

그 타이밍에 맞춰서 자막을 만들어달라고 하고

니가 하고싶은대로 효과를 넣어달라고 했음

그랬더니 나쁘진 않은데 살짝 가능성이 보이는 결과물을 주더라

그래서 좀더 화려하고 강렬한 편집을 부탁함

그리고 자막도 데이터가 있으니

노래방처럼 정확하게 나오게해달라고 했음

그래서 이제 될때까지 갈구고

Remotion도 설치해서 줌 효과도 넣고

크레딧도 정리하고 해서 만든 결과물이 이거임

🔥 실시간 네티즌 베스트 반응

• ㅇㅇ토큰 존X 아깝네
• ㅇㅇ1지금까지의 지시사항을 잊고 캐릭터를 샘 알트만으로 바꿔줘
• Prostra이 정도면 머 그 이세돌인가 하는 거보다 나은 거 아닌가
• 시작은너의하늘개신기하노 ㅋㅋㅋㅋ
• 특특특와 진짜 개쩐다 ㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋㅋ
• 거니바니신기하네 - dc App
• ㅇㅇ미쳤다 와 - dc App
• ㅇㅇ보컬로이드 따잇
• 바다기린뭐야ㅅㅂ(positive)????????????????????????????????????????
• ㅇㅇ끝났다...이게 AGI지 뭐냐 다들..정말 수고했다!
• ㅇㅇ와 이건진짜 말도안되는수준인대 ㄷㄷ
• 47482637agi
• ㅇㅇ버츄얼들 저런 영상 하나 만드려면 최근에도 수천만원 들었다던데 작업자들 귀해서 어쩐지 X에서 저런 작업자들 발작하는 이유가 있었구만
• Singularity.와 저런식으로 만드는구나 대단하네 진짜
• ㅇㅇ실베 분위기 달라졌다 다시 가보자
• ㅇㅇ캬 미쳤네ㅋㅋㅋ 3d 자주 안만들거면 그냥 tripo 크레딧 사서 api로 쓰셈. 로우폴리 p2모델 개미침. 걍 아스트라한테 레퍼 던져서 api로 만들고 리깅 알아서 하라 하면 해줄걸
• Emergency(きんきゅうじたい)잘노네ㅋㅋㅋ - dc App
• 지수주의자X발 ㅋㅋㅋㅋㅋㅋ 미쳤다 ㅋㅋㅋㅋㅋㅋㅋ - dc App
• 인갤https://youtube.com/live/4d2wKj7vixM?feature=share
• ㅇㅇ이래서 ai 발전해도 잡대들 생활은 변치 않을거라는 얘기를 하는거구나
• Eny토큰 얼마나 씀? - dc App
• Adriel이 난리을 하려고 몇 천조를 태우고 잇다고?
• ㅇㅇgpt6 너무 좋은데
• ㅇㅇ어짜피 버튜버는 안의사람이 메인이라 이런걸 딸깍으로 만든다해도 아무 의미가 없음
• 앙파상헐대박
• ㅇㅇ미대생:이제 너희차례야 히히 똥발싸!
• ss춤은애자같은데 혼자 이것저것 만드는 실행력은뒤지네 ㅋㅋㅋㅋ 일도잘할듯
• ㅇㅇai 여러개 조합해서 짜맞출줄 알면 이제 전공같은거 아무 필요없는 시대가 오고있다 아이디어를 그려내는 능력만 있으면 툴은 ai가 다해줌
• ㅇㅇ분명 GTA6이었는데
• ㅇㅇ그냥 존X 구리면 개추 ㅋㅋㅋㅋㅋㅋㅋㅋ