fcracing / holovrm

HoloVRM

HoloVRM 사용해보기

HoloVRM에 대하여

HoloVRM은 마이크, 문자 입력, 음성 합성 등을 이용해 웹 브라우저만으로 AI 홀로라이브 멤버와 대화를 즐길 수 있는 웹 브라우저 기반 대화 시스템입니다.

기술

@pixiv/three-vrm: 3D 모델을 표시하고 조작하는 데 사용되었습니다. @pixiv/three-vrm

음성 합성: RVC 모델을 바탕으로 8천개의 음성을 해당 멤버의 목소리로 딥러닝 시킨 후 VITS를 사용하여 TTS 작업을 수행했습니다.

음성 인식: 인터넷 브라우저의 음성 인식을 사용하였으므로 브라우저마다 성능이 다를 수 있습니다.

OpenAI API: 인격은 ChatGPT-4o를 이용하여 부여하였으며 세세한 대화를 위하여 장문을 사용했습니다. OpenAI API

이 소스코드는 원본 ChatVRM을 참고하여 재구성하였습니다.

원본

ChatVRM : https://github.com/zoan37/ChatVRM

해당 원본을 재구성하여 사용하였습니다.

사용 조항

의도적으로 차별적이거나 폭력적인 발언, 특정인을 비하하는 발언을 유도하지 마십시오.

그 외에는 자유롭게 사용하셔도 됩니다.

changelog

0.9.8 호쇼 마린 추가, 로그인 보안 기능 추가
0.9.7 관리자 권한 향상
0.9.6 UI 개선
0.9.5 아카이 하아토(하쨔마), 사카마타 클로에 추가
0.9.4 배경화면 로딩 속도 향상
0.9.3 로그인 엔터로 가능하도록 수정
0.9.2 관리자 로그인 페이지에 루시아 관리 모드 추가
0.9.1 관리자 접속 보안을 위한 otp 시스템 적용
0.9.0 관리자 페이지 생성

0.8.1 비회원 접속시 배경화면 로딩에 문제가생기던 현상 수정
0.8.0 츠노마키 와타메, 유키하나 라미, 모모스즈 네네, 라프라스 다크니스 추가

0.7.1 회원가입 CloudFlare Turnstile 적용
0.7.0 sql 데이터베이스와 연결 된 한층 강화된 로그인 시스템 구현

0.6.3 대화창 5초뒤에 사라지도록 수정
0.6.2 멤버 선택창 가시성 향상
0.6.1 대화창 음성 종료 후 5초뒤에 사라지도록 변경
0.6.0 로보코 씨 추가

0.5.1 : 채팅 내역 초기화 할때 기억된 대화가 초기화 되지 않는 문제 해결
0.5 : 오오카미 미오 추가

0.4.1 : 램 누수 최적화
0.4 : 네코마타 오카유 추가

0.3.2 : 하쿠이 코요리 코트 탈의 버전 추가
0.3.1 : 하쿠이 코요리 모델 변경
0.3 : 이누가미 코로네 추가

0.2 : 미나토 아쿠아(메이드) 추가

0.1.5 : 링크 미스 수정
0.1.4 : 인트로 화면 종료 후 바로 세팅화면 표시
0.1.3 : 환경 변수를 이용한 보안 강화
0.1.2 : HoloVRM 대표 이미지 등록
0.1.1 : 깃허브 링크 수정
0.1 : 초기 버전 개발 완료