키츠 음성 변환(KVC)

KVC: 스튜디오 품질의 노래 목소리 변환

Kits.AI 는 세계 최고의 전문 AI 노래 음성 변환 플랫폼입니다. 수백만 음악 제작자와 보컬리스트가 자연스러운 억양, 다이내믹, 그리고 인간 음성의 뉘앙스를 포착한 스튜디오 품질의 AI 보컬을 위해 Kits를 신뢰합니다.

Kits.AI의 연구팀은 음성에서 음성으로의 변환 시스템인 Kits Voice Conversion (KVC)을 설계하였습니다. 이는 음성 변환 기술의 품질 한계를 넘어서는 업계 선도적인 시스템입니다.

이 페이지는 KVC 내의 혁신 목록이 점점 늘어나는 것을 개괄하는 것입니다 — 개선된 아키텍처, 견고한 사전 훈련 가중치, 최적화된 인프라 — 전 세계 산업 전문가들이 최고의 선택으로 여기고 있는 이유입니다.

KVC 건축: 노래에 최적화됨

KVC는 전문 품질의 노래 출력을 최적화하기 위한 구조적 개선을 이루었습니다. 이 섹션에서는 발음, 음정 정확성, 주파수 범위 및 다이내믹스를 포함한 여러 측면에서 KVC가 오픈 소스 SVC 시스템을 능가할 수 있게 하는 구조적 개선 사항을 개요합니다.

킷 베이스 중량

키츠는 개별 보컬리스트로부터 소스된 독점 데이터셋을 선별하고 수작업으로 처리했습니다. 이들은 그들의 목소리 녹음에 대한 권리를 위해 보상을 받습니다. 이러한 녹음은 KVC 기본 가중치가 훈련되는 데이터셋을 형성합니다. KVC로 음성이 클론될 때마다 이 데이터셋의 품질을 기반으로 합니다.

우리의 훈련 데이터, 데이터 소싱 및 데이터 관리 관행은 공정한 훈련으로 인증되었습니다. 우리는 아티스트의 권리를 존중하고 그들을 재정적으로 지원하기 위해 헌신하고 있습니다.

음높이 감지: 키츠 하이브리드 피치

F0에 대한 더욱 정확한 탐지는 SVC 작업에 중요합니다. Kits Research 팀은 기본 Crepe, RMVPE 및 Mangio-Crepe를 능가하여 향상된 결과를 가져오는 Kits Hybrid Pitch라는 맞춤 피치 감지 알고리즘을 개발했습니다.

RMVPE에 대한 메트릭

하이브리드에 대한 메트릭

오픈 소스: RMVPE가 있는 RVC

0:00/1:34

키츠 하이브리드

0:00/1:34

적응형 콘텐츠 검색

KVC는 적응형 콘텐츠 특징 검색 평활화를 사용하여 RVC와 같은 표준 검색 SVC 시스템에 비해 화자 유사성이 더 높은 수준을 이끌어냅니다. 추론 동안, Kits VC는 입력 특징을 받아들이고 검색 강도를 적응적으로 적용합니다: 특징이 더 정렬될수록 콘텐츠 특징이 검색 쪽으로 끌리는 정도가 높아집니다.

이로 인해 음소 콘텐츠가 더 잘 보존되어 발음과 화자 유사성 향상으로 이어집니다.