What is Polymath?
Polymath는 머신 러닝을 활용하여 음악 라이브러리를 샘플 라이브러리로 변환하는 음악 제작 툴입니다. 노래를 스템으로 자동 분리하고 같은 템포와 비트 그리드에 맞춰 정량화하고 음악 구조와 키를 분석하며 오디오를 MIDI로 변환합니다. 이를 통해 음악 프로듀서, DJ, ML 오디오 개발자의 작업 흐름을 간소화하는 검색 가능한 샘플 라이브러리가 만들어집니다.
주요 기능:
음원 분리: Polymath는 Demucs 신경망을 사용하여 노래를 비트, 베이스, 보컬 등의 스템으로 분리합니다.
음악 구조 분할/라벨링: sf_segmenter 신경망을 사용하여 노래의 음악 구조를 분석하고, 구절과 코러스와 같은 요소를 식별합니다.
음악 피치 트래킹 및 키 감지: Polymath는 Crepe 신경망을 사용하여 음악의 피치를 추적하고 음악이 있는 키를 감지합니다.
활용 사례:
음악 작곡: Polymath를 사용하면 다른 노래의 요소를 결합하여 독특한 작곡을 손쉽게 만들 수 있습니다. 사용자는 한 트랙에서 비트를, 다른 트랙에서 베이스라인을, 세 번째 트랙에서 적합한 호른을 손쉽게 가져와 디지털 오디오 워크스테이션(DAW)에 원활하게 통합할 수 있습니다.
DJ 세트: Polymath의 검색 기능을 사용하면 DJ가 관련 트랙을 빠르게 발견하고 1시간 분량의 세련된 매시업 DJ 세트를 만들 수 있습니다.
ML 오디오 개발: Polymath는 오디오 파일을 자동으로 MIDI로 변환하고 검색 가능한 샘플 라이브러리를 제공하여 생성 모델을 훈련하기 위한 대규모 음악 데이터 세트를 만드는 과정을 간소화합니다.
결론:
Polymath는 음악 프로듀서, DJ, ML 오디오 개발자에게 강력한 도구입니다. 이 도구의 머신 러닝 기능을 사용하면 사용자가 음악 라이브러리를 샘플 라이브러리로 변환하고 노래를 스템으로 분리하고 음악 구조와 키를 분석하고 오디오를 MIDI로 변환할 수 있습니다. 음악 작곡, DJ 세트, ML 오디오 개발에서 사용하기 쉽고 실용적인 Polymath는 음악 산업의 작업 흐름을 간소화하고 창의성을 향상시킵니다.





