While my guitar gently speaks — Todd Fisher, Philo Ventures
본 영상은 기타를 통해 음성 합성을 구현하는 과정을 단계별로 보여줍니다. 초기에는 텍스트를 음성으로 변환하여 재생하는 것부터 시작하여, 단어 단위 분할, 피치 감지, 보코더 활용, 그리고 마침내 질문에 응답하는 AI 기타까지 발전하는 과정을 시연합니다.
핵심 요약
- 기타 연주를 통해 텍스트를 음성으로 변환하여 재생하는 JUCE 플러그인을 개발했습니다. (창작자 평가: 'pretty awesome')
- 단어 분할 시 어려움을 겪었으며, 에너지 간격 분할(energy gap segmentation)과 음절 피크 조음도(sonority peak syllabifier)를 결합했으나 수동 편집이 필요했습니다.
- 기타 연주를 노래로 만들기 위해 YIN 알고리즘으로 피치를 감지하고, 합성 음과 보코더를 활용했으며, 최종적으로 보컬 샘플을 피치 조절하여 적용했습니다. (창작자 평가: 'getting closer to singing')
전체 요약과 종목별 의견·실시간 분석을 보려면 로그인하세요.
로그인 / 회원가입