맨위로가기

Sinsy

"오늘의AI위키"는 AI 기술로 일관성 있고 체계적인 최신 지식을 제공하는 혁신 플랫폼입니다.
"오늘의AI위키"의 AI를 통해 더욱 풍부하고 폭넓은 지식 경험을 누리세요.
목차

1. 개요

Sinsy는 음성 합성 기술로, 은닉 마르코프 모델(HMM)을 채택하여 적은 메모리에서도 동작하도록 설계되었다. MusicXML 형식의 악보 데이터를 입력받아 WAV 파일 형식의 음성을 생성하며, 온라인 버전과 오픈 소스 버전으로 제공된다. 온라인 버전은 일본어, 영어, 중국어를 지원하며, 다양한 음성을 제공한다. 오픈 소스 버전은 리눅스 환경에서 사용 가능하며, 수정된 BSD 라이선스로 배포된다.

더 읽어볼만한 페이지

  • 음성 합성 소프트웨어 - 보컬로이드
    보컬로이드는 야마하에서 개발한 음성 합성 소프트웨어로, 사람 목소리 데이터 기반 가수 라이브러리와 합성 엔진을 통해 사용자가 입력한 가사와 멜로디로 노래를 만들 수 있으며, 하츠네 미쿠 같은 캐릭터 보컬 시리즈는 가상 아이돌 문화를 형성하며 인기를 얻었다.
  • 음성 합성 소프트웨어 - 보카리나
    보카리나는 ㈜티젠스에서 개발한 음성 합성 프로그램 엔진으로, 보라와 카일린 캐릭터 가수를 통해 노래 제작 및 가수 설정 기능을 제공했으나 2018년에 서비스가 종료되었으며, VOCALOID와 유사하지만 직접적인 관련은 없고, 음높이, 다이내믹스, 바이브레이션 조절 및 배경음악 믹싱 기능을 지원했다.
Sinsy - [IT 관련 정보]에 관한 문서
소프트웨어 정보
이름Sinsy
개발자나고야 공업대학
최신 버전0.92
최신 평가 버전3.9
최신 평가 버전 출시일2017/12/25
운영 체제리눅스
언어일본어, 영어, 중국어
장르보컬 신시사이저 애플리케이션
라이선스수정된 BSD 라이선스
웹사이트Sinsy 공식 웹사이트
리포지토리SourceForge 리포지토리

2. 기술적 특징

Sinsy는 은닉 마르코프 모델(HMM)을 합성 기술로 채택하여 적은 메모리에서도 동작하는 것이 특징이다.[14] 2016년 12월부터는 온라인 버전에서 심층 신경망(DNN)을 사용한 일본어 라이브러리가 공개되어 더욱 자연스러운 음성 합성이 가능해졌다.

2. 1. 데이터 형식

멜로디와 가사 입력에는 MusicXML이라는 XML 기반의 악보 데이터 형식을 사용한다.[14]

2. 2. 지원 언어

Sinsy는 초기에는 일본어와 영어만 지원했지만, 나중에 중국어가 추가되었다. 그러나 현재 웹사이트는 영어와 일본어만 지원한다.[5][6]

3. 버전

Sinsy는 온라인 버전과 오픈 소스 버전으로 제공된다. 온라인 버전은 웹사이트에서 무료로 이용 가능하며, MusicXML 형식의 악보를 업로드하여 WAV 파일 형식의 음성을 생성할 수 있다. 오픈 소스 버전은 SourceForge에서 수정된 BSD 라이선스로 공개되어 있으며, 리눅스 환경에서 빌드하여 사용할 수 있다.

3. 1. 온라인 버전

Sinsy는 공식 웹사이트에서 공개되어 누구나 무료로 이용할 수 있다.[14][10] 서버 부하 경감을 위해 곡 길이는 HMM 버전은 최대 7분, DNN 버전은 최대 5분으로 제한되어 있다.[10] 사용자는 MusicXML 형식의 데이터를 업로드하며, Sinsy는 WAV 파일 형식으로 음성을 생성한다.[2] 출력 전에 성별 요인, 비브라토 강도, 피치 시프트를 조정할 수 있다.[2]

3. 2. 오픈 소스 버전

SourceForge에서 리눅스 버전의 소스 코드가 수정된 BSD 라이선스로 공개되어 있다.[14] 이용하려면 빌드가 필요하다. 라이선스에 따라 라이브러리 형태로 다른 소프트웨어에 통합하는 것도 가능하다.

온라인 버전과는 달리, DNN에 의한 노래 합성에는 대응하지 않는다.

4. 제공 음성

Sinsy는 다양한 음성을 제공하며, 지속적으로 새로운 음성이 추가되고 있다. 제공되는 음성은 다음과 같다.

언어이름성별비고
일본어요코(謡子)여성베타 버전, 정식 출시 버전
일본어샹링(香鈴)여성
일본어나미네 리츠 S(波音リツS)남성베타 버전, UTAU용으로 제작, 2013년 12월 25일 출시
일본어미확인불명
일본어미확인불명
영어샹링(香鈴)여성2015년 크리스마스에 추가
영어마츠오P남성
중국어샹링(香鈴)여성


4. 1. 일본어 음성


  • 요코(謡子): 일본어 여성 보컬이다. 현재 베타 버전과 정식 출시 버전, 두 가지 버전이 제공된다.
  • 샹링(香鈴): 일본어 여성 보컬이다.
  • 나미네 리츠 S(波音リツS): 일본어 남성 보컬로, 현재 베타 버전이다. 원래 UTAU용으로 제작되었으며 2013년 12월 25일에 출시되었다.
  • 미확인: 일본어 보컬이다.
  • 미확인: 또 다른 일본어 보컬이다.

4. 2. 영어 음성

샹링(香鈴)은 여성 보컬로, 2015년 크리스마스에 영어 보컬이 추가되었다.[1] 마츠오P(松尾P)는 영어 남성 보컬이다.[1]

香鈴|샹링일본어

松尾P|마츠오P일본어

4. 3. 중국어 음성

샹링(香鈴)은 여성 보컬로, 중국어(만다린)를 지원한다.[1] 2015년 크리스마스에는 영어 보컬이 추가되었다.[1]

참조

[1] 웹사이트 HMM-based Mandarin Singing Voice Synthesis Using Tailored Synthesis Units and Question Sets https://aclweb.org/a[...] Association for Computational Linguistics and Chinese Language Processing 2014-12-04
[2] 웹사이트 Sinsy Updates to 3.3 & Releases English Demo http://engloids.info[...] Engloids.Info 2012-12-27
[3] 웹사이트 Keiichiro Oura http://www.sp.nitech[...] Nagoya Institute of Technology
[4] 웹사이트 The HMM-Based Singing Voice Synthesis System "Sinsy" version 0.92 http://sinsy.sourcef[...] Sinsy.sourceforge.net 2016-01-28
[5] 뉴스 初音ミクとも簡単に対話できる「MMDAgent」、その詳細を聞いてきた http://www.itmedia.c[...] ITmedia ニュース 2013-11-23
[6] 서적 2014 IEEE International Conference on Acoustics, Speech and Signal Processing (ICASSP) 2014-05
[7] 웹사이트 「Ai美空ひばり」を支えた技術 「七色の声」どう再現？ ヤマハ技術者に詳しく聞いた https://www.itmedia.[...]
[8] 뉴스 第429回:シンポジウム 「歌声情報処理最前線! 」レポート その2 ～オープンソースの歌声合成や、“オンチ補正”システムなど ～ https://av.watch.imp[...] AV Watch
[9] 문서 f00001j_dnn_beta2 업데이트 정보 2020-11-05
[10] 웹사이트 Sinsy - HMM-based Singing Voice Synthesis System http://www.sinsy.jp/
[11] 웹사이트 大浦圭一郎 http://www.sp.nitech[...]
[12] 웹사이트 Techno-Speech, Inc. / 株式会社テクノスピーチ https://www.techno-s[...]
[13] Twitter Sinsy 프레임워크 사용 정보 https://twitter.com/[...]
[14] 웹인용 第429回:シンポジウム 「歌声情報処理最前線! 」レポート その2 ～オープンソースの歌声合成や、“オンチ補正”システムなど ～ http://av.watch.impr[...] AV Watch


본 사이트는 AI가 위키백과와 뉴스 기사,정부 간행물,학술 논문등을 바탕으로 정보를 가공하여 제공하는 백과사전형 서비스입니다.
모든 문서는 AI에 의해 자동 생성되며, CC BY-SA 4.0 라이선스에 따라 이용할 수 있습니다.
하지만, 위키백과나 뉴스 기사 자체에 오류, 부정확한 정보, 또는 가짜 뉴스가 포함될 수 있으며, AI는 이러한 내용을 완벽하게 걸러내지 못할 수 있습니다.
따라서 제공되는 정보에 일부 오류나 편향이 있을 수 있으므로, 중요한 정보는 반드시 다른 출처를 통해 교차 검증하시기 바랍니다.

문의하기 : help@durumis.com