fishspeech2 / docs /README.ko.md
pineconeT94's picture
first commit
8b14bed
|
raw
history blame
5.31 kB



์ด ์ฝ”๋“œ๋ฒ ์ด์Šค์™€ ๋ชจ๋“  ๋ชจ๋ธ์€ CC-BY-NC-SA-4.0 ๋ผ์ด์„ ์Šค์— ๋”ฐ๋ผ ๋ฐฐํฌ๋ฉ๋‹ˆ๋‹ค. ์ž์„ธํ•œ ๋‚ด์šฉ์€ LICENSE๋ฅผ ์ฐธ์กฐํ•˜์‹œ๊ธธ ๋ฐ”๋ž๋‹ˆ๋‹ค.


๊ธฐ๋Šฅ

  1. Zero-shot & Few-shot TTS: 10์ดˆ์—์„œ 30์ดˆ์˜ ์Œ์„ฑ ์ƒ˜ํ”Œ์„ ์ž…๋ ฅํ•˜์—ฌ ๊ณ ํ’ˆ์งˆ์˜ TTS ์ถœ๋ ฅ์„ ์ƒ์„ฑํ•ฉ๋‹ˆ๋‹ค. ์ž์„ธํ•œ ๊ฐ€์ด๋“œ๋Š” ๋ชจ๋ฒ” ์‚ฌ๋ก€๋ฅผ ์ฐธ์กฐํ•˜์‹œ๊ธธ ๋ฐ”๋ž๋‹ˆ๋‹ค.

  2. ๋‹ค๊ตญ์–ด ๋ฐ ๊ต์ฐจ ์–ธ์–ด ์ง€์›: ๋‹ค๊ตญ์–ด ๊ฑฑ์ • ์—†์ด, ํ…์ŠคํŠธ๋ฅผ ์ž…๋ ฅ์ฐฝ์— ๋ณต์‚ฌํ•˜์—ฌ ๋ถ™์—ฌ๋„ฃ๊ธฐ๋งŒ ํ•˜๋ฉด ๋ฉ๋‹ˆ๋‹ค. ํ˜„์žฌ ์˜์–ด, ์ผ๋ณธ์–ด, ํ•œ๊ตญ์–ด, ์ค‘๊ตญ์–ด, ํ”„๋ž‘์Šค์–ด, ๋…์ผ์–ด, ์•„๋ž์–ด, ์ŠคํŽ˜์ธ์–ด๋ฅผ ์ง€์›ํ•ฉ๋‹ˆ๋‹ค.

  3. ์Œ์†Œ ์˜์กด์„ฑ ์ œ๊ฑฐ: ์ด ๋ชจ๋ธ์€ ๊ฐ•๋ ฅํ•œ ์ผ๋ฐ˜ํ™” ๋Šฅ๋ ฅ์„ ๊ฐ€์ง€๊ณ  ์žˆ์œผ๋ฉฐ, TTS๊ฐ€ ์Œ์†Œ์— ์˜์กดํ•˜์ง€ ์•Š์Šต๋‹ˆ๋‹ค. ๋ชจ๋“  ์–ธ์–ด ์Šคํฌ๋ฆฝํŠธ ํ…์ŠคํŠธ๋ฅผ ์†์‰ฝ๊ฒŒ ์ฒ˜๋ฆฌํ•  ์ˆ˜ ์žˆ์Šต๋‹ˆ๋‹ค.

  4. ๋†’์€ ์ •ํ™•๋„: ์˜์–ด ํ…์ŠคํŠธ ๊ธฐ์ค€ 5๋ถ„ ๊ธฐ์ค€์—์„œ ๋‹จ, 2%์˜ ๋ฌธ์ž ์˜ค๋ฅ˜์œจ(CER)๊ณผ ๋‹จ์–ด ์˜ค๋ฅ˜์œจ(WER)์„ ๋‹ฌ์„ฑํ•ฉ๋‹ˆ๋‹ค.

  5. ๋น ๋ฅธ ์†๋„: fish-tech ๊ฐ€์†์„ ํ†ตํ•ด ์‹ค์‹œ๊ฐ„ ์ธ์ž(RTF)๋Š” Nvidia RTX 4060 ๋…ธํŠธ๋ถ์—์„œ๋Š” ์•ฝ 1:5, Nvidia RTX 4090์—์„œ๋Š” 1:15์ž…๋‹ˆ๋‹ค.

  6. ์›น UI ์ถ”๋ก : Chrome, Firefox, Edge ๋“ฑ ๋‹ค์–‘ํ•œ ๋ธŒ๋ผ์šฐ์ €์—์„œ ํ˜ธํ™˜๋˜๋Š” Gradio ๊ธฐ๋ฐ˜์˜ ์‚ฌ์šฉํ•˜๊ธฐ ์‰ฌ์šด ์›น UI๋ฅผ ์ œ๊ณตํ•ฉ๋‹ˆ๋‹ค.

  7. GUI ์ถ”๋ก : PyQt6 ๊ทธ๋ž˜ํ”ฝ ์ธํ„ฐํŽ˜์ด์Šค๋ฅผ ์ œ๊ณตํ•˜์—ฌ API ์„œ๋ฒ„์™€ ์›ํ™œํ•˜๊ฒŒ ์ž‘๋™ํ•ฉ๋‹ˆ๋‹ค. Linux, Windows ๋ฐ macOS๋ฅผ ์ง€์›ํ•ฉ๋‹ˆ๋‹ค. GUI ์ฐธ์กฐ.

  8. ๋ฐฐํฌ ์นœํ™”์ : Linux, Windows, macOS์—์„œ ๋„ค์ดํ‹ฐ๋ธŒ๋กœ ์ง€์›๋˜๋Š” ์ถ”๋ก  ์„œ๋ฒ„๋ฅผ ์‰ฝ๊ฒŒ ์„ค์ •ํ•  ์ˆ˜ ์žˆ์–ด ์†๋„ ์†์‹ค์„ ์ตœ์†Œํ™”ํ•ฉ๋‹ˆ๋‹ค.

๋ฉด์ฑ… ์กฐํ•ญ

์ด ์ฝ”๋“œ๋ฒ ์ด์Šค์˜ ๋ถˆ๋ฒ•์  ์‚ฌ์šฉ์— ๋Œ€ํ•ด ์–ด๋– ํ•œ ์ฑ…์ž„๋„ ์ง€์ง€ ์•Š์Šต๋‹ˆ๋‹ค. DMCA ๋ฐ ๊ด€๋ จ ๋ฒ•๋ฅ ์— ๋Œ€ํ•œ ๋กœ์ปฌ ๋ฒ•๋ฅ ์„ ์ฐธ์กฐํ•˜์‹ญ์‹œ์˜ค.

์˜จ๋ผ์ธ ๋ฐ๋ชจ

Fish Audio

๋กœ์ปฌ ์ถ”๋ก ์„ ์œ„ํ•œ ๋น ๋ฅธ ์‹œ์ž‘

inference.ipynb

์˜์ƒ

V1.4 ๋ฐ๋ชจ ์˜์ƒ: Youtube

๋ฌธ์„œ

Samples (2024/10/02 V1.4)

Credits

Sponsor