KotoKanade (言奏)

KotoKanade

KotoKanade はVoiSona Talkを”歌わせる”ツールです。

KotoKanade, this is a tool for "Singing" VoiSona Talk.

Video

タカハシを歌わせるソフト作ってみた【KotoKanade】

Blog

アップデート通知・更新 / Update apps and cast data

アプリかボイスライブラリの情報(cast-data)に更新があるとアプリ上に通知が入ります。

アプリのダウンロード
- アプリの更新があると通知され、アプリの上からダウンロードできます
- 設定タブの Go to download link をクリックするとgithubからアプリのzipファイルをダウンロードします
  - 展開して上書きして使ってください
ボイスライブラリの情報(cast-data)更新
- ボイスライブラリの情報に更新があると通知され、アプリの上から更新できます
- ⚠ソングボイスライブラリの情報も含まれるため、トークボイスライブラリの情報だけを使っているKotoKanadeでは 更新しても変化がない場合があります

Sample

ピッチ歌唱指導機能のサンプル

タイミング歌唱指導のサンプル

以下は旧バージョンで制作したものです

できること

A. Score Only

歌唱指導を使わずに楽譜データから”歌わせ”ます。（この段階では）機械的な歌声になります。ノートに合わせた平坦なピッチを生成します。 ※手で調声するベースとしても使えます。

用意するもの

CeVIOの楽譜ファイル(.ccs or .ccst)
- VoiSona(song) または UtaformatixでMIDIなどから変換してください

つかいかた

ソング用のccs or ccstファイルを用意します
1. 現在は1トラックのみ対応
読み込みます
歌わせるトークボイスライブラリを選択します
必要ならば細かい設定を行います
「Save」ボタンで出力します
出力されたtstprjファイルをVoiSona Talkで読み取り、再生します

A. オプション

Split notes
- ノートを分割するかどうか
- ※トークボイス音源は長い発音が苦手なためONを推奨
Split threthold msec.
- ノートを分割する基準値
Consonant pffset sec.
- 子音部分をノートの開始時刻からオフセットします
- 自然な歌は子音がノートの開始時刻より前になります

A. 制限

歌詞は日本語のみ
- 歌詞はCeVIOソングなどと異なり、漢字かな交じりに対応しています
- むしろ漢字かな交じりの方が発音が正確になります
読み（音素）の差し替えは未対応
- 逆に助詞の「は」は [w,a] と自動で発音します
  - [h,a]と喋らせたい場合、歌詞をカタカナの「ハ」にかえるとうまくいきます
ノートのアーティキュレーション未対応
ブレス記号はセリフの分割に使われます
- なのでノートくっつけても大丈夫むしろ推奨
歌詞の記号は無視されます
- ※,$,’,@,%,^,_
子音オフセット値は固定値
- 自分で調整する時の基準にしてください
- 長過ぎる時間を指定すると破綻します！！！
ノート分割オプションは常にONを推奨
- 新エンジンのボイス以外は長い発音が途切れるため

コツ

「は」を[w,a]と読んでしまう時
- 歌詞をカタカナの「ハ」にかえる
「きょう」を[k,y,o]ではなく[k,y,u]とよんでしまう時
- 歌詞を「きょー」にかえる

B. Score + Timing

タイミングに歌唱指導を使って歌わせます。発音はまだ機械的ですが、タイミングが自然になります。 ※手で調声するベースとしても使えます。

B. 用意するもの

CeVIOの楽譜ファイル(.ccs or .ccst)
- VoiSona(song) または UtaformatixでMIDIなどから変換してください
歌唱指導用のタイミング情報ファイル(.lab)
- 上記の楽譜ファイルを歌わせた時に同時生成されるもの
- CeVIOソング/VoiSona(ソング)などで生成できます

作品投稿の際は…

歌唱指導をする際は、ボイスライブラリの利用規約に従ってください
歌唱指導した作品を公開するときは、以下のように元のボイスライブラリがわかるようにしてください

歌唱指導さとうささら（CeVIO AI）

B. オプション

Split notes
- ノートを分割するかどうか
- ※トークボイス音源は長い発音が苦手なためONを推奨
Split threthold msec.
- ノートを分割する基準値

B. 制限

歌詞は日本語のみ
読み（音素）の差し替えはNG
- 音素数が異なるとバグります
歌詞の記号は無視されます
ノートのアーティキュレーション未対応
ノート分割オプションは常にONを推奨
- 新エンジンのボイス以外は長い発音が途切れるため

C. Score + Timing + Wav

ピッチに歌唱指導を使って歌わせます。タイミングだけの歌唱指導と異なり、なめらかに歌うようになります。

※合成（解析）にやや時間が掛かります。性能の良いパソコンで長い曲で10秒程度かかります。

C. 用意するもの

CeVIOの楽譜ファイル(.ccs or .ccst)
- VoiSona(song) または UtaformatixでMIDIなどから変換してください
歌唱指導用のタイミング情報ファイル(.lab)
- 上記の楽譜ファイルを歌わせた時に同時生成されるもの
- CeVIOソング/VoiSona(ソング)などで生成できます
歌唱指導用のボーカル音声ファイル(.wav / .mp3など)
- 上記とタイミングのあった音声ファイル
- 16bit 48kbps wav形式以外もサポートしていますが内部で変換処理が入ります

C. 作品投稿の際は…

歌唱指導をする際は、ボイスライブラリの利用規約に従ってください
歌唱指導した作品を公開するときは、以下のように元のボイスライブラリがわかるようにしてください

歌唱指導さとうささら（CeVIO AI）

C. オプション

Split notes
- ノートを分割するかどうか
- ※トークボイス音源は長い発音が苦手なためONを推奨
Split threthold msec.
- ノートを分割する基準値
Use fast estimation
- 高速解析をやるかどうか
Auto tuning bottom estimation threthold
- 試験機能
- 解析対象の最小値を自動で判定するか
- デフォルトはOFFです
Bottom estimation threthold Hz.
- 解析対象の最小値(Hz.)
- 大きくすると解析が速くなりますが、低い音が正しく解析できなくなります

C. 制限

歌詞は日本語のみ
読み（音素）の差し替えはNG
- 音素数が異なるとバグります
歌詞の記号は無視されます
ノートのアーティキュレーション未対応
ノート分割オプションは常にONを推奨
- 新エンジンのボイス以外は長い発音が途切れるため

DL

github ReleaseからDL
【v1.0.0-beta.13以降】本来アプデがある場合はアプリ上からDLできます

Build

.NET SDK 8以降
Open JTalkの辞書が必要です。→DL先
- /lib/フォルダに置いてください

Licenses

MIT License

Copyright (c) 2024 いぬいぬ

MIT License

Copyright (c) 2024 いぬいぬ

Permission is hereby granted, free of charge, to any person obtaining a copy
of this software and associated documentation files (the "Software"), to deal
in the Software without restriction, including without limitation the rights
to use, copy, modify, merge, publish, distribute, sublicense, and/or sell
copies of the Software, and to permit persons to whom the Software is
furnished to do so, subject to the following conditions:

The above copyright notice and this permission notice shall be included in all
copies or substantial portions of the Software.

THE SOFTWARE IS PROVIDED "AS IS", WITHOUT WARRANTY OF ANY KIND, EXPRESS OR
IMPLIED, INCLUDING BUT NOT LIMITED TO THE WARRANTIES OF MERCHANTABILITY,
FITNESS FOR A PARTICULAR PURPOSE AND NONINFRINGEMENT. IN NO EVENT SHALL THE
AUTHORS OR COPYRIGHT HOLDERS BE LIABLE FOR ANY CLAIM, DAMAGES OR OTHER
LIABILITY, WHETHER IN AN ACTION OF CONTRACT, TORT OR OTHERWISE, ARISING FROM,
OUT OF OR IN CONNECTION WITH THE SOFTWARE OR THE USE OR OTHER DEALINGS IN THE
SOFTWARE.

Resources

Epoxy GitHub repository

Projects

KotoKanade.Core: Independent common component project includes MVVM Model code.
KotoKanade.UI: UI (independent platform) project includes MVVM View and ViewModel code.
KotoKanade.Desktop: The desktop application project code.
KotoKanade.Browser: The web browser application project code.
KotoKanade.Android: Android application project code.
KotoKanade.iOS: iOS application project code.

inuinu2022 / kotokanade Goto Github PK

kotokanade's Introduction