@Blog

地声ベースのAI音声合成モデルを再度構築しました話.たぶん似てる.

2025.01.04

Logging

おはようございます.地声ベースのAI音声合成モデルを再度構築しました話を書いていきます.まず地声ベースモデルを作る場合.自分の音声を録音しwavなどファイルにします.それが出来ない環境では音声モデルを作ることは難しいです.それが出来たらstyle-bert-vits2をGitHubから落としてきて、ブランチをdevに切り替えておきます.Windowsの場合、app.batを起動します.前提条件としてPythonがインストールされていることとgitがインストールされた環境であることです.

app.batを起動するとターミナルがターミナル立ち上がり次に任意のブラウザが開くことでしょう.ターミナルは閉じずにブラウザ画面のTOPにタブがあるので左から右へタスクをこなしていくと地声ベースの音声合成モデルが生成されます.

音声合成モデルが生成された後にstyle-bert-vits2内でターミナルを開き下記のコマンドを叩きます.

python convert_onnx.py --model model_assets\モデル名

叩く処理が実行されonnxファイルがモデルフォルダに作られます.

作られたファイルをaivm-generator.aivis-project.comサイトにてコンバートします.コンバートするとAIVM / AIVMX ファイルがダウンロードされます.最後にダウンロードされたファイルをAivisSpeechアプリに取り込めば完了です.

で、こちらが地声ベースの音声合成モデルで今回の記事を読み上げている音源になります.

明日へ続く

タグ

コマンド, ターミナル, ターミナル立ち上がり次, タブ, ファイル, ブラウザ, ブラウザ画面, モデルフォルダ, 内, 再度, 前提条件, 右, 地声ベース, 地声ベースモデル, 左, 最後, 音声, 音声モデル, 音声合成モデル, 音源,

音声ノイズキャンセリングはこれ使っています.

2024.12.13

Logging

おはようございます.AIで生成されたボイスにノイズが入るので音声ノイズキャンセリングを使っています.これを使用するとVideoProc Converter AIを使用すると結構きれいにノイズキャンセリングが出来るので良いです.

因みに自分は買い切りタイプを使っています.またOBS Studioなんかでも上手く使用するとノイズキャンセリングが出来るらしいけど、AI程ではないと思っています.

また無料でノイズキャンセリングしたい場合はnoisereduceと言うPythonライブラリがあるので使用すると良いかも知れない.使用の仕方は公式サイト（GitHub）に記載れたいる通りに行えば良いだけです.

pip install noisereduce

ライブラリをインストールしてきて次にサンプルコードのファイル名を任意の音源ファイル名に変更してサンプルコードを実行すればノイズキャンセリングされた音源が出力されます.

from scipy.io import wavfile
import noisereduce as nr
# load data
rate, data = wavfile.read("mywav.wav") #ノイズのある音源
# perform noise reduction
reduced_noise = nr.reduce_noise(y=data, sr=rate)
wavfile.write("mywav_reduced_noise.wav", rate, reduced_noise) ＃ノイズキャンセリングが出力される

因みにサンプルコードではサンプルコードと同じ階層にノイズのある音源があるものとしています.

自分は手持ちに有料のAIノイズキャンセリングがあったのでそれを使用していますが、サンプルコードを元にオリジナルのアプリを作って自分だけで利用するのはありかなと思います.

明日へ続く

タグ

アプリ, サンプルコード, ノイズ, ノイズキャンセリング, ファイル名, ボイス, ライブラリ, 仕方, 使用, 元, 公式サイト, 手持ち, 有料, 程, 買い切りタイプ, 通り, 階層, 音声ノイズキャンセリング, 音源, 音源ファイル名,

AivisSpeech用の自分の声ベースモデルを作ろうとしてStyle-Bert-VITS2

2024.11.28

Logging

おはようございます．AivisSpeech用の自分の声ベースモデルを作ろうとしてStyle-Bert-VITS2を頑張る．事前に自分の声を12本録音してた奴をOpenAIが提供しているopenai-whisperで文字起こしを行いました．そのデータを元にStyle-Bert-VITS2の配下にあるTrain.batを叩くとブラウザが立ち上がる．何処にデータセットを置かないいけないかなども記載されている．

その場所にデータを配置します．配置後、上から順番に実行していけば学習モデルが生成されます、生成されたモデルをONNX形式に変換しその後aivmx形式しないとAivisSpeechでは使用できないらしい．変換コマンドはこちら、やり方はこの方が記載されているので参照ください．

git checkout dev
pip install onnx
pip install onnxsim 
pip install accelerate
python convert_onnx.py --model 【SVBS2のモデルフォルダ】

onnxに変換後、AivisSpeechの公式サイトのコンバーターサイトで変換するとaivmx形式が落ちてきます（ダウンロード）．それをAivisSpeechアプリの設定から読み取ればOK！

結構長い手順ですが、これで自分の声の音声合成が出来ます．それで作ったのがこの音源です、雑音が入っているのはセミがなく中で録音した音声を学習させたからこんな感じになっています．

追伸：雑音を除去しました．下記は雑音を除去したものになります．

明日へ続く

タグ

コンバーターサイト, セミ, ダウンロード, ブラウザ, モデルフォルダ, 事前, 何処, 変換コマンド, 奴, 学習モデル, 形式, 本録音, 追伸, 配下, 長い手順, 雑音, 音声, 音声合成, 音源, 順番,

武蔵美電音研が良いって話でこの音源すべて欲しい、誰か知ってませんか？

2024.09.19

Logging

おはようございます．武蔵美電音研が良いって話でこの音源すべて欲しい、誰か知ってませんか？今日は情報提供ではなくてブログを見ているユーザーさんの中で知っている方へお問い合わせ．

このYOUTUBEの音源を知っている方は一言メッセージをください🙇．

この曲には恐らく続きがあると思うのですが、shazam使っても見つからないですよね．因みにshazamってのは音楽の音から音源を検索してくれるツールです．Chromeの拡張でもありますがshazamってアプリが存在していてiPhoneでもAndroid端末でもインストールしていれば、この曲いいと思った時にアプリ起動させると瞬時に音源を検索してくれるので便利です．

最後にShazam（シャザム）のアプリリンクを貼っときます．

ios端末（iPhone 、ipad）
https://apps.apple.com/us/app/shazam-find-music-concerts/id284993459

Android端末
https://play.google.com/store/apps/details?id=com.shazam.android&hl=ja

明日へ続く．

タグ

Android端末, Chrome, hl, ios端末, iPad, iPhone, ja, shazam, youtube, シャザム, ツール, 一言メッセージ, 拡張, 曲, 最後, 武蔵美電音研, 瞬時, 音源, 音源すべて欲しい,

Seaboard RISE 2（シーボードライズ2）が凄いよ😯 #SeaboardRISE2

2023.01.14

Logging

おはようございます、本日は朝イチにイチケイのカラスを観に行く予定です🐦。

今日はYOUTUBEでネトサしていたら、おすすめにSeaboard RISE 2（シーボードライズ2）の動画が紹介されてなんだろうこれはという見入ってしまいました。

古い表現で言うと電子ピアノというの物の分類に入るのかな、今の機器は凄いの出てますね。この機械一台でいろいろな音色を奏でることが出来てしまうという所が知らない人にとっては、凄く衝撃的です。

これで演奏もできたり、譜面も作成できたり演奏した音源も録音できたりするのかな？、あまり調べていないけれどもPCに繋げたりすればそういう事が出来るかも。

追伸

公式サイト見てみたら、恐らく上記のことは可能のようですね、音楽を作るの何だか楽しそうですね。これからの時代、色々なことが自分で作れるようになると思います、逆に色々なことが自分で出来ないと大変な時代になると思っています。そして、これから数十年先の未来、AIをツールとして使いこなせる人が生き残れる社会になるじゃないかとも思います。

タグ

AI, Seaboard RISE, youtube, イチケイ, ガラス, シーボードライズ, ツール, ネト, 分類, 古い表現, 朝イチ, 未来, 機器, 演奏, 譜面, 追伸, 録音, 電子ピアノ, 音源, 音色,

banvoxさんの曲をよく聞いていたなぁ。字余り。

2022.06.03

Logging

おはようございます。そろそろ転職しまっせ？ってみんな思っているのかなぁ🤔。

数年前はbanvoxさんの曲をよく聞いて特にSummer（サマー）という曲は好きです、YOUTUBEミュージックのbanvoxさん曲再生ランキングでも上位に表示されているので、人気があるみたいです。

banvoxさんのこの頃活動はミュージシャンに曲を提供してたりしています。因みに本人のアカウントのYOUTUBEチャンネルではあんまり更新されていない感じです。あとこの人の凄いところはサウンドクラウドで音楽を無料で提供しているところにあります。

無料でも提供しているし、音源を購入することもできます。自分はYOUTUBEミュージックを通して聴いてたりするので、一応、クリエイターに微々たるお金を支払っていたりします。なお、音楽一再生の単価は１円ではなく0.05円とかそんな単位だとか・・・。

この頃はレベール会社を通さず、曲を販売するクリエイターが増えているのもわかる気がします。逆にメジャーになる理由もあまりないのかも知れませんね。

タグ

0.05, １, banvox, Summer, youtube, アカウント, お金, ク, クラウド, クリエイター, こと, サウンド, サマー, チャンネル, ところ, ミュージシャン, ミュージック, みんな, ランキング, レベール, 一, 上位, 人, 人気, 再生, 単位, 単価, 字余り, 感じ, 提供, 数, 曲, 更新, 本人, 活動, 無料, 自分, 表示, 販売, 購入, 転職, 音楽, 音源, 頃,

ポロポポロポ～ンの音源が素晴らしい。しゃろう氏🙇ありがとうございます。

2022.05.07

Logging

おはようございます。

GWもあと少しで終わりますね。さて今日のお題は「ポロポポロポ～ンの音源が素晴らしい。しゃろう氏🙇ありがとうございます。」です。YOUTUBEを見ていると一度は聴いたことがある曲かもしれません。YOUTUBEを作る時に音って結構大事な部分だと思います。音で全然印象が違った形になりますからね。

お世辞抜きでしゃろう氏の作る音源は素晴らしいと思います、これだけの音源をフリー素材として提供しているのは稀だと思いますし、まさにYOUTUBEをうまく使っているなという印象を持ちます。

これから先、才能のある人はある程度、宣伝すれば確実に自分の好きなことでお仕事ができるようになると感じます。登録者３４万にも入れば広告を回すだけで普通の生活は楽にできるわけですからね。

そして認知度が上がれば依頼もくるでしょうから、本当に才能のある方は個人で稼げる時代になったんだなって感慨深いものがあります。逆に才能ない人にとっては生きにくい社会になりつつあるとも感じています。

タグ

34, com, GW, https, watch, www, Yb-rLsCpBvI, youtube, お世辞, お仕事, こと, これ, これだけ, シャ, フリー, ポロポポロポ, ろう, ン, 一度, 万, 人, 今日, 先, 印象, 大事, 宣伝, 少し, 広告, 形, 才能, 抜き, 提供, 時, 普通, 曲, 生活, 登録者, 素材, 自分, 認知, 部分, 音, 音源, 題,

BICEP(バイセップス)とは力こぶ。この頃、バイセップスさんの音源を聞いています。

2022.03.31

Logging

おはよう御座います。３月も今日で終わりですね…😱。

この頃、いつもバイセップスさんの音源をリピートで聴いています。殆ど休日は一日中、ヘッドホンで聴いている時があります。

ガンガンな曲が苦手という人はごめんなさい。自分はガンガンな曲が大好きです。いろいろな曲を聞きますがどちらかというとテンポの良いガンガンな曲好みです。クラッシック系とかも聞きますが、大半はガンガンな曲を聴いている時が多いです。

いま、バイセップスさんの音源がハマっている所ですが似ている系統でもっと良いのがあれば、そちらに鞍替えするかもしれません。

タグ

３, BICEP, いま, いろいろ, クラッシック, そちら, テンポ, どちらか, バイセップス, ヘッドホン, リピート, 人, 今日, 休日, 力こぶ, 大半, 所, 時, 曲, 殆ど, 系統, 自分, 苦手, 鞍替え, 音源, 頃,

音飛びしないブルートゥースは？

2020.07.27

Logging

音飛びしないブルートゥースの選び方を教えます？、パソコンにブルートゥースで接続する場合、ブルートゥースの規格は双方同じバージョンにするべしです。まず、ヘッドホンのブルートゥース5.0推奨の場合でパソコンのほうがそれよりバージョンが低いブルートゥース4.0とか使用していると音飛びが必ず発生します。ブルートゥースには下位のバージョンとの互換性はあるもののブルートゥース5.0と4.0では伝送通信速度にはかなりの差があります。

例えばYOUTUBEの動画の音源をブルートゥース4.0でワイヤレス（ブルートゥース）ヘッドホンに飛ばす場合、4.0で音データを飛ばすよりブルートゥース5.0で飛ばすほうが飛躍的にデータ量を飛ばすことができます。

例えるならYOUTUBEを4G回線で見るとたまに遅延しますよね、それと同じ現象がブルートゥース4.0で起きているのです。だから音飛びが発生するのです。なので音楽を音飛びしないで聞きたい場合はブルートゥース5の規格を選ぶことを強くお勧めします。それでも音飛びがする場合、初めて外部の妨害電波か機器がブルートゥース5.0非対応もしくは機器の故障を疑いましょう。

タグ

4, 4.0, 5, 5.0, youtube, かなり, こと, それ, たま, データ, バージョン, パソコン, ブルートゥース, ヘッドホン, ワイヤレス, 下位, 互換性, 伝送, 使用, 動画, 双方, 回線, 場合, 差, 接続, 推奨, 現象, 発生, 規格, 通信, 速度, 遅延, 選び方, 音, 音楽, 音源, 音飛び,

言いにくいbluetooth[ブルートゥース]が音飛びするよ。

2020.07.06

Logging

言いにくいbluetooth[ブルートゥース]が音飛びするよ。最初に解決方法を教えます。緩衝しているであろう電波の遮断とブルートゥースを再接続することで解決するということです。ぐぐるとその情報が上位に表示されるので間違いでしょう。あのSONYのサイトでも同じ解決方法ですからね。

確かにそれは解決方法として間違っていないようにも思うのだけど、PCとヘッドホンをミリ秒単位？でブルートゥースは通信を行っていると思うです、大体、音飛びする時の音って情報量が多い音源のような気がします。シンセサイザーみたいな音源だと比較的に音飛びが発生する確率が上昇するような気がするのですが、皆さんどうでしょうか？

ブルートゥースで音楽聞かないひとには分からないかもしれないけれど、ノイズや音飛びは結構、イラってする事があります。特にそれが頻発したらヘッドホンを買い換えようと考えるぐらい思うのですから、本当に音を気にする人は有線ヘッドホンを使っていると思うのですが…。

パソコンで作業をしながらって人は有線は結構邪魔な存在です。因みに少し前までは有線で頑張っていましたが無線（ブルートゥース）に切り替えました。ブルートゥースヘッドホンは充電式なので就寝前に充電すれば問題なく一日使えます。そろそろ1万円代のブルートゥースヘッドホンに変えようかなとか思っています。

タグ

bluetooth, PC, SONY, イラ, こと, サイト, シンセサイザー, それ, ノイズ, ひと, ブルートゥース, ヘッド, ヘッドホン, ミリ, 上位, 上昇, 事, 人, 単位, 大体, 情報, 接続, 方法, 時, 最初, 有線, 本当, 気, 発生, 皆さん, 確率, 秒, 緩衝, 表示, 解決, 通信, 遮断, 電波, 音, 音楽, 音源, 音飛び, 頻発,

松岡茉優さんが歌う『どんなときも。』が好きです。

2020.03.16

Logging

松岡茉優さんが歌う『どんなときも。』が好きです。上手いかというよりは何気ないから好きなのかもしれないなと。ある意味非売品ですよね…商品化していない歌声です。普通に売り出したら松岡茉優さんなら、買う人はいると思うですけどね。ちなみにYOUTUBEから音源を取り出すサービスがあるそうですが、それほど難しい事ではないです。エンジニアならコマンドで何とかなるレベルです。

ちなみにYOUTUBEをダウンロードするソースコードみたいなのは以前、ブログで記載したと思います。あのソースコードをコマンド用に直すと使いやすいかもしれません。

タグ

youtube, エンジニア, コード, コマンド, サービス, ソース, ダウンロード, どんなときも。, ブログ, レベル, 事, 人, 以前, 商品, 意味, 普通, 松岡茉優, 歌声, 記載, 非売品, 音源,

紙の月を観てきました。若干、R15ぽっいけど。

2014.12.07

Logging

紙の月を観てきましたので感想なんかを記載します。ストーリーは銀行での横領です内容があるようでなかった感じが歪めない感がありました（平坦な映画かな）。面白さもあまりなかったかな。ちょっと真面目ぽっい話を何とか、音楽でごまかしている感がありました・・・。ちなみにlittle moaという人が作った曲が結構よかったです。音源を検索して調べていたら、この紙の月っていう映画は元々NHKのドラマとしても放送されたものだと知りました（どうでも良いですけど）。
まとめ：映画の内容はごくふつうでした。だだR15ぐらいのHな場面が途中からあります。観ていて、その場面いるのかどうか疑問符を若干かんじましたけど、その場面が無ければ、この映画が、すごく平坦な映画になっていたので無いよりある方が良かった感はあります。宮沢りえのお色気で釣っているような気が歪めない感じもありましたね・・・。
あまり、共感できなかったのです、どちらかと言えば前作の桐島、部活やめるってよが良かったかな？
音源購入はこちらから＊

タグ

little moa, お色気, ストーリー, だだR15, どちらか, ドラマ, まとめ, 内容, 前作, 大事, 始末, 宮沢りえ, 桐島, 疑問符, 真面目ぽっい話, 紙, 若干, 部活, 銀行, 音源, 音源購入,