mubert text to music

https://twitter.com/Pctg_x8/status/1583061017873231875

テキストからその状況にあった音声を生成

https://github.com/MubertAI/Mubert-Text-to-Music

音楽生成のAPIは別で用意されており，
sentence-transformersでテキストをベクトル化
既に用意されている300程度の音楽のタグと類似度を取り
似ているタグから音声を生成

mubertはロシアのAI系の企業

https://kazuhito00.hatenablog.com/entry/2022/10/21/094341

タグ例

tribal,action,kids,neo-classic,run 130,pumped,jazz / funk,ethnic,dubtechno,reggae,acid jazz,liquidfunk,funk,witch house,tech house,underground,artists,mystical,disco,sensorium,r&b,agender,psychedelic trance / psytrance,peaceful,run 140,piano,run

【閲覧注意】イラスト生成AIが新たな特殊性癖を開拓してしまう【女の子、ケーキ、泣いてる】

https://togetter.com/li/1960362

voicevox + whisper + pydub

最近のポッドキャストで発表したものから作ったものを発表

whisperの検出が秒単位？

単語を登録が読めない，辞書の必要性

音声，挿絵，字幕すべてを自動生成するためには.