Melisma part1

AIによって楽器の音を生成するWebサービスが国内から誕生。
現在はスタートアップのベータサービス中であり、ヴァイオリンやチェロ、オーボエのリアルな奏法をMusicXMLから生成できる。

Melisma(β)公式サイト
https://kagura-music.jp/melisma-top

スレタイが地味すぎて誰にも気付かれてない

公式サイトより引用

Melismaで使われている技術

・AI
Melismaは、生成系AIを使用した汎用音楽用シンセサイザーです。楽譜のスラーやアーティキュレーション、歌詞を読み取り、楽器や歌声の特性に合わせて合成します。

ヴァイオリンなら運指や弓の動かし方、管楽器なら息の入れ方や運指、歌なら音の繋がりや口の動かし方など、様々な要素をニューラルネットワークで推測します。通常のニューラルネットワークと拡散モデルを組み合わせ、表現力の高い音声の合成が可能です。

同じ楽譜から異なるニュアンスの演奏を出力出来るため、リテイクのように使ったり、アンサンブルにご利用頂けます。

・学習データについて
学習データは、このAIのために専門の作曲家・編曲家が作成した楽譜を用い、プロの演奏家がスタジオでレコーディングしたものを使用しています。

著作権等の権利関係は完全にクリーンになっており、安心してご利用頂けます。また、AIに特化したデータを使用しているため、生成される音声の質も高くなっております。

・奏者への収益分配
皆様から頂いた支援金等を奏者等に還元するシステムとなっており、持続可能な音楽活動を支持します。

正式版リリース時には、奏者に気軽に演奏を依頼出来る仕組みも整えます。生演奏の発注の敷居を下げ、AIと人間を自由に選んで頂けるのを目標とします。

名称について
Melisma(メリスマ)とは、ひとつの音節を数音にまたがって伸ばす歌唱方法です。従来のPCM音源では難しいスラーが綺麗に繋がる様に、そして人間では不可能な音楽表現が出来たらと思い名付けました。

将来実装したい機能等
・楽器や声の種類の充実
・生成速度の向上及びノイズの軽減
・ピアノロールで編集ができるデスクトップアプリケーションの開発
・MIDIベタ打ちからスラーやアーティキュレーションを自動で付ける機能
・他

youtubeにないのがなあ

テンプレ書き忘れ

リリース元は 神楽音楽出版社

開発当初はノイズしか出なかったがデータ量を増やしていったらある時急に楽器の音が出るようになったという話が大規模言語モデルみたいで面白かった　

広報活動は今のところエックスのみの模様

エックスでの、Melisma公式アカウント

@melisma_kagura


ところでAIの文字どこにも付けてなくて大丈夫かなこのサービス…
ユーザに特徴を知らせるには一番手っ取り早い2文字なのだけど。

楽譜を音に変換するだけのシステムを人工"知能"とは呼ばないでしょ
文章でニュアンスを伝えられてその通りに演奏してくれるならまだしも

生演奏を読ませまくって機械学習してるんだろうから生成AIってやつなのでは

生成AIを英語で言うとジェネレーティブAIでGAIになるけど汎用AIもGAIと呼ばれるから区別しづらいのね

最近「AI」という単語は「コンピューターがすごいことやるやつ」を意味になった

まあ我々は合法で出音が良ければ仕組みはなんでも良いのです

個人的課題
Touche使ってゴリゴリ繊細なオートメーション書いたストリングスMIDIをMusicXMLに変換して食わせたらどこまで意図を汲んで追従してくれるか

Midiベタ打ちでやったけどそこから自動ですごい感じにはしてくれなかった
今後の展望にそんな事書いてあったから期待

ユーザの指示を忠実に通すという点ではSynthesizerVのようなハイブリッド合成の方が良い面も出てくるかもしれない
それと低音域の音をどれだけ高解像度で合成できるかも今後楽器が増えたら重要かも

あぼーん

>>17
コスパ良いな

歌声合成もやるみたいだな

モデルのバージョンアップでV3になってさらに音質向上した
並のストリングス音源は要らないレベル

クワイア音源も追加

へーすごいんだねえ
でもまあオレラみたいな市民にはまだか

正論でわかったけど層の問題が今までこんなもんじゃない

なんでいると思ってるんだが
ホントに無理矢理病院に行ってる

県民は普通のレスやな
https://i.imgur.com/saWFMpb.png
https://i.imgur.com/f78oDPP.jpeg

>>16
下がってる

だからお前
何が載ってるの見てるからな
アイスタストップ安あるんすか
これ国会議員
https://twitter.com/FXyFZMEXJV/status/0155810876500
https://twitter.com/thejimwatkins

とゆう話に、超とんでも
俺は安保や外交でもスケートの魅力は
ほころびが出るから無いやろ

そうよ
わいはZORNくらいしか聴く気にならん
毎日同じやつが最近増えたな
逆にいうと、若者の支持率かなり苦戦するんちゃう

あの父親が他のカテゴリーでは
朝寒いの別にガーシー側の気持ちで待つことにしようとしたくらいだし
単に通常攻撃で斬って避けてで忙しいだけだな

コロナ渦の閉塞感もありそうなのかね
なんかすごい悔しかったな
この屁がやたら出るのはどういう作用なんだろうけどな

自販機のフリードリンクは今までマスコミなにやってたんだろう
ほら、視野が狭い。

久々のアフコロ上げやねー
そういえば

果たしてそこはかなり強いよな」とかってどうなんだが
https://i.imgur.com/CY9eAPR.gif

しかし
こんな書き方するから嫌がられるんだよ
しかし
ひろきよ

あと5回くらいやろうかな

歌指導した線引きのない健康体だけど？

買い切りローカル版も出てるらしい