株式会社ソニーコンピュータサイエンス研究所(以下、ソニーCSL)は、AIアシスト楽曲制作アプリ「Flow Machines Mobile」(以下、FM Mobile)の提供を2021年9月9日より日本と北米で開始しました。
ソニーCSLではAIを主軸にした研究テーマの一つとして、2012年よりアーティストのクリエイティビティを拡張する「Flow Machines(以下、FM)プロジェクト」を展開しています。2019年にはデジタルオーディオワークステーション(以下、DAW)上で機能するプラグイン型のツールである「Flow Machines Professional」を開発し、ソニーグループ内で活用することで、国内外で数多くの楽曲が制作されてきました。この度、新開発したiOS向けモバイルアプリFM Mobileは、各種DAWプラグインとも連携して機能するクラウド型の楽曲制作用AIツールとなります。
Flow Machinesウェブサイト:https://www.flow-machines.com/
FM MobileダウンロードURL:
https://apps.apple.com/jp/app/flow-machines/id1495767411?itsct=apps_box_link&itscg=30200
(FM Mobileは今後、欧州各国においても提供予定です)
FM Mobileの特長
FM MobileはAIを活用し、クリエイターの望むスタイルに合わせたメロディー、コード、ベースラインを提案します。曲のスタイルを表現するため「スタイルパレット」という独自の概念を採用しています。スタイルパレットは音楽データを解析した機械学習モデルで、ソニーCSLが開発した各種プリセットの他、アプリ内で作曲者自身が新たにオリジナルのスタイルパレットを作成することも可能です。自分の音楽スタイルを残しながらも、新たな発想につながるメロディーをAIに生成させることができます。
FM Mobileの画面(左)compose画面(右)スタイルパレット選択画面
FM Mobileによる楽曲制作手順
FM Mobileでは作りたい曲のジャンルとコードに合わせてスタイルパレットを選択し、「compose」ボタンを押すと、選択したコード進行に合わせてAIにより8小節ごとにメロディーが生成されます。音符の長さやメロディーの複雑さを調整するパラメータを変更することでより意図に沿った提案をAIから受けることができます。気に入ったメロディーを保存し、FM Proを使ってDAWに取り込むことができます。なおFM MobileのデータはMIDIデータのため、iPad上で気に入ったメロディーをApple の楽曲制作ソフトウェア「GarageBand」に取り込み、素材としてそのまま使うことも可能です。
Flow Machineを使った楽曲
本アプリのリリースに合わせて公開したFMのブランディングムービーでは音楽家 江﨑文武(WONK/millennium parade)がFMを用いて書き下ろした楽曲Obscura (feat. HANA)を使用しています。また、本楽曲には、注目を集める15歳のシンガー HANAがボーカリストとして参加しました。同時に公開したチュートリアルムービーでは江﨑氏による楽曲の制作過程を公開しています。
ブランディングムービー:https://youtu.be/6nPLemyUYUk
チュートリアルムービー:https://youtu.be/8D_9RuUN72k
そしてアーティストQiezi MaboによるFMを使った新曲"Midnight Calling" が配信リリースされました。ソニーCSLのYouTubeではQiezi Mabo氏へのFMに関するインタビュービデオ"Qiezi Mabo meets Flow Machines"を公開しています。
Qiezi Mabo meets Flow Machines:https://youtu.be/P9MxZGCYuKc
Qiezi Mabo - "Midnight Calling" Music Video:https://www.youtube.com/watch?v=pmQfjib5ATQ
オンラインイベント「UNLOCK with Sony」開催。Flow Machinesの登場は9月23日(木)
ソニーグループ株式会社(以下、ソニー)は、2021年9月23日(木) ~ 26日(日)の4日間、ソニーのオンラインプラットフォーム「ソニースクエア」にて、未来共創型イベント「UNLOCK with Sony」(アンロック・ウィズ・ソニー)をオンライン開催します。開催1日目には「作曲家とAIの共創 Flow Machines」と題して、若手クリエイターの楽曲制作過程を紹介し、音楽制作の未来を語るトークセッションを開催します。また、一般公募する「FM Pro」で制作された楽曲について、音楽プロデューサーによる講評(※1)を公開いたします。
※1:講評される楽曲は一般公募から選出された一部のものとなります。
イベント詳細:https://www.sony.com/ja/SonyInfo/News/Press/202109/21-046/
・Apple、iOS、GarageBandはApple Inc.の商標または登録商標です。
・Flow Machinesはソニーコンピュータサイエンス研究所の商標です。
Tokyo, Japan - Sony Computer Science Laboratories, Inc. (Hereinafter referred to as Sony CSL) announced today the launch of an AI-assisted music production app, Flow Machines Mobile (FM Mobile) in Japan and the United States.
To expand the creativity of music makers with AI, Sony CSL has been conducting Flow Machines(FM) project since 2012. In 2019, Sony CSL launched Flow Machines Professional (FM Pro), a plugin for use in a digital audio workstation (DAW). This technology has been used within the Sony Group, both in Japan and internationally, to produce numerous pieces of music. FM Mobile, the new mobile application for iOS, is a cloud-based AI music production tool compatible with a wide range of DAW plugins.
Flow Machines website:https://www.flow-machines.com/
Download FM Mobile:
https://apps.apple.com/us/app/flow-machines/id1495767411?ign-itsct=apps_box_link&ign-itscg=30200
(FM mobile is also to be released in Europe.)
FM Mobile Features
FM Mobile is an app that assists the music prodution process, an AI that suggests melodies, chords and basslines in the creator's chosen style. To bring that style to life, FM Mobile features a unique concept called Style Palette, which includes a machine learning model that analyzes musical data. You can choose from the various preset palettes created by Sony CSL, or create your own original Style Palette right in the app. This makes the AI to genereate melodies that inspire new ideas, while preserving your own distinct style.
Image of FM Mobile (Left) Compose mode (Right) Style Palette selecting screen
How FM Mobile works
In the FM Mobile app, users select a Style Palette that matches the genre and the chord progession of the song they want to create. When they press the compose button, and the AI will generate 8-bar melodies according to the selected chord progression. There are parameters such as note duration and melodic complexity which allows users to have proposals from AI matching their intention. Users can save their favorite melodies and import them to their DAW using FM Pro. Because FM Mobile data is MIDI data, if they have iPads, they can import those favorite melodies right into Apple's GarageBand.
Music Made with Flow Machines
Along with the release of FM Mobile, Sony CSL released a branding movie of FM that features the song Obscura (feat. HANA), written by Ayatake Ezaki (musician/composer) using FM. Promising young singer HANA participated in this song as a vocalist. Together with this a tutorial movie was released which walks you through the process of how this song was created.
Branding movie:https://youtu.be/6nPLemyUYUk
Tutorial movie:https://www.youtube.com/watch?v=kM5qVN57s2w
In addition, artist Qiezi Mabo has released "Midnight Calling," a new song using FM from Sony Music Labels Inc. "Qiezi Mabo meets Flow Machines," an interview video with Qiezi Mabo about FM, can be found on Sony CSL’s YouTube page.
Qiezi Mabo meets Flow Machines:https://youtu.be/IVlT26fDns8
Qiezi Mabo - "Midnight Calling" Music Video:https://www.youtube.com/watch?v=pmQfjib5ATQ
UNLOCK with Sony Online Event Coming Soon—Flow Machines On Stage 9/23 (Thu)
Sony Group Corporation (hereafter, Sony) will hold a four-day online event "UNLOCK with Sony" from September 23 (Thu) to September 26 (Sun), 2021 on its Sony Square online platform. On the first day, a series called "AI × Music Producer : Augmentation of Creativity through Music Production" which features a panel of creators using FM and a feedback session from a professional music producer for the music created by the entrants using Flow Machines.
*The event will be held in Japanese
Event Details:https://square.sony.com/UNLOCKwithSony
・Apple, iOS, and GarageBand are registered trademarks of Apple Inc.
・Flow Machines is a trademark of Sony CSL.