「Neutone」は、最新のAIモデルの利用を可能にするオーディオ・プラグインで、AIならではの革新的な音楽表現を生み出すことを目的とするプロジェクトです。
これまで、AIモデルを音楽制作に活用するには大きな技術的障壁がありました。新しいライブラリの登場などによりその敷居は次第に下がってきたものの、利用できるのはプログラミング経験があるごく一部の人に限られていました。
弊社が独自開発したオーディオ・プラグイン「Neutone」は、Digital Audio Workstation (DAW 音楽制作ソフトウェア) 上で動作し、深層学習を使った音響処理モデルをリアルタイムで駆動させることができます。プログラミングの知識を必要とせず、一般的な音楽制作のワークフローの中でAIを活用することが可能です。
アーティストやクリエーターにとって敷居の高かったAIモデルの活用が、この汎用的なプラグインによって可能となります。同様にAI研究者やエンジニアも、開発した最新のAIモデルを音楽家やサウンドクリエイターに共有し、フィードバックを得ることが容易になります。
研究者・エンジニア・アーティストが集まり、共創することで、AI音楽のコミュニティを育み、これまでにない革新的な音楽表現を生み出していくことを目指しています。
Performances
- 2022.12.8 | MUTEK.JP (Shibuya Stream Hall) - 2022.12.9 | Craft Alive with BIGYUKI (Daikanyama UNIT) - 2023.4.13 | NAMM Show with BIGYUKI (Anaheim Convention Center)
Links
- Neutoneプロジェクトウェブサイト - Neutoneモデル開発者向けSDK -「Neutone」Discordチャネル
Credits
Project Direction: Akira Shibata Concept / Tech Lead, Machine Learning: Nao Tokui Tech Lead, Plugin Front-end: Robin Jungers Back-end: Bogdan Teleaga Tech Lead, Plugin and Architecture: Andrew Fyfe Machine Learning: Christopher Mitcheltree Machine Learning: Naotake Masuda RAVE algorithm was developed by Antoine Caillon and Philippe Esling, STMS Laboratory (IRCAM, CNRS, Sorbonne University, Ministry of Culture and Communication) and licensed by IRCAM