Yoshiyuki Kobayashi(Frieve-A) retweeted
Replying to @frievea
早速カスタム試しました。尿漏れしそうな歓喜、スマホでこんなことが出来るとは。もっと使い慣れてクッソ頭悪いレイアウト作成して、タブレット車載して遊びたいと思います。これだけカスタムに幅できると、他の方のカスタム共有も欲しくなったりする!
Yoshiyuki Kobayashi(Frieve-A) retweeted
ソニーがYouTubeに無料公開している、生成モデルの講義動画(全14回)。GANやVAEからDiffusion modelまで丁寧に解説してくれる。
【Deep Learning研修(発展)】
データ生成・変換のための機械学習
youtube.com/playlist?list=PL…
Yoshiyuki Kobayashi(Frieve-A) retweeted
Frieve-Aさんが開発された、仮想的な倍音から音のハーモニーを可視化するツール「Harmony Visualizer」を参考に(少しアレンジを加えさせて頂き)ブラウザからMIDIファイルをアップロードして可視化できるようにしてみました。
openchord.pages.dev/harmony-…
最近プライベートは音楽の話題ばっかりですが、ちょっと前に音楽理論関連の動画でも紹介した倍音の話をさらに分かりやすく可視化するデスクトップアプリを作ってみました。Pythonで作ったのでどこでも動きます。
解説動画は明日にでも撮るとしよう…。。
github.com/Frieve-A/harmony_…
Yoshiyuki Kobayashi(Frieve-A) retweeted
新しいお仕事です。超爆速で動画に音をつける手法で、MMAudioとは異なりリアルタイムオンライン処理を目指しています。流行りの世界モデルへの適用を想定して、ゲーム画面に音をつけた結果もデモページで公開。連続表現での自己回帰を使ってるので、興味があればぜひ論文もチェックしてみてください~
🔊Our new work: SoundReactor, pushing V2A generation toward “Neural Sound Engine”!
We tackle “frame-level online” V2A, i.e., without accessing any future video frames
✅Simple design
✅Full-band stereo with AV sync
✅Low frame-level latency on 30FPS
🎧koichi-saito-sony.github.io/…
Yoshiyuki Kobayashi(Frieve-A) retweeted
ソニーグループ株式会社 | 早稲田大学に「ソニーグループ寄附講座 クリエイティブエンタテイメント学」を設置
開講記念シンポジウムを9月2日に開催
sony.com/ja/SonyInfo/News/Pr…
Yoshiyuki Kobayashi(Frieve-A) retweeted
初心者なのでちゃっぴー君に色々聞いてみました。
chatgpt.com/share/683eef35-1…
前回のリケーブルによる音質変化の説明を補足しつつ、オカルトオーディオ否定の歴史やオカルト脳についての研究の紹介を通じ、オカルトオーディオをまとめて一刀両断する動画公開しました。ほんとこの界隈に触れるのは無益すぎるので、できることならこれで最後にしたいですw
youtube.com/watch?v=aS39wNDK…
Yoshiyuki Kobayashi(Frieve-A) retweeted
(後で英語版のポストもするので拡散していただけるとうれしいです)
ICCV2025にて動画・音生成に関するワークショップ(Gen4AVC)を開催します!
この分野にご興味のある方はぜひご投稿・ご参加ください!
gen4avc.github.io/
Yoshiyuki Kobayashi(Frieve-A) retweeted
EffeTune v1.51でPEQ設定のインポート対応!が来たので早速試す。 autoeq.app/ でイヤホンやヘッドホンとターゲットカーブを選択してEqualizerAPO ParametricEqで設定を出力。あとはEffeTuneのPEQからインポートでいけました😀久々に有線イヤホンを繋いでみよう…
EffeTune v1.51公開しました。8チャンネルのレベルメーター、ボリューム、タイミング調整とソロミュート操作をまとめて行うことができるマルチチャンネルMultiChannel Panel、右上のボタンからAutoEQのイコライザ設定を直接Importできる15Band PEQが追加になっています。これでヘッドホンイヤホンも補正し放題!
■ デスクトップアプリ版ダウンロードページ
github.com/Frieve-A/effetune…
■ Web版
frieve-a.github.io/effetune/…
Yoshiyuki Kobayashi(Frieve-A) retweeted
先日、Google Geminiが「音楽を聴く能力を得た」とポストしたばかりですが、今度は ChatGPT o3 も同様の機能を搭載!
キー & スケール、コード進行、テンポ & グルーヴ感、ミキシング状態なども分析してくれて、用途や似た雰囲気のアーティストなども調べてくれますよ😃
note.com/old_pgmrs_will/n/n8…
Yoshiyuki Kobayashi(Frieve-A) retweeted
Neural Network Consoleがnnabla.orgからもダウンロードできるようになりました!
pytorchやtransformersも利用できるWindows版の他に、OSSで公開されているDesktop版のバイナリもダウンロードできます。
nnabla.org/ja/nnc/
Yoshiyuki Kobayashi(Frieve-A) retweeted
Introducing Claude 3.7 Sonnet: our most intelligent model to date. It's a hybrid reasoning model, producing near-instant responses or extended, step-by-step thinking.
One model, two ways to think.
We’re also releasing an agentic coding tool: Claude Code.
Yoshiyuki Kobayashi(Frieve-A) retweeted
ありがたいことにいろんなところでバズり散らかしているMMAudio(動画からの音生成)ですが、preprintを公開したので、簡単に中身を紹介します。
既存の(openな)モデルを大きく超える性能を達成し、Movie Gen Audioと比べても遜色ないです(なお、モデルサイズは1/10以下、学習データは1/100以下)
Yoshiyuki Kobayashi(Frieve-A) retweeted
YouTube nnabla channelに動画が公開されました!
動画に沿った音を生成する技術、音に沿った動画を生成する技術、音と動画両方を生成する技術の3つのパターンを紹介します。
【ソニー社内講演】音と動画の両方を扱う生成モデル(2024年研究動向)
youtu.be/XUOQfzxxTE4
#nnabla_youtube
Yoshiyuki Kobayashi(Frieve-A) retweeted
nnablaRL v0.16.0がリリースされました!
IQLやOption-Critic Architectureの再現実装が追加されましたよ!その他、pyproject.tomlへの移行やblackのサポートもしました。
github.com/sony/nnabla-rl/re…
Yoshiyuki Kobayashi(Frieve-A) retweeted
研修動画を公開しました!
本研修動画のラストは「マルチモーダルへの展開」です。応用例としてロボティクス分野や強化学習におけるTransformerの利用例も紹介しています。
【DeepLearning研修】Transfomerの基礎と応用 --第4回 マルチモーダルへの展開
youtu.be/av1IAx0nzvc
#nnabla_youtube
Yoshiyuki Kobayashi(Frieve-A) retweeted
研修動画を公開しました!
第3回目となる本日は「Transformerの画像での応用」です。ViTをはじめとする、画像分野におけるTransformerの基礎から応用が説明されています。
【DeepLearning研修】Transformerの基礎と応用 --第3回 Transformerの画像での応用
youtu.be/rkuayDInyF0?si=iquV…
#nnabla-youtube
Yoshiyuki Kobayashi(Frieve-A) retweeted
昨日に続き、研修動画を公開しました!
第2回目となる本日は「Transformerの言語での応用」です。大規模言語モデルの事前学習と事後学習を中心に説明しています。
【DeepLearning研修】Transformerの基礎と応用 -- 第2回 Transformerの言語での応用
youtu.be/ZjB9iulW9G0?si=mQHl…
#nnabla_youtube
Yoshiyuki Kobayashi(Frieve-A) retweeted
同僚が作成した新しい研修動画シリーズの公開が始まりました。テーマは『Transformerの基礎と応用』ということで、今更聞けないTransformerの基礎の基礎から、画像やマルチモーダルへの幅広い応用まで、全4回(計2時間ぐらい)で学べるという噂です。冬休みにでもぜひ~
youtu.be/Ry_AeJzMzU0
Yoshiyuki Kobayashi(Frieve-A) retweeted
ディープラーニングの最新論文にアクセスするなら、SONYの「nnabla」チャンネルがおすすめ。
最新のAI論文を、動画+スライドという最もリッチな形式でキャッチアップできるのがありがたい。単に解説する、というよりも制作者の感想が技術的な立場から語られていて、これだけでも勉強になる。
「【AI論文解説】拡散モデルと自己回帰型モデル」を見ましたが、図解が多く+数式が少なめなので、初学者含め幅広い層におすすめできます。
あと猫の画像も多くて、非常に良い。
youtube.com/watch?v=3UdMJwVm…
































