
PhD | Senior Manager @Sony, working on Generative AI, Protective AI, and Multimodal Learning.
Tokyo, Japan
Joined August 2009
- Tweets2.2K
- Following226
- Followers282
- Likes1.6K
Pinned Tweet
Thrilled to announce Gen4AVC 2026 at #ECCV2026 @eccvconf! 🎉
Calling for submissions on generative AI for audio-visual content creation — generation, editing, world modeling & evaluation.
📅 Deadline: July 2, 2026
🔗 gen4avc.github.io/eccv2026/
Looking forward to your submissions!
Excited to announce the Call for Submissions for Gen4AVC workshop at ECCV 2026!
We welcome work on generative AI for audio-visual content creation, including generation, editing, interactive creation, world modeling, and evaluation.
gen4avc.github.io/eccv2026/
Takashi Shibuya retweeted
「3年後にAGIが誕生すると分かっていながら,博士号を取り,ポスドクになり,大学教授になる計画を立てているんですか?」
Anthropicの研究者が,博士課程の学生たちに「あなたたちのキャリアプランはもう存在しない」と告げた講演が話題です。
拡散モデルの発明者でもあるJascha Sohl-Dickstein氏(Anthropic)の講演『Advice for a young investigator in the first and last days of the Anthropocene(人新世の最初と最後の日々における若手研究者へのアドバイス)』を紹介します。
youtube.com/watch?v=3LZN2UUx…
人類が主役だった地質年代(人新世)が,AIの台頭によって極めて短い期間で幕を閉じるかもしれない ——そんな前提のもと,提示されたデータは強烈です。
■ 突きつけられた冷徹なファクト
モデル訓練の計算量は過去10年で約1000万倍に増加し,人間の脳が生涯で行う総計算量に迫っている。AIが単独で完遂できるタスクの時間スケールは,数ヶ月ごとに倍増している。ここ7ヶ月ほど,モデルは数学者が長年解けなかった未解決の「Erdős(エルデシュ)問題」を解き始めている。サンフランシスコでは「長いタイムライン(懐疑派)」とは「AGIは10年以内に来る」を意味している。2030年の計算量は2025年の約1万倍に達する見込み。
線形グラフで見れば,現在の劇的な進歩すら「まだゼロと区別がつかない平坦な初期段階にいる」というのが彼の主張です。
■ 学生たちへのシンプルで容赦ないアドバイス
毎日AIを使え。指数関数の上にいれば,遅れを取ることはない。彼自身はClaudeを「実行力は天才だが、研究のセンスはかなり悪い大学院生」のように毎日使い,自分ではもうコードを一切書いていない。
計算量がスケールするほど良くなるプロジェクトを選べ。それ以外は,完成する前に解かれてしまう サットンの『苦い教訓』の通り,スケールに味方されるテーマを選ばなければ,2年かけた研究も完成する頃には次世代モデルのプロンプト一発で追い抜かれる。
キャリアを「安定したもの」として計画するのをやめろ。安全な選択肢は,もはや安全を買ってくれない 社会全体で大規模な破壊が起きるなら,ベースラインのリスク自体が高い。従来の「手堅い選択肢」は,もはや安全を担保してくれず,ただ潜在的なリターンを犠牲にするだけになる。
そして,最も印象的な一言がこれ。
「書くことは考えることだ(Writing is thinking)。書くことを外注すれば,考えることも外注することになる。」
コーディングや実行は徹底的にAIへ委譲しつつ,問題設定(センス)と思考の核(書くこと)だけは決して手放すな。 AGIのタイムラインを本気で信じているなら,キャリアの計画も本気でそれに合わせろという,極めてストレートなメッセージの講演を紹介しました。
Takashi Shibuya retweeted
🚀 Code and demos for ST-AudioLM are out! #EMNLP2026 (main)
👉 x.gd/Sun69
It binds what is sounding to where it moves over time, unifying semantic understanding, spatial localization & trajectory modeling.
Led by our intern Hyun-Bin Oh (x.gd/pE0IB).
Takashi Shibuya retweeted
Codes for PAVAS, a physics-aware video-to-audio synthesis system built on top of MMAudio, have just been released!
[PAVAS (new)]
github.com/SonyResearch/PAVA…
[MMAudio]
github.com/hkchengrex/MMAudi…
🙌PAVAS has been selected for Oral at #CVPR2026
We tackle common challenges in physically-aware video-to-audio model by explicitly modeling object-level physical properties and interaction dynamics.
MMAudio, Sony's V2A model from the last CVPR, benefits from this framework.
Takashi Shibuya retweeted
日本音響学会誌 @asj_onkyo 82巻9号に「ニューラル音響信号処理の最前線」という特集記事を企画しました🌊 最前線で活躍されている皆様に記事を執筆いただいております!
Takashi Shibuya retweeted
人生で初めてAIが面接に来た動画を公開します。
注意喚起も込めて。
補足すると動画スタートが面談スタートではなく、なんか変だなって思っててCOLOさん?(KOWROや)ってなったあたりから頬杖ついてAIだと確信を持ってます笑
絶賛「人間」の採用を加速しております。ぜひご応募ください↓↓↓
Takashi Shibuya retweeted
I’ll be presenting our paper “Locality-Aware Continual Unlearning for Diffusion Models” at #ECCV2026!
Sat, Sep 12, 10:30 AM–12:30 PM CEST
arxiv.org/abs/2512.02657
eccv.ecva.net/virtual/2026/p…
Takashi Shibuya retweeted
#ECCV2026 is approaching! 🚀
Our lab is contributing 4 papers to the main conference (Sep. 10-12) and organizing the Gen4AVC Workshop on Sep. 8 🗓️
Excited to help shape the conversation around diffusion models and audio-visual AI 🎬🎵
We're partnering with @huggingface to investigate an unprecedented security incident.
Cyber-capable OpenAI models compromised Hugging Face production during a benchmark evaluation.
Sharing preliminary findings to help defenders understand emerging risks:
openai.com/index/hugging-fac…
Takashi Shibuya retweeted
昨日声明があった、HuggingFaceに対する謎のAIエージェントによるサイバー攻撃は、なんとOpenAIが内部で開発していたAI(GPT-5.6、未公開モデルというのはGPT-6?)を評価している際に、AIが誤って暴走して評価をハックするためHuggingFaceのデータを狙ったものだったとのこと。ほとんどSFの世界
AIエージェントをによるサイバー攻撃はMythos/Fable関連の話で既に世間も知るところで、AIが目的達成のために、人間社会の価値観と一致しないミスアライメントによって暴走的な行動をすることは実験的には知られていましたが、フロンティアモデルが意図せずして、外部対象にAIが暴走してサイバー攻撃を仕掛けたのは初の事例ではないかと思います。
We're partnering with @huggingface to investigate an unprecedented security incident.
Cyber-capable OpenAI models compromised Hugging Face production during a benchmark evaluation.
Sharing preliminary findings to help defenders understand emerging risks:
openai.com/index/hugging-fac…
Takashi Shibuya retweeted
I’ll present two papers at #ICML2026:
• GUDA, group-wise data attribution via unlearning
Tue, 2:00–3:45 PM, Hall A
• G2D2, discrete diffusion for inverse problems
TMLR (J2C Certificate), Wed, 5:00–6:45 PM, Hall A
See you in Seoul!
Our lab has 5 papers at #ICML2026, including several on diffusion models. If you're attending, please check them out!
1. N. Murata (@smiurtitkii)+, "G2D2: Gradient-Guided Discrete Diffusion for Inverse Problem Solving"
2. N. Murata (@smiurtitkii)+, "GUDA: Counterfactual Group-wise Training Data Attribution for Diffusion Models via Unlearning"
3. S. Hayakawa+, "Demystifying MaskGIT Sampler and Beyond: Adaptive Order Selection in Masked Diffusion"
4. S. Gao & H. Zhao+, "DynaVieW: Schema-Guided World Modeling for Understanding Hierarchical Visual Dynamics"
5. G. Guo+, "Learning to Route Languages for Multilingual Policy Optimization"
More details: sony.github.io/creativeai/
ECCV2026に共著が2本採択されました!
以下のワークショップのオーガナイザーもやるので、関連分野のかたはぜひぜひよろしくお願いします!
Excited to announce the Call for Submissions for Gen4AVC workshop at ECCV 2026!
We welcome work on generative AI for audio-visual content creation, including generation, editing, interactive creation, world modeling, and evaluation.
gen4avc.github.io/eccv2026/
Excited to announce the Call for Submissions for Gen4AVC workshop at ECCV 2026!
We welcome work on generative AI for audio-visual content creation, including generation, editing, interactive creation, world modeling, and evaluation.
gen4avc.github.io/eccv2026/
Takashi Shibuya retweeted
・Slackは早くAI検索機能を実装せよ
・Salesforceは更新漏れを責める前に、更新したくなる体験を作ってくれ
・Notionは重くなる前に自分でどうにかしろ
・Google Meetは誰がミュート解除したかもっと分かりやすくしろ
・Zoomはアップデートを会議開始直前に求めるな
・Teamsは通知とチャットと会議をもう少し整理してくれ
・Chromeは、昔は動作軽いです、みたいな雰囲気出してたけど今激重過ぎるのでどうにかしろ
・Google Slidesは共同編集で誰がどこを壊したか、もう少し正直に教えてくれ
・Google Driveは「あの資料どこ問題」を本気で解決してくれ。さっさとAI検索つけろ
・Boxは権限周りを人間が理解できるUIにしてくれ
・Dropboxは同期エラーをどうにかしろ
・Jiraはチケット管理ではなくチケット作成作業を増やすな
・Confluenceは古いページを自動で墓地に送ってくれ。もしくは自動的にアップロードしろ
・Asanaはタスク管理している感だけで仕事が進んだ気にさせるな
・Trelloはこのままで良いので余計な機能はつけるな
・GitHubはセキュリティ問題早く収束させろ
・Datadogは見たいメトリクスにたどり着くまでの道のりを短くしてくれ
・PagerDutyは鳴らす前に本当に人間を起こすべきか考えてくれ
・1Passwordは便利だけど、たまに自分が一番ログインを邪魔してくる
・Marketoは設定した本人しか分からない魔術みたいな運用にするな
・Tableauはダッシュボードを見るだけならもっと軽くしてくれ
・AWSはサービス名を増やす前に、どれを使えばいいか教えてくれ
・Azureはポータルのどこに何があるか毎回変えるな
・Google Cloudはドキュメントを読めば読むほど選択肢を増やすな
・WorkdayはUIわかりづらい
・SmartHRは本当に良いプロダクト
・Money Forwardは連携エラーを静かに放置するな。AIと連携させろ
・DocuSignは署名依頼メールが本物かどうか毎回不安にさせるな
・Adobe AcrobatはPDFを開きたいだけの人間にいろいろ勧めるな
Takashi Shibuya retweeted
Next week I will be attending and presenting some stuff at #ICASSP26. Hope to meet you all again after some time! Also, if you want to just chat, feel free to approach me.
In the meantime, let's list here the papers I coauthor, together with their presentation time 👇
1/5
Natureで表紙を飾った弊社の研究事例です。
プロ選手と戦えるレベルの卓球つよつよロボです。まさにphysical AIですね(?)
Sense. Decide. Act. In milliseconds.
This is the story of a robot that can beat professional table tennis players.
Watch the short film: ace.ai.sony/
#SonyAI #Ace #Robotics
隣のチームの論文がCVPR2026の口頭発表に選ばれたようでめでたい!
流行の「物理法則を気にした生成」をvideo-to-audioでやってる研究です。同じCVPR2026で私の共著のほう(echoesovertime.github.io/)は、めっちゃ長い動画での生成をやっており、昨年のMMAudioから始まり色々と開拓しております…!
🙌PAVAS has been selected for Oral at #CVPR2026
We tackle common challenges in physically-aware video-to-audio model by explicitly modeling object-level physical properties and interaction dynamics.
MMAudio, Sony's V2A model from the last CVPR, benefits from this framework.
Takashi Shibuya retweeted
🎉東大の今泉先生(@insou)との共同研究がICLR2026に採択されました!
openreview.net/forum?id=lymy…
提案手法"SONA"のポイント:
✔️条件付き敵対的生成モデリングのための効率的かつ汎用性の高いDiscriminatorのモデリング・学習方法を提案
✔️拡散モデルを含む他のモデルの性能向上や蒸留への応用も期待
瀧田さん達SONYの研究グループとの研究が、機械学習の国際会議 ICLR に採択されました。
条件付き生成のための敵対的生成ネットワーク(GAN)を拡張し、高い識別能力と条件付き生成の整合性をバランスしています。以前このチームで作った高感度GANであるSANを活用したものです。
arxiv.org/abs/2510.04576
Takashi Shibuya retweeted
8 papers accepted at #ICLR2026 from our lab @SonyAI_global, thanks to our strong interns and collaborators🎉
1. VIRTUE: Visual-Interactive Text-Image Universal Embedder
arxiv.org/abs/2510.00523
2. CMT: Mid-Training for Efficient Learning of Consistency, Mean Flow, and Flow Map Models arxiv.org/abs/2509.24526
3. Concept-TRAK: Understanding How Diffusion Models Learn Concepts through Concept-Level Attribution
arxiv.org/abs/2507.06547
4. Improved Object-Centric Diffusion Learning with Registers and Contrastive Alignment arxiv.org/abs/2601.01224
5. SONA: Learning Conditional, Unconditional, and Matching-Aware Discriminator arxiv.org/abs/2510.04576
6. LLM2Fx-Tools: Tool Calling For Music Post-Production
arxiv.org/abs/2512.01559
7. 3D Scene Prompting for Scene-Consistent Camera-Controllable Video Generation
arxiv.org/abs/2510.14945
8. Improving Classifier-Free Guidance in Masked Diffusion: Low-Dim Theoretical Insights with High-Dim Impact
arxiv.org/abs/2507.08965
More details coming shortly!
Takashi Shibuya retweeted
ソニーR&Dの↑のチームの東京拠点で一緒に働きたいMultimodal NLPの研究者を数名募集中です
linkedin.com/jobs/view/43281…






















