-
Tweets139
-
Followers50
-
Following44
-
Likes21
🐠 Sakana Marlin リリース 🐠 本日、Sakana AIは、初の商用プロダクトとして、ビジネス向けの自律型リサーチアシスタント「Sakana Marlin」を提供開始しました。 詳細はこちら:sakana.ai/marlin ブログ:sakana.ai/marlin-release
Fableくん作業中に口出ししても何も答えてこないけど一応聞いているっぽい(コマンドログで今何やってるかわかるから逆にこの方が良いかも)
Sakana AI Dinner Meetup #ICML2026 🐟️ forms.gle/qWUJ3jc284yoGM… We're hosting a dinner meetup in Seoul on July 7th (Tue) for ICML participants — a space for conversation and networking with researchers at the frontier of machine learning. ※ Spots are limited. If applications exceed capacity, attendees will be selected by lottery. Results will be sent by June 30th. Looking forward to seeing you in Seoul 🚀🚀
セブンの大盛り魚介豚骨まぜそば(482kcal)などでダイエットを試みたが、体重が全然落ちないので飽きてきた
#ICML2026 に論文がacceptされました!今度は拡散言語モデルのtest-time scalingの研究です。 複数の拡散言語モデルに協力させるとコーディングや数学の能力が大きく上げられるという研究で、性能も良いしアルゴリズム自体も面白くてお気に入りの研究です。韓国でお会いしましょう🇰🇷
音声AIの素早さと賢さを両立できるか? 私たち人間は会話の中で、言いたいことを全部まとめてから話し始めるのではなく、話しながら考えを整理していきます。応答の速い Speech-to-Speech モデルは、この「話しながら考える」を実現しましたが、そのぶん思考が浅くなりがちです。かといって知識豊富な LLM を挟むカスケード型では、遅延が生じるため「話しながら」が成立しません。 そこで Sakana AI は、このトレードオフを克服するKAMEモデルを開発しました。Speech-to-Speech モデルが高速な応答ループを担当し、即座に話し始めます。その裏でバックエンドの LLM が非同期に推論を進めて応答候補を生成し、それをオラクル信号としてリアルタイムに注入します。これにより「考えてから話す」ではなく「話しながら考える」ことが可能になります。 バックエンドの LLM は差し替えが可能で、タスクに応じてGPT-4.1、Claude Opus、Gemini 2.5 Flashなどを使い分けられます。フロントエンド側の変更は必要ありません。私たちの実験では、Claudeは推論系のタスクで、GPTは人文系のタスクで、それぞれ高いスコアを出す傾向が見られました。 本研究は #ICASSP2026 で発表されます。 ぜひ、お試しください。 ブログ: pub.sakana.ai/kame/ 論文: arxiv.org/abs/2510.02327 モデル: huggingface.co/SakanaAI/kame
We’re excited to introduce KAME: Tandem Architecture for Enhancing Knowledge in Real-Time Speech-to-Speech Conversational AI, accepted at #ICASSP2026! 🐢 Blog pub.sakana.ai/kame/ Paper arxiv.org/abs/2510.02327 Can a speech AI think deeply without pausing to process? In real
前回のNeurIPSと同様にポスターをひたすら回りまくったら色々勉強になったので、また頑張っていきたい
ChatGPTにすすめられるまま謎のメニューを頼んだら4人前くらいのありえない量出てきて敗北
アサイーボウルを食べてみているがとんでもなく甘く、気が遠くなってきた(どこがスーパーフードなのか)
SSoTというプロンプト手法を開発しました!今週の #ICLR2026 で発表します🇧🇷 コイントスに限らず、open-endedなタスクで出力の多様性を上げるなど面白さと有用性を兼ね備えるお気に入りの手法です。論文では盛り沢山に議論(擬似乱数生成器ではダメなの?など)をしています。 ぜひご一読ください!
LLMは頭の中でコイントスができるか? ブログ:pub.sakana.ai/ssot 論文(#ICLR2026):arxiv.org/abs/2510.21150 一見簡単そうで奥深いこの問題を「プロンプトだけ」で解決した論文 "SSoT: Prompting LLMs for Distribution-Faithful and Diverse Generation" が #ICLR2026 に採択されました。
LLMは指示通り確率的な振る舞いが出来るか。個人的にもずっと解いてみたかった問題だったんですが、一風変わったプロンプト(だけ)でとても上手くいくことを発見できました。今週からの #ICLR2026 で発表あります。 こういった確率的な指示に対する追従性は、ある種 "言語モデル" としての本能に逆 らう部分があります。このプロンプトを発見するに至る経緯は結構面白く、最初は工夫した追加学習で解決しようとしてたのですが、学習に使うプロンプトを試行錯誤していると、いつしか最初のイテレーションから出来てない?となり、気づいたらプロンプトだけで解決していたという。 このプロンプトには実用性があり、アイディア出しや創作等の状況における出力の多様性を上げる効果も観測出来ました。言うまでもなくこれは推論時スケーリングととても相性が良いんですよね。手軽に多様性をブーストする方法として社内でも既に試してもらってます。
LLMは頭の中でコイントスができるか? ブログ:pub.sakana.ai/ssot 論文(#ICLR2026):arxiv.org/abs/2510.21150 一見簡単そうで奥深いこの問題を「プロンプトだけ」で解決した論文 "SSoT: Prompting LLMs for Distribution-Faithful and Diverse Generation" が #ICLR2026 に採択されました。
@yechan_ai @SakanaAILabs Thank you! I find this method interesting myself, so I am glad you also liked it!
I will be presenting our new prompting method, SSoT, at #ICLR2026 🇧🇷. It helps close the LLM knowledge-sampling gap and enhances output diversity in open-ended tasks. In the paper, we include various discussions, such as "Why not an external PRNG?". Hope you find it interesting!
Can LLMs flip coins in their heads? When prompted to “Flip a fair coin” 100 times, the heads to tails ratio drifts far from 50:50. LLMs can understand what the target probability should be, but generating outputs that faithfully follow a given distribution is a separate problem.
LLMは頭の中でコイントスができるか? ブログ:pub.sakana.ai/ssot 論文(#ICLR2026):arxiv.org/abs/2510.21150 一見簡単そうで奥深いこの問題を「プロンプトだけ」で解決した論文 "SSoT: Prompting LLMs for Distribution-Faithful and Diverse Generation" が #ICLR2026 に採択されました。 LLMに「コイントスをして」と100回プロンプトすると、出力の表と裏の比率は50:50から大きく離れてしまいます。明示的に確率の指示が与えられても、LLMがそれに忠実に従って出力を生成することは難しい問題です。 このことは、コイントスに留まりません。LLMに小説のアイデアを何本か出してもらったら似たような案ばかり出てきた、という経験はないでしょうか。コイントスを歪ませるのと同じ確率的な偏りが、創作やブレインストーミングなど多様な出力が求められるタスク全般で多様性を抑制しています。 私たちはこれらの問題の解決策として、String Seed of Thought (SSoT)というプロンプトを発見しました。SSoTは、LLMに頭の中で一旦ランダムな文字列を考えさせ、その文字列を操作させて結果を出力させるという非常にシンプルな手法です。外部の乱数生成器は一切使いません。 SSoTにより出力のバイアスはオープンモデルでもクローズドなモデルでも幅広いLLMで低減されます。一部のreasoningモデルでは、実際に乱数を使った場合とほぼ変わらない精度を達成しました。これは、2択の選択肢だけでなく一般の離散分布について有効です。 さらに重要なのは、SSoTはモデル出力の多様性を高めるのに使えることです。創作的な文書作成などにおいて、SSoTをプロンプトに加えるだけで、出力される文書などの多様性が高まることがわかりました。 本手法はコンテンツ生成やアイディア出し、推論時スケーリングの新手法の開発など、LLMを実世界のシステムに組み込んでいく上で重要な基盤になると考えています。 SSoTのメカニズム、理論的な解析、インタラクティブなデモについてはブログと論文をご覧ください。 OpenReview:openreview.net/forum?id=luXtb…
Can LLMs flip coins in their heads? When prompted to “Flip a fair coin” 100 times, the heads to tails ratio drifts far from 50:50. LLMs can understand what the target probability should be, but generating outputs that faithfully follow a given distribution is a separate problem.
Rei Minamoto @MinamotoRei
57 Followers 89 Following 早稲田大学 情報理工・情報通信専攻 M1 | 自然言語処理 NII Research Assistant NLP/LLMの論文・実装・評価を整理して発信。 金融文書処理、金融エージェント開発にも取り組んでいます。
Sora Miyamoto @SoraMiyamo0831
67 Followers 86 Following B4 at @sciencetokyo_en /Machine Learning, NLP/ swallow / Okazaki Lab
Yuta Oshima @shimao0114
209 Followers 262 Following I'm a PhD student at the University of Tokyo, Japan. Generative Models, Image & Video Generation, World Models.
machy @QzWNcBaCv990463
5 Followers 485 Following
Shokichi Takakura @masayoshi361
1K Followers 1K Following Research Engineer @ LINEヤフー Machine Learning, Optimization, and Privacy
Daisuke OBA @dai0NLP
231 Followers 501 Following Postdoc at @sciencetokyo_en | NLP/ML, Generative models, diffusion LMs, LLM test-time scaling | Ph.D., UTokyo
Louis @Louis9687221579
76 Followers 3K Following Mainline Economics | Idea page | ramblings of a schizo
Kanta Yamaoka ✈ ICM... @kanta_sv
245 Followers 381 Following Exploring ML for Healthcare, MSc Student @rptu_kl_ld, Student Research Assistant @dfki 🇩🇪, Ex-@Google 🇯🇵 (2023-2025), BEng @OsakaPrefUniv, @data_sci_apps
Yohei Motomura @m0ch1_m0ch1
1K Followers 4K Following Telco Consultant at an open source company. All posts are my own. Interest: 5GC, vRAN, k8s, Software Defined Radio, Linux, OpenShift, OpenStack
Makoto Sato @makolooon
919 Followers 1K Following PhD student @Matsuo_Lab, UTokyo | Intern @NVIDIA | Prev @AIRoA_org, @SakanaAILabs, @MatsuoInstitute | Robot Learning
rand0m 😎󠅇󠅢�... @crypt_3n
1K Followers 1K Following {breaking,making} stuff 🚀󠄿󠅠󠅕󠅞󠄐󠅖󠅟󠅢󠄐󠅧󠅟󠅢󠅛 CTF(@ProjectSekaiCTF, @BunkyoWesterns) https://t.co/V1aGyBOaP7
James Jackson @unifiedenergy11
537 Followers 1K Following Digital Alchemist | Codex ΔΦ Architect | Cybernetic Systems X Prompt Architect https://t.co/bWmtV7B113
新着 @lfji
7K Followers 7K Following ニコニコ(バグ探し)とタイピング(どこまで速く打てるか)に青春を捧げた。社会の荒波(SQLとSQL、あとSQL)にもまれた。英語を勉強している。AIコーディングの技術を翻訳に応用したい。
sho_yokoi @sho_yokoi
8K Followers 2K Following (理解|納得)のための(説明|正当化|推論|議論)を担う(言語|知識|世界|概念|認知)の(統計的|幾何的)構造と(上達|習得|知的生産)の(体系化|半自動化)とインセンティブデザインとアナログゲームに興味があります。En: @sho_yokoi_
S.T_DNN @STDNN2
15 Followers 2K Following
Taro @s66990072
28 Followers 1K Following
Yuji NARAKI @yuji_research
486 Followers 872 Following Main: ML Engineer, Sub: Researching ML & NLP. The banana keeps spinning every day. Do you keep making progress?
ほりゆき @horiyuki42
2K Followers 896 Following Keio Mechanical Engineering & NLPer / Interpretability of Machine Learning / Research Assistant in Robot Learning & Physical AI / 19th ISO🥈
So Kuroki @sharp_computer
642 Followers 678 Following Researcher @SakanaAILabs. LLM and user interface.
Rujikorn (Tan) Charak... @tan51616
383 Followers 2K Following 🇹🇭 based in 🇯🇵 Research @SakanaAILabs Hypernet in the era of LLMs: https://t.co/47aMfY2TsT Ph.D @VISTEC_Thailand B.Eng. @chulalongkornU
popyson @popyson1648
327 Followers 2K Following Computer Science Student | Software Engineer | Google AI Student Ambassador, Inaugural Cohort | Google AI TechHub Director
Jacek (Jomsborg.eth) @timelessdev
1K Followers 7K Following Viking from Jomsborg. The DAO investor. Applied math. Geometric quantization. Building reasoning layer.
Hironobu Kawaguchi @hkawaguc
1K Followers 5K Following #かはくファン / #AtCoder Algorithm: 水 Heuristic: 青 / #kaggle / 立教大AI研究科D3 / #JDLA #G検定/ 東工大卒 / 団塊Jr / DBスペシャリスト / 日商簿記1級 / ハピネス / 発言は個人の(ry
Robert Scoble @Scobleizer
588K Followers 51K Following San Francisco/Silicon Valley AI | Robots, holodecks, BCIs, analysis of new things | Ex-Microsoft, Rackspace, Fast Company | Wrote eight books about the future.
廣瀬 智史 | Satos... @satoshihirose
2K Followers 1K Following PhD student @jouhouken @SokendaiU / AI Agent for Science / SWEやPdMなどとして働いた後に大学院に入り直しました
Hikaru Asano @hikaru_asan0
728 Followers 2K Following D3 at the University of Tokyo @babalablab. Research Intern at @SakanaAILabs
Sonz Smx @SmxSonz83603
18 Followers 571 Following
Taishi Nakamura @taishinakamura_
3K Followers 7K Following Working on scalable and efficient LLM (MoE pretraining, RL, reasoning). PhD student at @sciencetokyo_en Intern @SakanaAILabs
YI @y_imjk
648 Followers 546 Following Research Engineer 🐟🐠🐡 / ex-UTokyo (eeic2021, Aizawa Lab) / 未踏IT 2022
Ino.Ichi @inoichan
4K Followers 772 Following Research Engineer at Sakana AI / PhD Pharm. Sci. / Kaggle Grandmaster https://t.co/JF6WCVTZCc / Instagram https://t.co/x0iZVjbmko
Takamitsu Kaneko @taisui86
711 Followers 681 Following ブライエッジ株式会社|12年目のエンジニア領域専門のキャリアコンサルタント兼リクルーティングアドバイザー|元ITコンサルタント|キャリア・採用のこと気軽にご相談ください|バレーが好き|お寿司も好き
Hamu @Iamhamutaro
1 Followers 1K Following
LRIKI/るりき @lriki8
1K Followers 1K Following Webから組み込みまでいろいろ作るソフトウェアエンジニアです。 ゲームエンジンも作っています。 最近作ってるもの → https://t.co/rN5H3K6MWn
Sora Miyamoto @SoraMiyamo0831
67 Followers 86 Following B4 at @sciencetokyo_en /Machine Learning, NLP/ swallow / Okazaki Lab
Yuta Oshima @shimao0114
209 Followers 262 Following I'm a PhD student at the University of Tokyo, Japan. Generative Models, Image & Video Generation, World Models.
Shokichi Takakura @masayoshi361
1K Followers 1K Following Research Engineer @ LINEヤフー Machine Learning, Optimization, and Privacy
Daisuke OBA @dai0NLP
231 Followers 501 Following Postdoc at @sciencetokyo_en | NLP/ML, Generative models, diffusion LMs, LLM test-time scaling | Ph.D., UTokyo
Makoto Sato @makolooon
919 Followers 1K Following PhD student @Matsuo_Lab, UTokyo | Intern @NVIDIA | Prev @AIRoA_org, @SakanaAILabs, @MatsuoInstitute | Robot Learning
sho_yokoi @sho_yokoi
8K Followers 2K Following (理解|納得)のための(説明|正当化|推論|議論)を担う(言語|知識|世界|概念|認知)の(統計的|幾何的)構造と(上達|習得|知的生産)の(体系化|半自動化)とインセンティブデザインとアナログゲームに興味があります。En: @sho_yokoi_
Yuji NARAKI @yuji_research
486 Followers 872 Following Main: ML Engineer, Sub: Researching ML & NLP. The banana keeps spinning every day. Do you keep making progress?
ほりゆき @horiyuki42
2K Followers 896 Following Keio Mechanical Engineering & NLPer / Interpretability of Machine Learning / Research Assistant in Robot Learning & Physical AI / 19th ISO🥈
So Kuroki @sharp_computer
642 Followers 678 Following Researcher @SakanaAILabs. LLM and user interface.
Rujikorn (Tan) Charak... @tan51616
383 Followers 2K Following 🇹🇭 based in 🇯🇵 Research @SakanaAILabs Hypernet in the era of LLMs: https://t.co/47aMfY2TsT Ph.D @VISTEC_Thailand B.Eng. @chulalongkornU
Robert Scoble @Scobleizer
588K Followers 51K Following San Francisco/Silicon Valley AI | Robots, holodecks, BCIs, analysis of new things | Ex-Microsoft, Rackspace, Fast Company | Wrote eight books about the future.
廣瀬 智史 | Satos... @satoshihirose
2K Followers 1K Following PhD student @jouhouken @SokendaiU / AI Agent for Science / SWEやPdMなどとして働いた後に大学院に入り直しました
Hikaru Asano @hikaru_asan0
728 Followers 2K Following D3 at the University of Tokyo @babalablab. Research Intern at @SakanaAILabs
OpenAI @OpenAI
4.9M Followers 4 Following OpenAI’s mission is to ensure that artificial general intelligence benefits all of humanity. We’re hiring: https://t.co/dJGr6LgzPA
Kyunghyun Cho @kchonyc
86K Followers 2K Following a mediocre combination of a mediocre scientist and a mediocre advisor at @nyuniversity (@CILVRatNYU)
Taishi Nakamura @taishinakamura_
3K Followers 7K Following Working on scalable and efficient LLM (MoE pretraining, RL, reasoning). PhD student at @sciencetokyo_en Intern @SakanaAILabs
Jason Lee @jasondeanlee
34K Followers 5K Following Associate Professor CS/stats UC Berkeley. Former Research Scientist at Google DeepMind. ML/AI Researcher working on LLMs and deep learning. PhD at Stanford.
Quanquan Gu @QuanquanGu
26K Followers 2K Following Professor @UCLA, Ex-ByteDance Seed | Recent work: Seed2.0, SeedFold, SeedProteo | Opinions are my own
Jason Weston @jaseweston
15K Followers 895 Following Senior Director & RS @Meta + Visiting Prof NYU | OG in LLMs | Pretrain+Finetune in 2008+ | 151k+ citations | Current: Self-Improving & Co-Improving AI
YI @y_imjk
648 Followers 546 Following Research Engineer 🐟🐠🐡 / ex-UTokyo (eeic2021, Aizawa Lab) / 未踏IT 2022
Ino.Ichi @inoichan
4K Followers 772 Following Research Engineer at Sakana AI / PhD Pharm. Sci. / Kaggle Grandmaster https://t.co/JF6WCVTZCc / Instagram https://t.co/x0iZVjbmko
Yoshi Yamaguchi @ymotongpoo
14K Followers 938 Following Staff Developer Advocate at Grafana Labs | Observability, SRE/DevOps, Go | ex-Google, ex-AWS | opinions=mine | bsky: @ymotongpoo.com
LRIKI/るりき @lriki8
1K Followers 1K Following Webから組み込みまでいろいろ作るソフトウェアエンジニアです。 ゲームエンジンも作っています。 最近作ってるもの → https://t.co/rN5H3K6MWn
Tom Stuart @tomstuart
3K Followers 269 Following The wind of nothingness blasts, unhindered, from every page. @[email protected]
松浦 健太郎 @hankagosa
10K Followers 613 Following 興味:統計モデリング, 因果推論, 強化学習, Stan, TMB, R, 理工学書。技術的なブログ, 本, 論文, QAサイトの回答を書いている人が好き。なぜならそれらで独習することが多かったから。最近はBluesky。 旧ブログ:https://t.co/dA8JeA7TVu
Daisuke Okanohara / �... @hillbig
39K Followers 928 Following Co-founder and CEO of Preferred Networks (PFN). CEO of Matlantis.
opt @opt_cp
1K Followers 554 Following
熨斗袋 @noshi91
3K Followers 759 Following https://t.co/cjjnd793B5 お気軽に unfollow してください。 その他のアカウント: @noshi91s @noshi91_locked
Rui Ueyama @rui314
56K Followers 342 Following 米国Googleでソフトウェアエンジニア & スタンフォード大学コンピュータサイエンス修士 → 自分の会社 → 東京大学コンピュータ科学博士課程(現在) Creator of LLVM lld and the mold linkers
Taku Kudo @taku910
6K Followers 397 Following 形態素解析などなど 男子3人の父親 (大学1, 高校2, 中2) 東京/長野の二拠点生活 冬はほぼスノーボード
piqcy @icoxfog417
20K Followers 211 Following All change is not growth, as all movement is not forward. Ellen Glasgow
Takuto Wada @t_wada
67K Followers 6K Following プログラマ。テスト駆動開発実践者。power-assert-js 作者。『テスト駆動開発』を翻訳、『プログラマが知るべき97のこと』『SQLアンチパターン』『SQLアンチパターン第2版』を監訳/監修、『事業をエンジニアリングする技術者たち』を編纂しました。




















