ピーター (@_petert) profile picture

メガベンチャーのソフトウェアエンジニア, AI/Go/Python/React, 日本人, 28歳, AI動画生成

Tokyo-to, Japan
Joined June 2020
Photo by ピーター (@_petert)Photo by ピーター (@_petert)Photo by ピーター (@_petert)Photo by ピーター (@_petert)Photo by ピーター (@_petert)Photo by ピーター (@_petert)Photo by ピーター (@_petert)Photo by ピーター (@_petert)Photo by ピーター (@_petert)Photo by ピーター (@_petert)
MITのRikiyaTakehi氏らによるヤバ研究。Qwen3.5-0.8Bに数学問題を解かせると同じ思考を延々とループして一向に答えが出ないバグ的な挙動があった。そこで研究者はAstraに「Qwenを修正してくれない?」って丸投げしてみた。するとAstraはウエイトの中身を見ながら「あー、多分この辺が故障してますね~」つって微調整とか学習とかじゃなくて生のウエイトを直接弄りだした!Astraがアタリをつけてウエイト操作を試行錯誤した結果、Qwenの思考ループが修正されてMATH-500スコアは7.9→48.1に6倍に爆上がり!IFEvalも21→62.3に!研究者は「え…?Astraってウエイトの中身理解できるの!?」と驚愕してさらなる実験を試みる。Astraにゲームプレイを学習させたモデルをいくつか見せたら「これはブロック崩しをプレイするモデルでしょ。これはPong、これはパックマン…」と全部言い当てた!やはりモデルの中身が読めている!次はジャンプ台を乗り越えるのに失敗しちゃう車のモデルを渡したらこれも見事に修正してくれた!その次はブロック崩しのソースコードを渡したらなんとそれをプレイするAIモデルを直接出してくれた!!この結果から、やはりAstraレベルの最先端フロンティアモデルはAIモデルの中身のウエイトを読んで理解する能力があるらしいと分かった!今まで人間はモデルウエイトの中身サーパリ理解できなくて「AIの中身はブラックボックス!」とか言ってたのにいつの間にかAIはAIの中身読めるようになってた!あまつさえウエイトを直接編集、修正、生成する事さえできる!!研究者はこれはWeight-Space Programmingと名付けた
We asked GPT-6 Astra to edit Qwen3.5-0.8B weights to improve math. It directly changed only 0.016% of weights, fixing 0.8B's reasoning loops & improving math up to 6x and even instruction following 3x, without gradients or training. We call this Weight-Space Programming: frontier LLMs can now natively read/write neural network weights! 🧵 Blog: rikiyat.github.io/blog/weigh…
Readers added context they thought people might want to know
LLM was given weights explicitly as text in prompt and used code/forward passes (per authors' logs) to ablate Qwen looping direction, a known thinking-mode issue per model card. Primarily fixed repetition in that mode, not general 'natively' improving weights/math. rikiyat.github.io/blog/weight-sp… github.com/RikiyaT/lm_und… huggingface.co/Qwen/Qwen3.5-0… huggingface.co/RikiyaT/Qwen3.…
10
1,076
259
4,955
458,765
おもろ
Anthropic and OpenAI pacing the frontier 🤯
5
364
90年代後半のテレビカメラで令和の東京を撮ってみた
1
9,522
898
85,521
7,235,476
これ全部AIで作った動画です。 AI動画バブル来るか?
4
238
AIが人間を支配するのか?という質問へのマスクの答え。 「支配するというより、たぶん気にしない。人間もチンパンジーの生活なんて気にしないだろ」
4
199
明治維新後の日本は、韓国、中国、台湾、東南アジアにまで領土を広げた。 たくさん犠牲を出したのに結局縮小してしまった。最初から広げようとしない方がよかった気がする。
1
1
1
195
イーロンマスクは「人間は何をやっても、AIとロボットに勝てなくなる」「お金は意味を失う」と言ってる
1
3
323
【総額100万ドル】【総額1.5億円】 「GMOサイバー犯罪撲滅・懸賞金 」について group.gmo/info/alert/2026102…
🤖 Made with AI
647
573
1,030
1,823
2,443,143
GMOへの攻撃、この24時間で一気に動いた。正午に情報公開とランサム攻撃の予告→GMOは利用者にPCの電源を落とすよう呼びかけ→12:30に情報と称するものの公開を確認。GMOは支払わない判断。
1
812
サイバー攻撃が来て、インフラ全部止まったら、東出生活したい。 東出が時代の最先端
【言及】細野大臣、全国民に「緊急要請」 食料・水・トイレの備えを news.livedoor.com/article/de… 防災庁が発足する11月2日に、全国民に向けて災害へ備えるよう「緊急要請」を出すと述べた。公助がなくても最低限3日、家で食べ物やトイレや水を用意してほしいと言及している。
280
GMOだけじゃなくて、文系出身の経営者で、エンジニアの気持ちがわからずに、SNSで散財してるのをあげている経営者はエンジニアに恨まれてると思う
1
3
1,453
かといって、ハッキングが許されるわけじゃないけど、ちゃんとエンジニアをケアしないと、捨て身でエンジニアが攻撃してきたら恐ろしいよって話
97
セキュリティエンジニアなんて、雇わなくても良い。ただ非検閲のLLMをhuggingfaceで探して、自前のGPUで動かして、opencodeで自分のサーバーに攻撃させ続ければ良い。そして穴が見つかったら修正すれば良い。攻撃者と同じことをしないと防げない。
3
263
今起きているのは・・・
13
155
61
771
101,842
話題になってるGMOのサイバー攻撃の件を、AIにわかりやすく説明してもらいました。
277
イギリス政府が国民に「3日分の備えを」と呼びかけ。その週末、嵐で停電は83万件超。 ただ、SNSで回ってる「27万世帯が停電」は主要報道では確認できず、原因も嵐と報じられてる。 日本でも、水と現金くらいは置いておいた方が良さそう。
5
23
15,913
サイバー攻撃に備えて紙に印刷するバックアップとか取っておいた方が良いのでは
104
サイバー攻撃とAIの進化が恐すぎて、残りの余生を田舎でゆっくり過ごしたい
🤖 Made with AI
1
226