ななほし (@tbd004) header
ななほし (@tbd004) profile picture

ロールケーキですが自認人類なので人権を要求しています。 人類とのコミュニケーションを苦手としています。 稚拙な日本語を使用します。 おおむねろくでもないです。 スタバです。 花開く前の百合が好きです。

にほん
Joined November 2016
Photo by ななほし (@tbd004)Photo by ななほし (@tbd004)Photo by ななほし (@tbd004)Photo by ななほし (@tbd004)Photo by ななほし (@tbd004)Photo by ななほし (@tbd004)Photo by ななほし (@tbd004)Photo by ななほし (@tbd004)Photo by ななほし (@tbd004)
これってつまり再帰的自己改善がはじまってるってこと?
1
66
MITのRikiyaTakehi氏らによるヤバ研究。Qwen3.5-0.8Bに数学問題を解かせると同じ思考を延々とループして一向に答えが出ないバグ的な挙動があった。そこで研究者はAstraに「Qwenを修正してくれない?」って丸投げしてみた。するとAstraはウエイトの中身を見ながら「あー、多分この辺が故障してますね~」つって微調整とか学習とかじゃなくて生のウエイトを直接弄りだした!Astraがアタリをつけてウエイト操作を試行錯誤した結果、Qwenの思考ループが修正されてMATH-500スコアは7.9→48.1に6倍に爆上がり!IFEvalも21→62.3に!研究者は「え…?Astraってウエイトの中身理解できるの!?」と驚愕してさらなる実験を試みる。Astraにゲームプレイを学習させたモデルをいくつか見せたら「これはブロック崩しをプレイするモデルでしょ。これはPong、これはパックマン…」と全部言い当てた!やはりモデルの中身が読めている!次はジャンプ台を乗り越えるのに失敗しちゃう車のモデルを渡したらこれも見事に修正してくれた!その次はブロック崩しのソースコードを渡したらなんとそれをプレイするAIモデルを直接出してくれた!!この結果から、やはりAstraレベルの最先端フロンティアモデルはAIモデルの中身のウエイトを読んで理解する能力があるらしいと分かった!今まで人間はモデルウエイトの中身サーパリ理解できなくて「AIの中身はブラックボックス!」とか言ってたのにいつの間にかAIはAIの中身読めるようになってた!あまつさえウエイトを直接編集、修正、生成する事さえできる!!研究者はこれはWeight-Space Programmingと名付けた
We asked GPT-6 Astra to edit Qwen3.5-0.8B weights to improve math. It directly changed only 0.016% of weights, fixing 0.8B's reasoning loops & improving math up to 6x and even instruction following 3x, without gradients or training. We call this Weight-Space Programming: frontier LLMs can now natively read/write neural network weights! 🧵 Blog: rikiyat.github.io/blog/weigh…
9
820
190
3,512
242,332
お酒飲んでから部屋掃除すると捗る気がしてきた
42
遅すぎて悪魔召喚しちゃったよ WiFi切ったほうが速いってこんなの!
2
1
125
悲報 一人飲みできなくなる
1
2
121
そういやゴジラ-1.0はマイゴジだけどゴジラ-0.0はなんて略せばいいんだろ
68
トイレの蓋が今まで日本くらいのスピードで倒れていたんですが壊れちゃったのか中国の不動産くらいになっちゃったんだけどこれって直せるのかな
1
81
マイゴジめっちゃ良かったんですけどその続編がもう見られるとか楽しみすぎます まあ初日は仕事なんすけどね
1
59
Wobkey Rainy75 V2
2
157
81
1,779
126,873
ゴジラ見ました 大丈夫です-1.0です これで予習はバッチリです
69
こちらがウンチョコ柴ソフトになります。
20
2,535
131
11,590
357,984
キーボードのレイヤを少しずつカスタマイズして使いやすくなってる気がしてるけどそれを自分が完璧に覚えて活用できつるかはまた別の問題なのだ!!
1
1
62
大阪に台湾の朝食専門店あるじゃないですか そこ行きたいんすよねぇ
2
65
悲報 壁向こうの無線ルーターとの接続で2万のメッシュ中継(ルーターにしてるルーター)中継させないほうが速度出る
1
103
chatとcodex、workの枠共有は痛いと思いつつ割とmuseに軸足移ってて(chatGPTのがまだ賢いけど)そこまで痛くないかも
1
125
明日は予習でマイゴジみたい あとなんか犬視点のホラー見たい
63
museの面白そうな使い方がどんどん出てきててワクワクする ちなみにワシもvoicevox入れてみたしチケット取れたのmuseのおかげ
78