Kouta Nakayama (@NLPingu) header
Kouta Nakayama (@NLPingu) profile picture

国立情報学研究所 LLMセンター 特任助教 / 博士(工学) / 髪の毛が長い人です。日本語LLMの研究開発及び評価をしています。 / LLM-jp, BRIDGE教育AI / ex-理研AIP, 森羅プロジェクト運営(19-24), ACT-X(20-22)

在宅勤務
Joined June 2010
Photo by Kouta Nakayama (@NLPingu)Photo by Kouta Nakayama (@NLPingu)Photo by Kouta Nakayama (@NLPingu)Photo by Kouta Nakayama (@NLPingu)Photo by Kouta Nakayama (@NLPingu)Photo by Kouta Nakayama (@NLPingu)Photo by Kouta Nakayama (@NLPingu)Photo by Kouta Nakayama (@NLPingu)Photo by Kouta Nakayama (@NLPingu)Photo by Kouta Nakayama (@NLPingu)
日本語LLM-as-a-Judge評価を統一的に扱うことのできるツール『llm-jp-judge』の提案とそのメタ評価を行った論文がNLP2025優秀賞を受賞しました。今後とも改良を続けていく予定なので、どしどし使っていただけると嬉しいです。#NLP2025 論文 anlp.jp/proceedings/annual_m… ツール github.com/llm-jp/llm-jp-jud…
5
32
2
233
27,190
休暇中…
8
235
対応行を書き換えるより取り除いてしまったほうが計算量も削減できてエコ。
「自分の関節を误って攻撃してしまう病気」 みたいに、Qwen3.8 Flash Nextの日本語の答えに混ざる中国語(27%)を、出力層の書き換えだけで0にできました。他の重みは変えていません。MacとKestromで再現できます。 という記事です。 zenn.dev/caphtech/articles/q…
251
Kouta Nakayama retweeted
EACL 2027 Findingsに採択されました! 広範な文書種別・リアルな質問での評価を追求した、日本語視覚文書理解ベンチマーク(Omni-JDocVQA)に関する研究です。
1
4
1
55
4,179
入国時感染症ゲノムサーベイランスという制度で、結果の研究利用を許すかわりに、コロナとインフルの検査してもらった。データサンプルが提供できて、検査もしてくれるなんてお得。無事陰性でした。
空港の検閲で熱測ったら39度超えててOMG… 出張続きが堪えたか…
3
463
空港の検閲で熱測ったら39度超えててOMG… 出張続きが堪えたか…
1
2
690
ふらっと入ったカフェの人がおすすめしてくれたお店にいき、お店の人のおすすめを頼んだ。どうやらホルモンうどん的なサムシングらしい。
1
1
329
お店と言うかフードコードだなこれは。
142
ネットの海で検索するDeep Researchの対比として、現地に赴き、己の脚で情報を集めることをDope Researchと呼んでいる。
5
262
中国で流行ってるらしい。
1
189
例年好評です。是非に。
コーディングエージェントをテーマとするLLM-jpチューニングコンペティションの参加受付を開始しました! 参加申込締切は11月20日(日本時間)です。計算資源の貸与を希望するチームは、参加登録と併せてお申し込みください。 詳細・参加登録はこちら:llm-jp.github.io/tuning-comp…
5
458
Kouta Nakayama retweeted
コーディングエージェントをテーマとするLLM-jpチューニングコンペティションの参加受付を開始しました! 参加申込締切は11月20日(日本時間)です。計算資源の貸与を希望するチームは、参加登録と併せてお申し込みください。 詳細・参加登録はこちら:llm-jp.github.io/tuning-comp…
1
23
12
119
13,710
実際は何の徳も積んでなかったようで、帰りの飛行機では頭上からそこそこの量の水が振ってくるという珍事に巻き込まれました。
身に覚えのない徳を積みまくったので、日本→ワルシャワ、ワルシャワ→ブダペストの両方で隣が空席でした。
6
292
ハンガリーで胃が疲れた人の朝食です。
13
372
ハンガリーも必須ではないとはいえチップ文化なのでチップに気持ち込めたほうが明らかにフレンドリー。
203
今年もチューニングコンペの運営をリードします。現在、計算資源の貸与を調整中です。 前回まではコンペのタスクが2つありましたが、今回はあえて1つのチャレンジングなタスクに絞りました。参加お待ちしてます🙏
昨年度に引き続き、LLM-jpではチューニングコンペティションを開催します。 今回のテーマはコーディングエージェントです。 参加募集は11月2日に開始予定です。希望するチームへの計算資源の貸与も予定しています。 詳細は以下のページをご覧ください。 llm-jp.github.io/tuning-comp…
13
963
ビーフシチューとコメのような何か。in ブダペスト
7
272
なんでアメニティに靴磨きがあって歯ブラシがないんだ。(靴はピカピカになった。)
5
302
身に覚えのない徳を積みまくったので、日本→ワルシャワ、ワルシャワ→ブダペストの両方で隣が空席でした。
1
1
1
9
1,232
ワルシャワ行きは通路側の席への変更を提案されて受理した結果、まさかのダブルブッキングしており、かわりに案内された席が当たりだった。棚ぼた。
178
Kouta Nakayama retweeted
【日本語評価データセット2件を公開しました!】 llmc.nii.ac.jp/other-dataset… LLMの安全性・公平性の向上に向けて ◆ BiasCLASP 「法令と判例に基づく社会的バイアス評価データセット」 ◆ JSocialFact2 「偽・誤情報に関連する質問にLLMが適切に回答できるかを評価する日本語ベンチマーク」 詳細・利用条件は下記からご覧ください。 llmc.nii.ac.jp/other-dataset…
26
5
120
11,626