最新の論文記事を読みやすく整理。保存・タグ検索に加え、Plus/Proでは研究ノートと知識グラフで理解を積み上げられます。
Cog AI Archive
脳MRIから腫瘍を分類する精度は深層学習で大きく伸びましたが、微小な敵対的摂動で壊れやすいという弱点が医療応用では深刻です。 提案手法は、NNMFで作った解釈しやすい低次元特徴、統計量で選んだ上位成分、小型CNN、そして特徴空間での拡散デノイズを組み合わせ、AutoAttack 下での頑健性を押し上げます。 クリーン精度はほぼ維持したまま、頑健精度を 0.0047 から 0.5953 へ大きく改善しており、「見かけの高精度」ではなく「攻撃下でも崩れにくい診断補助」を目指した構成だと読めます。
水を注ぐ、氷が溶ける、マッチが燃えるといった状態変化は、見ていなくても進む。StEvo-Bench は、その当たり前の性質を動画ワールドモデルが本当に持っているかを測るために作られたベンチマークです。 評価は「隠すことに成功したか」「変化を始められたか」に加えて、「状態が進んだか」「物理的にもっともらしいか」「前後の映像がつながっているか」を分けて判定します。単に見栄えがよい動画かどうかではなく、見えない間の世界状態を保てるかを問う設計です。 結果はかなり厳しく、Veo 3 や Sora 2 Pro のような強いモデルでも観測を遮ると成功率は 10% 未満、カメラ制御型モデルでは状態進行がほぼ止まります。現行の動画モデルは「観測」と「状態進行」をまだ強く結び付けて扱っている、というのが中心的な結論です。
科学データの連合学習では、データを中央集約できないだけでなく、クライアントごとに極端なクラス不均衡や長い尾を引く分布があり、素朴なコアセット選択がむしろ希少な重要サンプルを落としてしまいます。SCOPE はこの問題を「各点の意味的な役割を見て残す」方向から組み替えました。 中核は、共有の表現空間で各サンプルに代表性・多様性・境界近接度という三つの尺度を与え、各クライアントが送るのは特徴ベクトルではなく軽量な数値指標だけにすることです。サーバはそれを集約して全体合意を作り、各クライアントはその合意に沿って異常点を落とし、希少だが大事な境界サンプルを残します。 実験では CIFAR-10、CIFAR-100、Tiny-ImageNet、UHCS で、SCOPE が 128倍から512倍の上り通信削減、7.72倍の実時間短縮、FLOP/VRAM 削減を達成しつつ、極端な偏り条件で既存法より高い精度と安定した収束を示しました。特に全データ利用より高精度になる条件がある点が面白く、「全部残す」こと自体がノイズになる場面を定量化しています。
連合学習で「特定ユーザーや特定サンプルの影響だけを消したい」と言っても、通常の深層モデルでは再学習と完全一致させるのが難しく、既存法は近似や選択的再学習に頼りがちです。論文はこの問題を、凍結した基盤モデルの上に ridge 回帰ヘッドだけを載せる実務的設定へ絞ることで、厳密解まで落とし込みました。 核心は、学習結果が各サンプルの生データそのものではなく、二つの加法的十分統計量だけで決まると見抜いた点です。各クライアントは追加・削除要求を固定サイズの統計メッセージとして送り、サーバはその帳簿を更新するだけで、中央で retained data に対して最初から再学習した解と理論上完全一致するヘッドを維持できます。 実験では CIFAR-10、CIFAR-100、FeMNIST、Sentiment140 の4ベンチで、提案した2変種が中央再学習との差を相対 Frobenius 誤差 10^-9 レベルまで抑え、FedAvg 系の exact federated unlearning ベースラインより桁違いに低コストで削除要求を処理しました。つまり「忘却を厳密にやりたいなら、まず何を学習対象にするかを変えるべきだ」という論文です。
機械翻訳の誤りスパン検出は、どこがどの程度おかしいかを細かく示せる重要課題ですが、人手アノテーションは高価で主観差も大きく、学習データの拡大が難しいという根本問題があります。 提案手法は、LLM 自身に多数の候補スパンを出させ、MBR 復号で最もよい候補を疑似ラベルとして選び、それを使って SFT・DPO・KTO で反復的に再学習する自己進化型の枠組みです。 WMT Metrics Shared Task で評価した結果、人手ラベルで学習した基線より system-level と span-level では上回り、sentence-level でも競争力を保ちました。特に T=2 の設定が強く、最良では SPA 0.864、SOFTF1 0.939 を記録しました。
時系列分類の説明研究は個別サンプル向けの局所説明に偏りがちで、クラス全体としてモデルがどんな波形パターンを重視しているかをまとめて把握する仕組みは不足していました。 L2GTX は、LOMATCE が出す局所的なイベント説明を、代表サンプルの選択・クラスタ統合・属性要約の三段で束ね、クラスごとの大域説明へ変換するモデル非依存手法です。 6つの UCR データセット、FCN と LSTM-FCN の2系統で評価したところ、統合の粗さを上げてクラスタ数を減らしても大域忠実度は概ね安定し、少数の代表事例から読みやすいクラス別説明を作れることが示されました。
鉱物探査の地球化学異常検知は重要ですが、既存研究は単一地域・単一元素・非公開データに偏り、手法の一般化性能や再現性を本当に比べにくい状況でした。 GeoChemAD は、複数地域・複数サンプリング媒体・複数ターゲット元素を含む8サブセットの公開ベンチマークで、GeoChemFormer は空間文脈と元素依存を自己教師ありで学ぶ Transformer 型手法です。 ベンチマーク全体では GeoChemFormer が平均AUC 0.7712で最良となり、既存の統計・機械学習・生成モデル系を上回りつつ、異なる地質条件でも安定した性能を示しました。
医用画像セグメンテーションでは専用設計モデルが有利だと考えられがちですが、3種類の異なる2次元データセットで厳密比較すると、汎用視覚モデル群が多くの専用モデルを上回りました。 比較は11モデルを同一学習条件で揃え、精度だけでなく Grad-CAM による可視化も確認した点が重要で、単なる実装差や訓練差ではない傾向を示しています。 結論は「専用モデルは不要」ではなく、まず汎用視覚モデルを強い基準線として検証し、そのうえでデータ整備やOOD評価へ資源を回すほうが研究効率が高い、というものです。
Supervised Semantic Differential（SSD）は、テキスト意味のずれを心理尺度などの連続変数に沿って読む混合的手法ですが、PCA の次元数 K をどう選ぶかに系統的な基準がなく、研究者の裁量が入りやすいという弱点を抱えていました。 著者らは、表現容量、意味勾配の解釈可能性、近傍の K に対する安定性を同時に見て K を選ぶ PCA sweep を提案し、AI に関する短文投稿とナルシシズム尺度のケーススタディで、その有効性を示しています。 事例では Admiration に関して K=15 の安定で解釈しやすい意味勾配が得られ、AI を協調的・前向きに語る側と、不信・嘲笑・敵対で語る側が対置されましたが、Rivalry では頑健な整列が出ず、方法上の慎重さも同時に確認されました。
ソフトウェアエージェントの学習で本当に足りていないのは、コード断片ではなく、テスト実行と修正の反復を伴う「動く環境」です。OpenSWEは12.8kリポジトリから45,320件の実行可能Docker環境を公開し、その生成インフラまで含めて透明化しました。 狙いは規模の誇示だけではありません。PRとIssueの不整合や、説明文を読めば答えがほぼ分かる trivial な課題を除き、「学習信号としてちょうどよい難しさ」の環境だけを残す difficulty-aware filtering が核心です。 その結果、OpenSWEで訓練した32B/72BモデルはSWE-bench Verifiedで62.4%/66.0%を達成し、同系統の既存データより強く、しかも数学推論で最大12点、科学ベンチで最大5点の外部改善まで示しました。