すべて
| ニュース・評判・反応
arxivの最新ニュース一覧
-
AIと一緒に論文を読める「alphaXiv」 英語論文のURL「arxiv」→「alphaxiv」に変えて起動 “日本語ブログ”に変換可能
最新コメント| 22025年5月27日 13:51 Nat Sakimura/崎村夏彦
Source.app/Zqemd Shared via the Google App -
https://arxiv.org/abs/2405.15682
最新コメント| 12024年5月28日 6:22 Daisuke Okanohara / 岡野原 大輔
スケジュールフリー最適化法は学習率スケジュールを使わず、ステップ数を前もって指定することなく全最適化手法の損失のパレートフロンティアを達成する。従来の機械学習からLLMまで有効。勾配をモーメンタムで補正した位置で評価した上で、平均化した位置を使う。arxiv.org/abs/2405.15682 -
https://arxiv.org/abs/2404.19737
最新コメント| 12024年5月13日 6:23 Daisuke Okanohara / 岡野原 大輔
LLMの学習時に次トークンだけでなくn個先トークン予測損失を加えることでコードタスクの性能や、投機的予測による高速化に貢献。先読みで話題変化を早めに補足。最後のみ分岐し複数ヘッドで各トークンを予測するためコスト増加はほぼない。非コードタスクで性能改善は限定的 arxiv.org/abs/2404.19737 -
https://arxiv.org/abs/2404.13883
最新コメント| 12024年4月24日 5:17 キャルちゃん
#キャルちゃんのquantphチェック 位置と運動量を介して熱浴に結合している、電荷をもつブラウン運動粒子の、磁場存在下での量子Langevinダイナミクスを解析。系と熱浴の結合に関係なく、磁場が系からの情報損失を遅くすることが判明。イオントラップで実証できるかも? arxiv.org/abs/2404.13883