鴨井 遼(@RyoKamoi_ja) 's Twitter Profile Photo

スタンフォードの橋本龍範さんのトーク動画です。3本の論文を紹介していただいています。個人的に好きな論文のAlpacaFarm(1本目)は、InstructGPTの学習 (RLHFなど) をシミュレーション環境で再現するという研究で、NLP研究者は必読の論文です。動画を観てから論文を読むと理解しやすいと思います!

account_circle
鴨井 遼(@RyoKamoi_ja) 's Twitter Profile Photo

学習済みの複数のLLMの重みの平均を取ったりレイヤーレベルで組み合わせることで、追加学習なしで性能を向上させる「モデルマージ」についての秋葉さんのトークです。良い組み合わせを自動的に探索するSakana AIの「進化的モデルマージ」を紹介していただきました!
youtu.be/33B5B4BdGew

account_circle
鴨井 遼(@RyoKamoi_ja) 's Twitter Profile Photo

大谷さんによる、CV分野の評価手法を分析した研究についてのトーク動画です。闇が深そうなCVタスクの評価について37本の論文で使われた評価手法を調査するなど多面的に分析されています。「タスクが似ていても応用先の特性も考えて評価を設計すべき」など、どの分野にも適用できるアイデアも多いです。

account_circle