HCI分野の研究レビューにおいて、特定の問題に対して大量の機械学習モデル(LLM)を適用したいわゆる「LLMラッパー」論文が増加しています。これらの論文はHCIの研究文献との関連が薄く、表面的な研究やユーザースタディが目立ちます。
そこには真に問題に取り組む姿勢よりも、論文を量産する目的が見え隠れします。これらの論文がレビュープロセスに過大な負荷をかけ、本質的な研究が埋もれる原因になっているのです。
さらに、これらの「LLMラッパー」は、新たな研究者が深く検証しようとしたときに、質の低い研究といかに異なるかを証明する余計な障害となっています。
論文提出者だけでなく、この行動を奨励するインセンティブ構造にも問題があります。HCI分野のより良い研究環境のためには、「LLMラッパー」論文の問題を明確にし、解決策を共に模索する必要があります。
出典 : https://ianarawjo.medium.com/llm-wrapper-papers-are-hurting-hci-research-8ad416a5d59a