コンテンツ制作に最適な言語モデル（LLM）を見つけるため、複数のモデルを比較検討しました。ランキングやレビューを参考にしたうえで、費用対効果、使いやすさを考慮し、さまざまなタスクでテストを実施。
ブログ執筆、Eメール作成、コピーライティング、スクリプトライティング、コンテンツ要約の5つの異なるユースケースで、細かい部類に分けてLLMの能力を審査しました。
評価は、GPT-4 Turboと私の2人で行い、10点満点の中から各々が採点。その平均を最終評価としています。また、プロンプト設計にも工夫を凝らし、公平な評価をめざしました。
最終的な勝者は、すべてのカテゴリーを平均してLlama-3-70Bが最も高いスコアを得ました。細部にわたる注意力と、リアルなテキストを生成する能力が高評価の理由です。
このプロジェクトの全体的な様子をビデオとしてYouTubeにも投稿していますので、ぜひチェックしてみてください。
出典 : https://dswharshit.medium.com/the-best-llm-for-content-creation-06dd1ee5d7b9