コロンビア大学のシーラ・コロネルの記事「エドガー・マトバトの作り方」は、フィリピンにおける暗殺者の告白と薬物関連殺人の歴史を描いた力強い記事です。もっと多くの人々に届けるべく、著者の許可を得て、AIを使ってこの記事を多様なメディア形式へと変化させる実験を行いました。
AIは画像生成やイラスト変換、音声合成、アニメーション制作、そして効果音作りに利用され、記事は動画へと生まれ変わりました。音声合成にはフィリピン訛りを再現したボイスモデルを選び、不正確な発音には綿密な調整が必要でした。
ビジュアルには、記事の雰囲気を伝えるインクスケッチと水彩画風のスタイルを採用しました。Midjourneyを使って、ストーリーのシンボリックなイメージを生成し、実際の写真はラインアートに変換しました。動画のアニメーションは自動化サービスではなく、Speedpaint.coというアプリケーションを用いて行いました。しかし、全ての過程で最も時間がかかったのは手動での編集作業でした。
完成したビデオへの反応は様々で、フィリピンのジャーナリストからは賞賛があり、AIの可能性を感じる声も上がりました。しかし、一方で著作権や倫理的な懸念も指摘されました。この実験は、ジャーナリストやニュースルームが記事を新しい方法で伝えるための参考になるはずです。
出典 : Transforming Longform Text into Multimedia using Generative AI https://medium.com/generative-ai-in-the-newsroom/transforming-longform-text-into-multimedia-using-generative-ai-5cc50fa9b460
