TikTokなどを開発する中国企業ByteDance社は、南開大学と共同開発した「StoryDiffusion」を発表した。「StoryDiffusion」は一貫したストーリーテリングのために一貫性のあるキャラクターのスタイルや服装を維持し、さまざまなスタイルの漫画の作成が可能なAIモデルだ。

生成された一貫した画像またはユーザー入力画像を用いて、「StoryDiffusion」は高品質のビデオを生成できる。キャラクターのアイデンティティを維持し、一連の画像内で一貫したキャラクターを生成することが可能だ。

複数のキャラクターのアイデンティティを同時に維持し、一連の画像内で一貫したキャラクターを生成することができる。また、高品質なビデオの生成もサポートしているという。

印象的な漫画を作成することも可能だ。

また、ストーリーテリングの一貫性のある画像を生成するために、ストーリーのテキストをいくつかのプロンプトに分割し、これらのプロンプトを使って画像を生成する機能も備えている。

「StoryDiffusion」

Top Image : © Byte Dance