ホームGenerative AIbilibili/Index-anisora
2,421

// 概要

Index-AniSora は、高品質なアニメ動画生成とアニメーション制作のために設計された強力なオープンソースフレームワークです。このシステムは、包括的なデータ処理パイプライン、時空間マスキングを備えた制御可能な生成モデル、および専門的な評価ベンチマークを特徴としています。キャラクターの 3D 生成、動画のスタイル変換、正確なモーション制御のためのマルチモーダルガイダンスなど、多様なクリエイティブタスクをサポートします。

// 技術解説

Index-AniSora は、誇張された動きや独特の芸術的表現といったアニメスタイルのコンテンツ特有の課題に対処するために設計された、オープンソースのアニメーション動画生成システムです。このアーキテクチャは、時空間マスクモジュールを備えた統合フレームワークを活用しており、Image-to-Video 生成、フレーム補間、局所的なガイダンスといった高度な制作機能を実現します。専門的なデータ処理パイプラインと強化学習ベースの最適化を統合することで、本プロジェクトは、アニメーション特有のタスクにおいて汎用動画モデルを凌駕する、高品質で一貫性のあるアニメコンテンツを作成するための包括的なソリューションを提供します。

// 主要ハイライト

01
キャラクターの 3D 動画生成をサポートしており、1 枚の正面イラストから 360 度の回転を作成し、一貫したビジュアルモデリングを可能にします。
02
任意のフレームでの推論とキーフレーム補間機能を備えており、生成されるアニメーションの時間構造を正確に制御できます。
03
ポーズ、深度、線画、音声などのマルチモーダルガイダンスメカニズムを実装しており、動きやスタイルをきめ細かく制御できます。
04
超低解像度の動画超解像機能を搭載しており、90p から 1080p へのアップスケールを行いながら、豊かなディテールを維持できます。
05
アニメに最適化された専門的なベンチマークシステムと報酬モデルを提供し、高品質で人間に適したアニメーション出力を保証します。
06
GPU および Huawei Ascend 910B NPU ハードウェアの両方に最適化されたバージョンを含む、柔軟なデプロイオプションを提供します。

// ユースケース

01
正面イラストからのキャラクター 3D 動画生成
02
アニメ制作における動画のスタイル変換およびフレーム補間
03
動画の動きと美学を正確に制御するためのマルチモーダルガイダンス

// クイックスタート

Index-AniSora を使い始めるには、公式の GitHub リポジトリ、または Hugging Face や ModelScope の組織ページにアクセスし、最新のモデルウェイト (V3.2 や anymask など) をダウンロードしてください。ユーザーは、推論スクリプト用の 「anisoraV3」 やデータセットツール用の 「data_pipeline」 といった提供されているフォルダーを確認し、選択したバージョンに指定されたハードウェア要件を満たしていることを確認する必要があります。