ライブアクション映像を一貫した外観のカートゥーンに変換するには、まずDreaminaで明確なスタイルリファレンスを作成し、短いサポートされたビデオ編集パスを試してみてください。次に、フレーム間で視覚情報を運ぶワークフローを選択してください。正確なアートディレクションのためのキーフレーム伝播、またはより生成的な変換のための参照とモーションコントロールを備えたビデオワークフロー。まだ壊れているショットや領域を修正して終了してください。
中心的なルールはシンプルです:すべてのフレームの新しい解釈を生成するのではなく、時間を超えてスタイルを接続し続けることです。美しい静止画は、ターン中や素早いジェスチャー中に顔、インクのライン、衣服が一貫しているかどうかを教えてくれません。
- 必要なコントロールの種類に合わせたワークフローを選択してください
- 実際にちらついているものを特定する
- 一度に1ショットずつ映像を準備する
- 動きに耐えうるスタイルを定義する
- Dreaminaを使用して外観を確立し、ショットを試してください
- EbSynthを使用して承認された漫画キーフレームを伝播する
- 検査可能な制御ワークフローが必要な場合はComfyUIを使用してください
- オプティカルフローがなぜ役立つのか、そしてどこで役立たなくなるのか
- 図面を洗い流すことなく残留フリッカーを終了する
- モーション、テクスチャ、アイデンティティを別々にレビューする
- ショットを再構築し、有用なマスターをエクスポートする
- 漫画のフリッカーに関する質問
- ルックを構築し、パフォーマンスを通してそれを実行してください
必要なコントロールの種類に合わせたワークフローを選択してください
ビジュアルディレクションとしてDreaminaから始め、完成したカートゥーンがソースにどの程度近づく必要があるかに合わせたルートを使用してください。
制作ルートを選択する前にアクセスが主な懸念事項である場合は、無料のビデオ間オプションとその条件を比較してください。無料プレビュー、エクスポート、商用利用の許可の区別を保ってください。
実際にちらついているものを特定する
テクスチャフリッカーは表面処理を変更しますが、下にあるオブジェクトは認識可能なままです。頬は2つのトーンの間で脈打つかもしれません。ジャケットは新しい筆跡を獲得するかもしれません。また、カメラが動くと壁が輝くかもしれません。スタイルのバリエーションを減らし、対応するフレーム間でテクスチャを運ぶことが役立ちます。
形状ドリフトは描画されたものを変化させる。キャラクターの顎が広がり、手に指が生えたり、襟が別の衣服に変わったりします。これには、より良い参照、より抑制された変換、より強力で適切な構造ガイダンス、または修正されたキーフレームが必要です。通常、いくつかの間違った形を平均すると、より柔らかい間違いが生じます。
オクルージョンエラーは、何かが被写体の前を通過したり、以前は隠れていた領域を明らかにしたりするときに現れます。顔から手が離れますが、皮膚のパッチがそれに続きます。頭を向けると、デザインが変わる耳が現れます。障害物の前の最後のクリアフレームとその後の最初のクリアフレームを検査してください。
タイミングエラーはパフォーマンスを変えます。ジェスチャーが早く終わったり、唇が違う動きをしたり、カメラが別の方向に向かったりします。漫画は穏やかな質感を持っていても、元のアクションに従わないことがあります。最初と最後のフレームだけを判断するのではなく、同じ瞬間のソースと結果を比較してください。
一度に1ショットずつ映像を準備する
スタイリングする前にカメラの変更をカットしてください。新しいアングルには独自の参照とレビューが必要です。古いシーンのテクスチャをハードカットに引き継ぐことで、避けられる混乱が生じます。長いテイクの場合は、主要なターン、オクルージョン、照明の変化、急速な動きを別々のチェックポイントとしてマークしてください。
最初に短い代表的な抜粋を選んでください。あなたが保つつもりの最も強い動きを含めてください。例えば、顔が手を通り過ぎるような動きです。簡単なオープニングポーズは、最初の難しいアクションが到着するまで、弱いワークフローを説得力のあるものに見せることができます。その抜粋がうまくいったら、残りのショットにも同じアプローチを適用してください。
利用可能な最も清潔なソースを保ちます。重い圧縮、不安定な露出、モーションブラーは、エッジを追跡するのをより困難にします。再撮影できる場合は、安定した照明と重要な動く特徴を読みやすくするシャッターの選択肢を使用してください。カートゥーンが通過する前に、ハローを作成したり、顔の詳細を取り除いたりする攻撃的なシャープニングやノイズ除去を避けてください。
ソースの寸法、フレームレート、および再生時間を記録します。ソースに可変フレームレートがある場合は、意図的に一定のタイムベースで編集コピーを作成し、フレームを抽出する前にサウンドの同期を確認してください。元のファイルとオーディオを保存して、後でそれらに戻ることができます。
動きに耐えうるスタイルを定義する
フルクリップを処理する前に、コンパクトなスタイルガイドを作成してください。線の太さ、パレット、シャドウ処理、テクスチャ密度、および識別可能な文字の特徴を指定してください。「カートゥーン」という言葉だけでも、フラットセルシェーディング、絵画的なアニメーション、マンガインク、または高度に簡略化されたコミックキャラクターを意味することができます。
顔については、鼻、目、髪が正面からどのように見えるか、そしてショットの最大のターンでどのように見えるかを決定してください。衣服については、識別可能な形と色の小さなセットを保存してください。1つのフレームで魅力的に見える密集したパターンは、すべての小さなマークが再描画されると這う可能性があります。
新しいキーフレームの横に承認された参照を保持してください。ポーズごとに同じ肌の色、ラインの太さ、シャドウの色を比較してください。壊れたフレームを修正することで、ショットの途中でキャラクターを静かに再設計することなく、動きを修復することができます。
描かれたスタイルには、少し意図的な線の動きが合うことがあります。きれいなアニメーションイラストか、目に見える手描きのバリエーションかを決めて、その選択に対して一貫性を判断してください。目標は、パフォーマンスに貼り付けられた凍った絵画ではなく、一貫した動くデザインです。
Dreaminaを使用して外観を確立し、ショットを試してください
Dreaminaは、詳細なキーフレーム作業に取り組む前に、漫画のトリートメントを探索したいときに便利な最初のステップです。明確なソースフレームから始めて、スタイルの決定が変換する人物やシーンに関連していることを確認してください。
- 1
画像の作成または編集を開き、選択したソースフレームを参照としてアップロードしてください。アカウントで利用可能な画像モデルを選択し、カートゥーンの処理を説明しながら、保存する機能に名前を付けてください。
2生成されたフレームを元のフレームと照らし合わせて確認します。承認されたルックとして扱う前に、シルエット、目、口、衣服の境界線、重要な小道具を修正してください。異なる顔を持つ参照は、その違いを後の仕事に持ち込むでしょう。
3ビデオパスの場合、アップロードまたは選択したクリップのサポートされているビデオ編集エントリを開きます。関連するSeedance 2.5編集ワークフローを使用して、リスタイルを説明し、必要に応じて意図された領域を特定し、時間範囲を指定してください。そのモードでサポートされている場合は、承認されたスタイル参照を追加してください。
4アクション、フレーミング、および主題の詳細を保持しながら、視覚的な処理を依頼してください。短いショットを試して、結果を調べ、関係のない要素が変わった場合は命令または間隔を狭めてください。
5有望なバージョンをダウンロードして、エディタでファイルを再度開いてください。より多くの映像を処理する前に、ターン、最速ジェスチャー、オクルージョン、および最終フレームを確認してください。
新しい試みのための適応可能なプロンプトがここにあります:
このショットを、ダークブラウンの輪郭線、限られた暖色系のパレット、2トーンのシャドウを持つクリーンな2 Dセルシェーディングカートゥーンにリスタイルしてください。選択したインターバル全体で、同じ人物、髪型、青いジャケット、手のジェスチャー、カメラのフレーミング、背景レイアウトを維持してください。頭が回転するにつれて、顔の比率と衣服のデザインを一貫して保ちます。新しいオブジェクト、変化するパターン、輝く表面テクスチャを避けてください。
プロンプトをブリーフとして使用し、出力を視覚的に判断してください。口や手のパフォーマンスが変わった場合、より強く保存を要求しても解決しない場合があります。そのショットにはより近いソース駆動ルートを使用してください。文字参照から意図的に新しいパフォーマンスを構築する場合、モーション参照文字ワークフローは別のオプションです。
利用可能なモデルと編集機能は、アカウントと選択したモードによって異なります。有料またはクライアントの仕事で結果を使用する前に、地域、サービス、モデル、およびソース素材に適用される商業許可を確認してください。
EbSynthを使用して承認された漫画キーフレームを伝播する
EbSynthは、特定のペイント処理を通して記録されたパフォーマンスを保持したい場合に強力なオプションです。そのコア合成は、ガイドビデオを使用して編集されたキーフレームの外観を伝えます。オプションの画像生成機能は、キーフレームを作成する別の方法です。
現在のブラウザエディタでガイドビデオを開始してください。明確で有用なフレームを選択して、ソースの寸法と重要なフィーチャの位置を整列させたまま、スタイリングしてください。漫画のルックを自分でペイントするか、承認された画像編集アプローチを使用して、キーフレームとして適用する前に形状を修正してください。
管理可能な間隔で伝播を実行し、最初に壊れた場所を調べてください。意味のある変更に修正されたキーフレームを追加してください:プロフィールビュー、新しい手のポーズ、障害物から現れた顔、または新しく露出した背景の大きなパッチ。承認された最初のキーフレームと同じパレットと描画ルールを維持し、インターバルを再度合成してください。
異なる治療が必要な場合は、主題と背景を分離してください。レイヤーとアルファキーフレームは、ペイントされた変更を有用な領域に限定することができます。これは、詳細な風景が顔から注意をそらす場合や、前景の手が静止した背景を横切る場合に特に役立ちます。塗装された内部と同様に、マットなエッジを注意深く確認してください。
漫画の頭や目のレイアウトを元の位置から引き伸ばして、不一致を隠すために伝播を期待しないでください。誘導運動は外観を持つことができますが、実質的に異なる形状はさざ波を立てたり伸ばしたりすることができます。処理を追加する前に、アンカーを修復するか、別の明確なポーズを選択してください。
現在のFreeレベルは720 p MP 4をエクスポートします。Proは高解像度のエクスポートとアルファ付きのPNGを追加します。透明性に依存するプロジェクトを構築する前に、エクスポートパスを選択してください。ブラウザーサービスは、合成のために一時的にビデオとキーフレームをアップロードします。別のWindows Studioルートはオフラインオプションです。生成されたキーフレームについては、適用されるモデルライセンスと映像の権利を考慮してください。
検査可能な制御ワークフローが必要な場合はComfyUIを使用してください
ComfyUIは、単一の変換ボタンに頼るのではなく、ワークフローを管理することに慣れている場合に役立ちます。互換性のあるビデオモデルは、ソースから派生したガイダンスとスタイル参照を組み合わせることができ、保存されたグラフは入力と依存関係を再現しやすくします。
具体的な出発ルートは、公式のWan 2.1 VACE Control Videoテンプレートです。ガイドは現在、テンプレートがCausVid LoRAで更新されたことを警告しているため、ロードするバージョンの現在のテンプレートに埋め込まれたメモに従ってください。変更されたグラフに古いサンプラー値を移植しないでください。
このシーケンスを使用してください:
- 1
互換性のある現在のComfyUIインストールまたはサポートされているホスト環境でテンプレートをロードしてください。プロダクションフッテージを追加する前に、不足しているノードを解決してください。
2ローダーノードで一致する拡散モデル、テキストエンコーダー、およびVAEを選択してください。ワークフロー名は、必要なモデルファイルがすでにインストールされていることを意味するわけではありません。
3そのワークフローに必要なソースコントロール入力を準備してください。ドキュメント化されたコントロールビデオルートでは、Load Videoは深度前処理済みビデオを受信します。適切な前処理グループまたは互換性のある前処理ノードを独自のソースに使用します。通常のカラーフッテージを深度入力スロットにロードしても、深度マップは作成されません。
4承認された漫画画像を参照画像入力に入力し、意図した処理の一貫したプロンプトを書いてください。テンプレートの指示に従って、参照入力と制御入力が有効になっていることを確認してください。
5ビデオ調整セクションで適切な寸法とフレーム数を設定し、短い下書きを実行してください。参照スタイルが動きを生き延び、深度ガイダンスが有用なシーン構造を保持しているかどうかを確認してください。
6承認されたドラフトを生成したモデル、ノード、および入力バージョンを含むグラフを保存してください。スケールアップする前に、正確な参照画像とソースの抜粋を一緒に保管してください。
ハードウェアと環境がサポートできるモデルを選択してください。ダウンロード体格は完全なメモリ要件ではなく、ローカルで利用可能なアプリケーションがあっても、GPU時間やホストされたサービスが無料になるわけではありません。クラウド環境では、ローカルセットアップと同じカスタムノードインストールオプションではなく、サポートされているノードカタログが提供される場合があります。
コンポーネントが何をしているかを理解する
構造ガイダンスと時間的一貫性は、異なる問題を解決します。ポーズ、エッジ、または深度条件は、特徴が属する場所を維持するのに役立ちます。時間的なメカニズムは、フレーム間で情報を関連付けます。互換性のあるイメージワークフローにControlNetを追加しても、独立したフレーム生成の共有テンポラルメモリは自動的には提供されません。
同様に、参照アダプターは、毎回同じ顔を保証することなく、外観を確立するのに役立ちます。アダプター、チェックポイント、ワークフローのアーキテクチャーを一致させます。安定した拡散画像編集レシピ、Wan VACEビデオテンプレート、および研究実装は異なる構成です。それらのコントロールは互換性がありません。
画像モデルを使用してカートゥーンアンカーを作成する場合は、フレームを伝播または共同処理するための実際の方法が得られるまで、その役割を維持してください。同じプロンプトで何百もの無関係な静止画像を生成することは、継続的なパフォーマンスを構築するための脆弱な方法です。
オプティカルフローがなぜ役立つのか、そしてどこで役立たなくなるのか
オプティカルフローは、可視画像ポイントがフレーム間でどのように移動するかを推定します。一貫性の過程では、その対応を使用して、前または隣接するスタイル化された外観を現在のフレームに取り込むことができ、すべてのブラシマークを再度発明する必要がなくなります。
保つべきバランスがあります。近くのフレームは局所的な連続性を維持するのに役立ち、以前の安定した結果はより長い間隔で見た目を維持することができます。過去の出力をあまりにも強く再利用すると、その間違いを前進させる可能性があります。移動するエッジがトレイルを残したり、古いテクスチャが新しい表面にくっついたり、画像が過度に滑らかになったりすることがあります。
移動結果が改善される間だけ一貫性を高めてください。手の輪郭が二重のエッジを形成する場合は、ワークフローがそれを露出する関連する時間的影響を減らし、間隔を短くするか、失敗したアンカーを修正してください。最高の設定が最高のカートゥーンを生み出すとは思わないでください。
フローには意味のある対応が必要です。もし生成パスが現代の車を異なる形状の車に変えたり、人の顔を別のシルエットで再描画したりした場合、元のモーションフィールドはその新しいジオメトリを信頼できる説明ができません。上流の変換を修正します。最終的な平滑化パスは表面の変化を減らすことができますが、失われた元の設計を確実に回復することはできません。
図面を洗い流すことなく残留フリッカーを終了する
DaVinci Resolve Studioは、カートゥーンのデザインと動きがすでに受け入れられた後に役立ちます。高度な時間的ノイズリダクションと追加のデフリッカー効果により、残りの変動に対処できます。これらのStudio機能は、Freeエディションで利用可能であるとは限りません。
意図したタイムベースのタイムラインにスタイリッシュなショットをインポートし、比較のためにクリーンなバージョンを保持してください。最初にショット間で露出と色を合わせて、グレーディングの不一致がスタイルの変更に見えないようにします。1つの問題のあるショットに利用可能なフリッカーまたは一時的な処理の少量を適用し、被写体が動く間に未処理のバージョンと比較してください。
目、指、髪の毛の先、動く輪郭を体格でチェック。治療が細い線を塗りつぶしたり、薄い前の顔を残したり、生地が溶けたペンキのように見える場合は、後ろに下がってください。実用的な場合は、ノイズの多いパッチを隠すためにフレーム全体を柔らかくするのではなく、影響を受けた領域に修正を制限してください。
安定した間違った顔はまだ間違っています。アイデンティティや解剖学が変わったら、参照、キーフレーム、または生成段階に戻ります。仕上げは、その構造作業が完了した後のわずかな残留変動に最も役立ちます。
モーション、テクスチャ、アイデンティティを別々にレビューする
個々のフレームで一時停止する前に、通常の速度で各ショットを見てください。いくつかの魅力的なスクリーンショットは、気を散らす輝きを隠すことができます。孤立したフレームは、無害な描かれたバリエーションが動いているように感じるよりも悪く見えることもあります。
次に、フレームごとに最もリスクの高いイベントを調べます:プロフィールに変わる、顔を覆う手、速い指、口を開ける、フレームを離れる対象、そして新たに明らかになった背景。一致する時間にソースとそれらの瞬間を比較してください。
複数の人については、ショット全体を通して、端に近い人や他の被写体の後ろにいる人を含め、すべての顔をチェックしてください。同じ人ごとのレビューの規律は、人々を認識しながらグループ写真をアニメーション化するときに役立ちます。良い中央の顔も良いオープニングフレームも十分ではありません。
ショットを再構築し、有用なマスターをエクスポートする
承認されたショットを元の順序で編集に戻します。別のシーンにテクスチャを持ち込まずに、カット全体で漫画の色と線の密度を合わせます。新しい声やサウンドデザインを意図的に必要としない限り、元のサウンドを別のトラックに保持してください。
最初の同期、明確な中間アクション、そして最後を比較してください。生成されたクリップがジェスチャーの長さやペースを変更した場合、オーディオを元のものに置き換えても、自動的にパフォーマンスが復元されるわけではありません。フィットするバージョンをトリムまたは選択してください。重要な口やジェスチャーのキューが整列しなくなった場合は、影響を受けたショットを修復してください。
ステージ間で繰り返し圧縮されたエクスポートを避け、配信寸法と意図されたフレームレートで高品質のマスターをエクスポートします。作業プロジェクトの外で再度開いて、最後まで見てください。小さなプラットフォームバージョンを作成する前に、実際の最初と最後のフレーム、サウンドアライメント、クロップ、および透明レイヤーの要件を確認してください。
ソース、承認されたアンカー、ワークフロー設定、プロジェクト、マスターを一緒に保持してください。これらのファイルにより、キャラクターデザインの残りを保存しながら、後のショットを修復することが可能になります。
漫画のフリッカーに関する質問
時間を超えてフレームを関連付ける方法と共有ビジュアルリファレンスを使用してください。シード、フレームレート、スムージングなどの設定は、問題の一部しか解決しません。
固定された種はちらつきを止めますか?
固定シードは利用可能な生成過程を繰り返しやすくすることができますが、異なる入力フレームを同一にしたり、共有された時間的対応を与えたりすることはありません。プロンプトを保持し、有用な場合はモデル化し、実際のビデオまたは伝播方法を使用して移動結果を確認してください。すべてのアプリがシードコントロールを公開していると仮定しないでください。
スタイライゼーションや一貫性を完全に上げるべきですか?
必要なソース機能を保持しながら、承認された外観に到達するために十分なスタイリングを使用してください。より過激な変換は形状のドリフトを増加させる可能性があります。過剰な時間的影響はトレイルを作成したり、描画されたテクスチャを消去したりする可能性があります。短い下書きを比較し、実際に提供されているワークフロー内の関連するコントロールを1つずつ変更してください。
フレーム補間はスタイルのちらつきを取り除くことができますか?
補間は中間モーションサンプルを作成します。元のフレーム間でデザインを変更する顔、衣装、またはテクスチャを信頼性高く修復しません。最初に見た目を安定させ、配達にスムーズな動きが必要かどうかを別々に決定してください。意図的にステップされたカートゥーンのタイミングは、偶然の視覚的な輝きとも異なります。
これを支払わずにできますか?
EbSynthは現在、720 p MP 4エクスポートによるコア機能を提供していますが、より高い解像度とアルファ配信には適切なアップグレードが必要です。ComfyUIはローカルで実行できますが、互換性のあるモデル、ハードウェア容量、およびホストサービスの料金はまだ重要です。Dreaminaで、利用可能な編集モードと見積もりの生成を確認してください。輸出アクセスと商業活動の許可は別々の決定です。
長い動画をどのように処理しますか?
難しい短い抜粋に対してスタイルと修復方法を開発し、一貫した参考文献を使ってショットごとに作業してください。新しい角度や照明の変更でキャラクターを再確認してください。編集のタイミングとオーディオを保持し、後で承認されたショットに参加してください。単一の長いリクエストは、失敗を見つけて置き換えることをより困難にします。
リアルタイムプレビューは最終レンダリングが即座に行われることを意味しますか?
プレビュー速度、オプティカルフロー計算、完全なスタイライゼーションレンダリングは異なるワークロードです。モデルの体格、解像度、クリップの長さ、ハードウェア、および選択された処理ステージが結果に影響します。適切な動くショットを生成するかどうかによってワークフローを選択し、実際のエクスポートにかかる時間を測定してください。
ルックを構築し、パフォーマンスを通してそれを実行してください
クリアなフレームと控えめなカートゥーンブリーフでDreaminaを始めましょう。見た目がうまくいったら、難しいショートショットでサポートされているビデオルートを試してみてください。より連続性が必要な場合は、キーフレームプロパゲーションまたは互換性のある制御ビデオワークフローを使用し、残っている小さな変動のために仕上げを保存してください。他の映像に拡大する前に、感動的なパフォーマンスを承認してください。