Capability map
表現マップ
静止画・声・音楽は生成AIで作り、動き・編集・字幕はすべてコードで組む、という分担で何が作れるかを整理しました。 「生成動画」が要るものは Higgsfield を使う候補です。
ツールごとにできること
動き
HyperFrames + GSAP / Canvas / SVG / Three.js
- キネティックタイポ・図形・パス描画
- パン・ズーム・パララックスのカメラワーク
- パーティクル・3D・グラフ・地図
- 字幕・カラオケ字幕・配信 UI の再現
- 決定論的に再現するゲーム画面
- キャラが全身で自然に動く作画アニメ
- 実写映像
画像
codex gpt-5.6-sol
- アニメ調・白黒漫画・水彩・ピクセルアート・製品写真風
- 背景美術・キャラ立ち絵(緑背景→透過)
- 参照画像からの差分(口の開閉・目閉じ・表情違い)
- 画像内の正確な日本語文字(HTML で重ねる)
- 大量の連番作画(1枚約80秒)
音声(演技)
ElevenLabs eleven_v4
- 感情タグによる演技
- キャラボイス
- 文字単位タイムスタンプ(口パク・カラオケ字幕)
- 月4万文字の枠を超える量
音声(掛け合い)
Gemini gemini-3.8-flash-tts
- 複数話者の自然な掛け合いを1回で生成
- 30種の声
- 英語タグでの読み方指示
- 日本語での演技指示(読み上げられてしまう)
効果音
ElevenLabs Sound Effects
- ヒット・ウーシュ・歓声・環境音を説明文から生成
音楽
Suno(v6-mini)/ コード合成
- オリジナル歌詞の日本語歌もの
- ジャンル指定のインスト BGM
- チップチューン・オルゴール・ジングルをコードで合成
- 拍検出でカットを曲に合わせる
- 秒単位の構成指定
- 無料プランでは保存7曲まで・歌ものは1分前後
ジャンル × 技法
| ジャンル | 見え方 | 主な技法 | 素材 | 生成動画 |
|---|---|---|---|---|
| モーショングラフィック | 図形とタイポが音に合わせて組み替わるリール | SVG パス描画・キネティックタイポ・マスク | Suno・効果音 | 不要 |
| 3D モーション | 抽象 3D オブジェクトの回転と変形 | Three.js・ライティング | Suno | 不要 |
| アニメ PV | オリジナルアニメの告知 PV | 静止画のカメラワーク・スピード線・フラッシュ | codex アニメ画・ElevenLabs・Suno 歌もの | あると広がる |
| 漫画動画 | 白黒漫画のコマを追い、吹き出しと声優の演技 | コマ送りカメラ・縦書き吹き出し・描き文字 | codex 漫画コマ・ElevenLabs 複数キャラ | 不要 |
| VTuber 切り抜き | まばたき・口パクする立ち絵と流れるコメント | 差分切り替えの口パク・配信 UI | codex 立ち絵+差分・ElevenLabs | 不要 |
| 教育系 | 図解が段階的に組み上がる科学解説 | SVG 図解・クイズ演出 | ElevenLabs ナレーション・Suno lofi | 不要 |
| 掛け合い解説 | 2キャラの掛け合いでトピックを解説 | 話者別字幕・立ち絵ハイライト | Gemini 複数話者・codex キャラ | 不要 |
| ゲーム実況 | プレイ画面+実況ワイプ+バラエティ風テロップ | Canvas で決定論的にゲームを再現 | ElevenLabs 実況・コード合成チップチューン | 不要 |
| 製品 PV | 架空ガジェットのローンチ映像 | マクロ風カメラワーク・スペック表示 | codex 製品写真・Suno | あると広がる |
| 歌詞動画 / MV | 歌に合わせて歌詞が動くリリックビデオ | 歌詞のタイミング同期・タイポ | Suno 歌もの・codex 背景 | 不要 |
| ニュース番組風 | テロップ・ティッカー・図解のニュース | ロワーサード・ティッカー・地図 | Gemini 2話者・コード合成 BGM と時報 | 不要 |
| データビジュアライゼーション | 数字の変化で語るグラフアニメ | 自作グラフ・カウントアップ | Gemini ナレーション・Suno lofi | 不要 |
| 縦型ショート | 9:16、単語ごとに強調する字幕 | カラオケ字幕・テンポ編集 | ElevenLabs・Suno | 不要 |
| ホワイトボードアニメ | 手描き線が描かれていく説明 | SVG ストローク描画・手描きフォント | ElevenLabs ナレーション・codex の手 | 不要 |
| 絵本の読み聞かせ | 水彩の絵本をめくりながら朗読 | ページめくり・Ken Burns | codex 水彩画・ElevenLabs 朗読・コード合成オルゴール | 不要 |
| 実写映像・実写広告 | 人物・風景・料理のシズル、UGC 風広告 | 生成動画 | Higgsfield | 要 |
| 作画アニメ | キャラが全身で自然に動くアニメーション | 静止画からの動画化 | codex 原画 → Higgsfield | 要 |
| トーキングアバター | 写実的な人物が話すリップシンク | 生成動画のリップシンク | Higgsfield | 要 |
同じ手法で作れる次の候補
- ランキング(TOP5 カウントダウン)
- ポッドキャスト(オーディオグラム)
- 怪談朗読
- 映画予告編風
- レシピ動画
- 占い・診断
- 歴史解説(地図+年表)
- 語学学習
- 決算・IR 解説
- イベント告知
- 楽曲ビジュアライザ