AIモデルAI アーキテクチャ ドキュメント GitHub 開発版
JA
ダウンロード

想像する。生成する。創り出す。

AI Desktop Studio

画像から音、動画から3Dまで。同じプロジェクトで生成し、作品を磨き上げます。

ローカル・クラウドモデル macOS、Windows、Linux オープンな形式

ホーム · 出発点

ここでアイデアが形になる。

画像、音、シーン、参考資料をひとつのプロジェクトに。作業場所を切り替え、パネルを配置し、オープンな形式で保存できます。

ホーム画面。前回のプロジェクトを再開するバナー、最近開いたプロジェクトの一覧、六つのワークショップへのショートカット、みんなが公開した作品のフィード、そしてアカウントのライブラリパネル。
制作
メディアごとの作業場所画像、動画、音声、3D、マテリアル、空。コードのワークスペースでスクリプトを使いシーンを拡張できます。
コンテキスト
プロジェクトのつながり参考資料や指示を生成ツールとアシスタントに共有。試すたびに繰り返す必要はありません。
自由
開かれたファイルOpenRaster、OpenTimelineIO、glTF、MaterialXなら、スタジオの外でも作品を読み込めます。

画像 · 生成とレタッチ

画像

画像を生成し、大切な部分を選択。レイヤーごとに仕上げます。

  • AI適したローカルまたはリモートモデルを選び、スタジオで画像を生成・調整します。
  • 選択ローカルのスマート選択は点や四角形から領域を見つけ、編集の準備を整えます。
  • レタッチレイヤー、マスク、ブラシ、文字、ピクセルアート。手作業のツールとモデルを組み合わせられます。
画像ワークショップ。透明背景のキャンバスに切り抜かれた骨格、左にモデルのカタログ、右にレイヤーとインスペクターのパネル、下にアセットの帯。
AI生成スマート選択レイヤーとマスクピクセルアート

3D · 構成とアニメーション

3D

シーンを構成し、キャラクターを動かす。アイデアに動きを。

  • キャラクター専用の作業場所で骨格を準備し、リグを調整。アニメーションを再利用し、動作状態を組み合わせます。
  • 制作シーンを構成し、地形を彫刻。マテリアル、照明、効果を調整できます。
  • インタラクションスクリプトを追加し、ゲームパッドで操作。スタジオ内でシーンの動作を試せます。
3D ワークショップ。生成された車が山の情景に置かれ、移動ギズモと三角形カウンターが重ねて表示され、右にシーンツリーとインスペクター、下にライトのタイムライン。
リグとアニメーションスクリプト効果ゲームパッド

ワークショップ · 出力 .mp4

動画

二台のモニター、マルチトラックのタイムライン、そしてカットを生み出すモデル。

  • モニターソースとプログラム。編集卓と同じで、片側に選んだクリップ、もう片側に書き出されるとおりの編集結果。
  • タイムライン映像と音声のトラック、選択・レザー・手のツール、タイムコードでの再生。
  • 生成利用可能なモデルでショットを生成し、編集で素材を組み合わせます。
動画ワークショップ。ソースとプログラムのモニターが並び、アセットパネル、クリップのインスペクター、V1・A1・V2・A2 の四トラックのタイムライン。
ソース 00:00:00:00V1 · A1 · V2 · A225 fpsプロジェクトのアセット

ワークショップ · 出力 .wav

オーディオ

複数トラックで音を作り、編集する。ほかと同じウィンドウの中で。

  • トラックマルチトラック編集。映像のタイムラインと同じ道具、同じタイムコードに揃った再生。
  • 波形別プロセスで計算します。一時間の音を解析しているあいだも、UI は固まりません。
  • モデル音楽、環境音、効果音を API で生成し、そのままトラックへ置きます。
オーディオワークショップ。プログラムモニターが編集結果の波形を映し、その下にソースモニター、音の生成モデルのカタログ、四本のオーディオトラックのタイムライン。
プログラム 00:00:00:00A1 · A2 · A3 · A4波形プロジェクトのアセット

マテリアル · チャンネルと3Dプレビュー

マテリアル

画像ではなくマテリアル。チャンネルごとに作り、ごとに確かめます。

  • チャンネル色、法線、粗さ、金属度、遮蔽、高さ、発光、くぼみのチャンネルを確認・編集できます。
  • プレビューマテリアルをテスト形状 — 球、立方体、円柱、平面、ノット — に貼り、リアルタイムに照らしてから書き出します。
  • タイリング繰り返しや継ぎ目を確認し、必要なツールへマップを書き出します。
マテリアルワークショップ。プレビューの立方体がマテリアルをまとい、インスペクターはチャンネル — ベースカラーとノーマル — を、続いてマテリアル設定を開いており、下に生成画像の帯。
4096 × 40968チャンネル形状でプレビュー個別に書き出し

空 · 環境と光

スカイボックス

背景であり、同時に光源でもある空。

  • 投影360°、正距円筒、クロス、六面。書き出し直さずに表示を切り替えられます。
  • コントロール画角を調整でき、テスト用オブジェクトも置けます。つや消しの球と光沢の球で光を見極めるために。
  • 使いどころここで作った空が、そのまま 3D ワークショップのシーンを照らします。
スカイボックスワークショップ。雪山の空を 360 度投影で表示し、地面に二つのテスト球 — 一方はつや消し、他方は鏡面 — を置き、右に太陽の設定。
360°正距円筒クロス六面テスト用オブジェクト

AIモデル · ローカルとクラウド

すべてのAIを。
ひとつの場所に。

画像の作成、キャラクターのアニメーション、アイデアの音声入力、作業の相談。用途に合ったモデルを選び、パソコン上でもリモートでも利用できます。

クラウド事業者 9社ローカルモデル 45件用途に合わせてモデルを選択

クラウド

接続できるサービス。

自分のアカウント、キー、モデルを使用します。生成とアシスタントで、それぞれ別のモデルを選べます。

Scenario

マルチメディア制作とアシスタント

画像、動画、音声、3Dモデル、マテリアル、スカイボックスを作成・変換。アカウントで利用できるモデルと、各生成の設定が表示されます。

画像動画音声3Dマテリアルスカイボックスアシスタント

Tripo

3Dと画像の生成

テキスト、画像、複数の視点から3Dを生成。メッシュのテクスチャ作成、調整、スタイル変更、分割、簡略化や、リグとアニメーションの準備ができます。元画像の生成と編集にも対応します。

Tripo v3.1v3.0v2.5P1P2テクスチャとメッシュリグとアニメーション

好きな事業者で使う、あなたのアシスタント。

対話、制作のサポート、スクリプトの作成。画像解析の可否は選択したモデルによります。

クラウドのカタログはサービスやアカウントの権限によって変わります。各事業者のクレジットと利用条件が適用されます。

お使いのパソコンで

用途別のローカルモデル。

すべての用途とモデルをまとめたローカルカタログ。

アシスタント

4モデル

会話し、依頼を理解して、スタジオの操作を準備します。

Qwen2.5 0.5B InstructQwen2.5 1.5B InstructQwen2.5 7B InstructQwen2.5 14B Instruct

コード

2モデル

シーン用のスクリプトを作成・修正します。

Qwen2.5-Coder 1.5B InstructQwen2.5-Coder 7B Instruct

画像とマテリアル

8モデル

生成、レタッチ、インペインティング、画像拡張、参照画像、ガイダンス。対応モデルはマテリアルにも利用できます。

SSD-1BSana 600MSana 1600MSANA 1.5 1.6BQwen-ImageQwen-Image-EditControlNet Canny SDXLIP-Adapter SDXL

背景除去と選択

1モデル

点や矩形から領域を切り出し、マスクを調整します。

EfficientSAM-Ti

動画

5モデル

モデルに応じて、テキストからの生成、画像のアニメーション化、動画の変換を行います。

CogVideoX 2BWan 2.1 T2V 1.3BWan 2.2 TI2V 5BMochi 1Wan 2.1 I2V 14B

音楽とサウンド

6モデル

音楽を作成・変換し、動画に合わせた音声を生成します。

ACE-Step 1.5 XL TurboACE-Step 1.5 XLACE-Step 1.5 XL SFTMMAudio SmallMMAudio MediumMMAudio Large

3Dオブジェクトとシーン

10モデル

テキストや画像から3Dモデルを作成し、その形状を変更します。

Shap-ETripoSRShap-E ImageTRELLIS.2 4BCraftsMan3DInstantMeshLGMTripoSGTRELLIS TextTRELLIS Image

スカイボックスとパノラマ

5モデル

テキストや画像からパノラマ環境を作成します。

PanFusionMVDiffusionDiffusion360UniPanoGenEx World Initializer

リギング

1モデル

キャラクターの骨格とスキニングのウェイトを自動で準備します。

Make-It-Animatable

アシスタントの記憶

1モデル

会話や保存済みの情報を意味に基づいて検索します。

EmbeddingGemma 300M

モーション

1モデル

テキストから動きを生成。カタログには登録されていますが、ダウンロードはブロックされており、ユーザーによるインポートが必要です。

Kimodo SOMA RP v1.1
ダウンロード提供なし

音声入力

1モデル

音声をクラウドに送らずにテキストへ変換します。

Parakeet TDT 0.6b v3

自分のライブラリも

Ollamaとお持ちのGGUFファイル。

対応するOllamaモデルを探すか、アシスタント用のGGUFファイルをインポートできます。使用するモデルは自分で管理できます。

ローカルモデルはインストールが必要です。利用可否はエンジン、メモリ、ハードウェアに依存し、モデルごとのライセンスが適用されます。Kimodoは登録されていますが、ダウンロードはブロックされています。このカタログには現在、AI拡大とベクター化用のエンジンは登録されていません。

あなたのモデル、あなたのプロジェクト

あなたに合ったAI。

作りたいものに合わせてモデルを選択。ローカルでもクラウドでも、同じスタジオで作業できます。

インターフェース
ワークショップ

あなたの作業空間

パネルやタブを配置し、別ウィンドウに切り離せます。各作業場所の配置は次のセッションでも保持されます。

エンジン

作業を再開

文書は保存された状態から再構築され、独立パネルでも同様です。この仕組みが保存と取り消しも支えます。

ライブラリ

プロジェクトのフォルダー

スタジオなしでもファイルを閲覧。Gitで版、ブランチ、競合を管理できます。読み込み、書き出し、ライブラリはアプリ外で移動した素材も見つけます。

モデルと生成
モデル

選んだモデルの設定

生成の種類に応じた各モデルのオプションを、ひとつのパネルで確認できます。

生成

試行を見渡す

生成を追跡し、結果をプロジェクトの他の素材と一緒に確認できます。

シークレット

画面から分離した鍵

鍵はシステム経由で暗号化されます。画面には秘密情報ではなく接続状態が渡されます。

あなたのマシンで
ローカルAI

コンピューター上のモデル

対応モデルをダウンロード・管理。利用可否は操作、モデル、コンピューターのリソースに依存します。

MCP サーバー

スタジオは外から動かせる

文書、画像、シーン、アニメーション、設定、ファイル。公開されたMCP操作を通じて外部アシスタントを接続できます。

負荷

バックグラウンド処理

サムネイル、波形、重い形状処理、動画エンコードはGPUや画面処理とは別のタスクで行います。

インストール

三つのプラットフォーム、ひとつのリポジトリ。

お使いのコンピューター向けの公開版をダウンロードできます。

インストーラーは利用規約に従い、ソースコードは PolyForm Noncommercial 1.0.0ライセンスに従います。クラウドサービスはご自身のアカウントとクレジットを使用します。ローカルモデルにはそれぞれの利用条件が適用されます。

git clone https://github.com/pasquelin/AIDesktopStudio.git
pnpm install
pnpm start
プロジェクト ai-desktop-studio ワークショップ ホーム 位置 00:00:00:00