ローカルモデルの提供

Ollama GPU サーバー

GPU を備えた専用インフラ上でのプライベート Ollama 推論。

NVIDIA GPU オプション専用 CPU・RAMNVMe SSD ストレージUbuntu 対応のデプロイ
Ollama GPU サーバーのプレビュー
製品概要

Hosthink がホストするOllama GPU サーバー

共有 SaaS 実行環境にプロンプトを送らず、プライベート GPU サーバー上の Ollama でローカル推論、社内アシスタント、モデルテストを実行できます。

製品概要GPU を備えた専用インフラ上でのプライベート Ollama 推論。
対象ユーザー社内コパイロット · プライベートチャットボット · RAG プロトタイプ · オフライン推論ラボ
ローカルモデルの提供NVIDIA GPU オプション · 専用 CPU・RAM · NVMe SSD ストレージ · Ubuntu 対応のデプロイ · プライベートネットワーク利用可能
ワークフローの流れ

Ollama GPU サーバーの設定手順

ページでの検討から稼働中の Hosthink サービスへ進む前に、製品フローを簡単に確認できます。

01

GPU の適合性を確認

モデル、メモリ、ワークロード特性に合う GPU サーバー系列から始めます。

02

スタックの要件を確認

Ollama、DeepSeek、プライベート LLM スタック、または幅広い AI GPU サーバー構成から選びます。

03

引き渡しを準備

Hosthink が設定手順を明確にし、サーバーを AI ワークフローに接続しやすくします。

04

利用増加に合わせて調整

モデル規模、同時実行数、ストレージ要件が変わったら、より大きな GPU・スタック構成に移行できます。

モデルサイズ → VRAM

モデルに必要なGPUメモリ

VRAMはGPU上のメモリで、サーバーのRAMはCPU側のメモリです。Ollamaはモデル全体がVRAMに収まる場合にのみGPUだけで実行します。収まらない場合は一部がシステムRAMに読み込まれてCPUで処理され、速度が低下します。

すべての列を表示するには横にスクロールしてください。

モデルクラスOllamaの例(4ビット Q4_K_M ダウンロードサイズ)見込むべきVRAM
7–8Bllama3.1:8b · 4.9 GB
qwen3:8b · 5.2 GB
8 GB+
12–14Bgemma3:12b · 8.2 GB
qwen3:14b · 9.3 GB
16 GB+
27–32Bgemma3:27b · 17 GB
qwen3:32b · 20 GB
24 GB(短いコンテキスト) · 32 GB+
70Bllama3.3:70b · 43 GB
llama3.1:70b · 43 GB
48 GB(短いコンテキスト) · 80 GB+
235B MoEqwen3:235b · 142 GB160 GB+(マルチGPU)
405Bllama3.1:405b · 243 GB256 GB+(マルチGPU)
モデルの重み4ビットでは、重みはパラメータ10億あたり約0.5GBを占めます(パラメータ数 × ビット数 ÷ 8)。Q4_K_Mのダウンロードはこれより少し大きいため、Ollamaのダウンロードサイズを出発点にしてください。
コンテキストと並列リクエストKVキャッシュはコンテキスト長と並列リクエスト数に応じて増えます。Ollamaによると、必要メモリはOLLAMA_NUM_PARALLEL × OLLAMA_CONTEXT_LENGTHに比例して増加します。既定のコンテキストはVRAMによって変わるため(24GiB未満は4k、24–48GiBは32k、48GiB以上は256k)、サイジング時にはコンテキスト長を明示的に設定してください。
モデルが収まらない場合モデルが1基のGPUに収まらない場合、Ollamaはサーバー内のすべてのGPUに分散し、一部のレイヤーをシステムRAMに配置することもあります。ollama psでCPU/GPUの割合を確認できます。これらの数値はサイジングの目安であり、実測の速度・レイテンシ・スループットではありません。
Hosthink GPUカタログ

掲載中のGPUと適したモデルサイズ

このページの生成時にHosthinkの公開サーバーカタログから読み込んでおり、在庫は随時変わります。Starter・Pro・Advancedの価格は参考開始価格であり、特定のGPUを確保するものではありません。GPUモデル、VRAM、ロケーション、最終的な月額料金は、現在の在庫に基づいて見積もりで確定します。

すべての列を表示するには横にスクロールしてください。

GPUVRAM目安のモデル(4ビット)カタログ状況ロケーション
1× NVIDIA RTX A400016 GB12–14B現在提供不可Amsterdam
1× NVIDIA GeForce RTX 409024 GB27–32B(短いコンテキスト)在庫ありMoscow
1× NVIDIA GeForce RTX 309024 GB27–32B(短いコンテキスト)現在提供不可Paris, Amsterdam, Moscow
1× NVIDIA RTX A500024 GB27–32B(短いコンテキスト)現在提供不可Paris, Amsterdam, Moscow
1× NVIDIA GeForce RTX 509032 GB27–32B在庫ありMoscow
1× AMD Radeon AI PRO R970032 GB27–32B現在提供不可Amsterdam
2× NVIDIA GeForce RTX 40902 × 24 GB = 48 GB70B(短いコンテキスト)在庫ありMoscow
2× AMD Radeon AI PRO R97002 × 32 GB = 64 GB70B(短いコンテキスト)現在提供不可Moscow
2× NVIDIA GeForce RTX 50902 × 32 GB = 64 GB70B(短いコンテキスト)現在提供不可Paris, Amsterdam
1× NVIDIA H100 80GB80 GB70B現在提供不可Ashburn, Chicago, Dallas +4
3× AMD Radeon AI PRO R97003 × 32 GB = 96 GB70B在庫ありMoscow
4× NVIDIA GeForce RTX 40904 × 24 GB = 96 GB70B在庫ありKeflavik
8× NVIDIA RTX PRO 6000 Blackwell Server Edition8 × 96 GB = 768 GB405B(マルチGPU)現在提供不可Tokyo, Amsterdam, Ashburn +8

カタログ表記でGPUメモリが明確でない、またはGPUがオプションである11件のGPU掲載は表示していません。これらのVRAMは見積もりで確定します。

ハードウェア専用サーバー:見積もりに含まれるGPU、CPU、RAM、NVMeストレージは他のお客様と共有されません。
アクセスサーバーへのSSHアクセス。どのモデルを取得・実行・公開するかはお客様が選べます。
管理範囲Ollama、GPUドライバー、モデルのインストールと更新、サービスの監視を誰が担当するかは、デプロイ前に確定します。

GPUサーバー、価格、在庫を見る · 出典(2026-10-30確認): Ollama context length, Ollama FAQ, Ollama hardware support, Ollama library.

料金

Starter・Pro・Advanced プラン

GPU 在庫と最終構成はデプロイ前に確認. 管理範囲はデプロイ前に確定します.

GPU Starter

参考開始価格
$199/月
入門向け GPU
小型モデルGPU 在庫と最終構成はデプロイ前に確認管理範囲はデプロイ前に確定します
GPU 在庫を見る

GPU Pro

参考開始価格
$399/月
ミドルクラス GPU
チーム向け推論GPU 在庫と最終構成はデプロイ前に確認管理範囲はデプロイ前に確定します
GPU 在庫を見る

GPU Advanced

参考開始価格
$799/月
大容量 VRAM の GPU
より大きなモデルGPU 在庫と最終構成はデプロイ前に確認管理範囲はデプロイ前に確定します
GPU 在庫を見る
用途

対応する実際のワークフロー

AI、自動化、社内ツール、運用スタックでOllama GPU サーバーを使うチーム向けの、実践的なデプロイ例です。

社内コパイロット

プライベートチャットボット

RAG プロトタイプ

オフライン推論ラボ

機能

機能

01

プライベート推論エンドポイント

02

GPU アクセラレーション

03

モデルライブラリのワークフロー

04

SSH アクセス

05

専用ハードウェアの選択肢

06

他テナントとの実行環境共有なし

技術仕様

本番運用の基盤

01

NVIDIA GPU オプション

02

専用 CPU・RAM

03

NVMe SSD ストレージ

04

Ubuntu 対応のデプロイ

05

プライベートネットワーク利用可能

06

GPU 在庫と最終構成はデプロイ前に確認

07

管理範囲はデプロイ前に確定します

GPU と CPU の比較

GPU は AI ワークロードの形を変える

CPU のみの推論は小さなモデルやバックグラウンド処理には使えますが、対話型アシスタント、検索ワークフロー、大きなローカルモデルには、実用的な操作感のために並列アクセラレーションが必要です。

01

応答遅延を短縮

生成の各段階が重要なチャット、コード、エージェントのループで、GPU が待ち時間を減らします。

02

大きなモデルへの余裕

VRAM は、量子化モデルやフルサイズモデルを実用的なコンテキスト長でどれだけ快適に実行できるかを左右します。

03

より多くの同時実行

複数ユーザーに提供するチームには、単一ワークステーションのような処理ではなく、予測可能なスループットが必要です。

04

プライベートデプロイの制御

外部 AI プラットフォームに依存せず、モデル、実行環境、ネットワーク公開範囲、更新頻度を自分で選べます。

推奨ワークロード

見出しではなくモデルに合わせてサーバーを選定

小型ローカルモデル

7B-13B
入門向け GPU / 量子化
社内アシスタントの試作プロンプトテストと軽量 RAG単一チームでの利用

本番推論

30B-70B
大容量 VRAM を推奨
ナレッジアシスタントエージェントのバックエンドと API 提供より多くの同時実行とコンテキスト

高度な AI スタック

Multi-GPU
エンジニアと構成を選定
大規模なプライベート LLM デプロイ複数モデルのエンドポイント企業向けの分離要件
推奨スタック

GPU インフラとホスト型 AI ツールを組み合わせる

プライベート AI サーバーが推論を担当し、ホスト型アプリがユーザー画面、ワークフロービルダー、社内データ層を周囲に提供できます。

よくある質問

主なご質問

モデルのデータは非公開ですか?
はい。サーバーはお客様のサービス専用で、モデルの通信はお客様のデプロイ環境内に保持されます。
GPU の容量を選べますか?
はい。現在の在庫とモデルの要件に応じて選択できます。
OllamaのモデルにはどれくらいのVRAMが必要ですか?
Ollamaライブラリの4ビットのダウンロードサイズを出発点に、コンテキストとランタイム用の余裕を加えてください。8Bモデルで約5GB、14Bで9GB、32Bで20GB、70Bで43GBです(Q4_K_M)。長いコンテキストや並列リクエストには、さらにVRAMが必要です。
すべての AI 処理に GPU が必要ですか?
必ずしも必要ではありません。ホスト型アプリは外部モデル API を利用でき、プライベートなローカル推論では通常 GPU が役立ちます。
サーバー構成を提案できますか?
はい。モデル系列、VRAM、同時実行数、ストレージ要件に合わせて選定できます。
パブリッククラウド GPU と同じですか?
いいえ。これらのページは専用またはプライベート GPU サーバーのデプロイを紹介しており、共有 SaaS モデルエンドポイントではありません。
サーバーのRAMとGPUのVRAMは同じですか?
いいえ。VRAMはGPU上のメモリで、サーバーのRAMはCPU側のメモリです。モデルがVRAMに収まらない場合、Ollamaなどのランタイムは一部をシステムRAMに読み込めますが速度が低下するため、GPUはモデルに合わせて選定してください。
参考価格で特定のGPUが確保されますか?
いいえ。Starter・Pro・Advancedの価格は参考開始価格です。GPUモデル、VRAM、ロケーション、最終的な月額料金は、現在の在庫に基づいて見積もりで確定します。
プライベート AI サーバー

Hosthink でOllama GPU サーバーをデプロイ

Hosthink のデザイン、請求、サポートフローを維持しながら、インフラスタックに AI とアプリのワークロードを追加できます。

GPU 在庫を見る