A COLEÇÃO OMBRAHOST / computação GPU

Computação GPUAbra espaço para ideias maiores.

Configurações NVIDIA de acelerador único com 24, 48 ou 80 GB de memória GPU e alocações separadas de memória do host. Combine cargas de trabalho de inferência, renderização ou treinamento selecionado com o orçamento de memória real e a imagem suportada.

3configurações
4destinos compatíveis
$929.10planos mensais a partir de
Explore as configurações
OS DETALHES VÊM PRIMEIRO

Encontre o seu ideal.

Veja o acelerador, a memória de vídeo e os recursos de suporte em conjunto.

3 configuraçõesInclusões completas. Totais de ciclo completo.
Computação GPU

Spectre 4090

Combine um NVIDIA RTX 4090 com 24 GB de memória GPU, 64 GB de memória do host e 1 TB de armazenamento NVMe para inferência, renderização e experimentos. Opções de imagem CUDA e um uplink de 10 Gbps suportam sua pilha de software; o ajuste do modelo depende da precisão, do comprimento do contexto e da sobrecarga de execução.

  • AceleradorUm NVIDIA RTX 4090 com 24 GB VRAM
  • Computação8 vCPU (Threadripper)
  • Memória64 GB DDR5
  • Armazenamento1 TB NVMe SSD
  • Transferência20 TB / mês
  • proteção DDoS40 Gbps
  • IPv41 incluído(s)
  • Porta de rede10 Gbps
  • PlataformaBare-Metal
  • IPv6/64 sub-rede
  • Um NVIDIA RTX 4090 com 24 GB VRAM
  • Locais limitados à Islândia, Suíça, Países Baixos e Moldávia
  • Compatibilidade com a pilha PyTorch, vLLM e Ollama
  • 10 Gbps uplink
Locais e software

Ubuntu 22.04 + CUDA 12 · Debian + CUDA 12 · Custom

  • A memória GPU é separada da alocação de 64 GB de memória do host
  • As opções de imagem CUDA estão listadas na seleção de sistema operacional
  • Um modelo 13B FP16 precisa de cerca de 26 GB só para os pesos e excede 24 GB VRAM sem uma estratégia de memória diferente
  • Quantização, comprimento de contexto, cache KV e sobrecarga de execução determinam a adequação do modelo
$929.10/ mês

Cobrado mensalmente

Configure o plano Ver especificações completas
Computação GPU

Spectre A6000

Use um NVIDIA RTX A6000 com 48 GB de memória GPU junto com 128 GB de memória do host ECC e 2 TB de armazenamento NVMe. A alocação maior de memória GPU e o uplink 10 Gbps atendem a fluxos de trabalho de inferência ou treinamento selecionados mais exigentes, com a memória do modelo e do otimizador avaliada antes da implantação.

  • AceleradorUm NVIDIA RTX A6000 com 48 GB VRAM
  • Computação16 vCPU (EPYC)
  • Memória128 GB DDR5
  • Armazenamento2 TB NVMe SSD
  • Transferência30 TB / mês
  • proteção DDoS80 Gbps
  • IPv41 incluído(s)
  • Porta de rede10 Gbps
  • PlataformaBare-Metal
  • IPv6/64 sub-rede
  • Um NVIDIA RTX A6000 com 48 GB VRAM
  • memória do host ECC
  • Fluxos de trabalho selecionados de treinamento e inferência com dimensionamento dependente do modelo
  • 10 Gbps uplink
Locais e software

Ubuntu 22.04 + CUDA 12 · Custom

  • A memória GPU é separada da alocação de 128 GB de memória do host
  • Um modelo 13B FP16 precisa de cerca de 26 GB só para os pesos; gradientes, estado do otimizador e memória de execução são adicionais
  • As opções de imagem CUDA estão listadas na seleção de sistema operacional
  • A viabilidade do treinamento depende da precisão, do tamanho do lote, do otimizador e da estratégia de memória
$2,088.10/ mês

Cobrado mensalmente

Configure o plano Ver especificações completas
Computação GPU

Spectre H100

Crie cargas de trabalho intensivas de acelerador em torno de uma NVIDIA H100 com 80 GB de HBM3, 256 GB de memória do host e 4 TB de armazenamento NVMe. Um uplink de 25 Gbps e uma cota mensal de transferência de 50 TB suportam grandes conjuntos de dados; modelos com muitos parâmetros ainda exigem planejamento cuidadoso de precisão, contexto e memória.

  • AceleradorUm NVIDIA H100 com 80 GB HBM3 GPU de memória
  • Computação32 vCPU (EPYC)
  • Memória256 GB DDR5
  • Armazenamento4 TB NVMe SSD
  • Transferência50 TB / mês
  • proteção DDoS100 Gbps
  • IPv41 incluído(s)
  • Porta de rede25 Gbps
  • PlataformaBare-Metal
  • IPv6/64 sub-rede
  • Um NVIDIA H100 com 80 GB HBM3 GPU de memória
  • Fluxos de trabalho de grandes modelos sujeitos ao dimensionamento de memória
  • 25 Gbps uplink
  • Meta de disponibilidade do catálogo de 99.99%
Locais e software

Ubuntu 22.04 + CUDA 12 · Custom

  • A memória GPU é separada da alocação de 256 GB de memória do host
  • Um modelo 70B FP16 precisa de cerca de 140 GB só para os pesos; um 80 GB H100 exige quantização, offloading ou uma estratégia adequada de múltiplos dispositivos
  • NVLink diz respeito a uma configuração multi-GPU organizada separadamente; este plano especifica um acelerador
  • As opções de imagem CUDA estão listadas na seleção de sistema operacional
$5,508.10/ mês

Cobrado mensalmente

Configure o plano Ver especificações completas

Uma configuração. Um destino. Sua escolha.

Explore regiões de implantação e guias práticos junto com os requisitos exatos do seu projeto.

Explorar casos de uso
UM POUCO MAIS DE CLAREZA

Antes do seu
próximo movimento.

Detalhes práticos para computação GPU, da configuração às escolhas futuras.

Abrir o centro de conhecimento

Estas são especificações de serviço preparadas. Infraestrutura, licenças e serviços opcionais exigem validação antes de um lançamento ao vivo.

GPU COMPUTE / EM DETALHE7 respostas úteis
Quais configurações OmbraHost GPU estão preparadas?+

A linha Spectre lista um RTX 4090 com 24 GB VRAM, RTX A6000 com 48 GB e H100 com 80 GB. Pesos do modelo, cache de contexto, tamanho do lote e sobrecarga de software afetam a adequação. Locais e imagens variam por nível. Modelos instalados, taxas de tokens medidas e alocação de GPU exigem uma integração de provisionamento.

Quanta memória GPU é necessária?+

Pesos FP16 precisam de aproximadamente dois bytes por parâmetro; pesos de quatro bits, aproximadamente meio byte. Reserve espaço adicional para cache de contexto, batching e sobrecarga de execução.

Quais são as escolhas de GPU?+

Spectre 4090 especifica 24 GB VRAM, A6000 48 GB e H100 80 GB. Avalie o modelo real e a precisão antes de escolher.

Um modelo 70B FP16 se encaixará?+

Apenas seus pesos precisam de aproximadamente 140 GB. Um único 80 GB H100 não consegue comportá-los; avalie quantização ou uma configuração multi-GPU adequada.

Posso solicitar vários GPUs?+

arranjos multi-GPU personalizados são uma consulta de vendas preparada. Estoque, topologia NVLink, energia e prazo de entrega devem ser confirmados antes de qualquer compromisso.

Surtos curtos de pesquisa estão disponíveis?+

A fonte descreve um mínimo de sete dias por acordo. Isso permanece uma opção comercial proposta; o checkout atual usa os três ciclos de cobrança publicados.

O Windows pode ser usado?+

Apenas os modelos do catálogo aparecem no seletor padrão. Pedidos de Windows GPU ou imagem personalizada exigem verificações de driver, licença e elegibilidade de implantação.

Um pouco mais de flexibilidade.

OPÇÕES PREPARADAS

Explore serviços opcionais e suas unidades de cobrança. Solicitações de serviços opcionais exigem um provedor conectado antes da execução.

Veil Edge

Perfil de rede preparado com a alocação de mitigação de 10 Gbps, detecção de anomalias e ajuste de latência. Valide sua relação com a proteção já incluída no plano.

$4.75por mês

Eclipse Shield

Perfil de 100 Gbps preparado com regras de aplicação e um caminho de filtragem dedicado. Confirme a capacidade efetiva e a compatibilidade; alguns planos base já especificam capacidade maior.

$19.00por mês

Iron Veil

Uma revisão de linha de base liderada por engenheiro cobrindo orientações CIS, proteção de login, manuseio de chaves e regras de firewall. Este serviço está preparado e ainda não tem engenheiro designado.

$46.55one-time

Vault Mirror

Cópias off-site incrementais diárias preparadas, retenção de sete dias e um destino criptografado compatível com S3. O destino e o procedimento de recuperação exigem validação em produção.

$4.75por mês

Checkpoint

Snapshots agendados e manuais preparados com um limite de retenção de cinco snapshots rotativos. Esta taxa de serviço fixa é separada da taxa de armazenamento por GB proposta.

$2.85por mês

First Light

Uma configuração inicial proposta cobrindo instalação, linha de base de segurança e serviços básicos acordados. O escopo único deve ser confirmado antes do início do trabalho.

$19.00one-time

Shadow Transfer

Um serviço de transferência preparado incluído sem custo com um novo pedido elegível. Inventário, acesso, cutover e rollback são acordados antes da migração.

$0.00one-time

Route Extension

Um endereço IPv4 adicional, sujeito à elegibilidade de alocação e aprovação técnica. Selecionar a opção não reserva nem roteia um endereço.

$1.90por mês