Anuncio

SRExpert

Deja de saltar entre 6 herramientas de Kubernetes.

Monitoreo, alertas, seguridad, despliegues Helm y operaciones con IA en una sola plataforma.

Probar 30 días gratis

pipecat-ai/phonellm-alpha-1

2mes

Antigüedad

72

Me gusta

64

Descargas

Recolectado

New text-generation model. Tags: nemotron_h, text-generation, nemotron, mixture-of-experts, voice-agent, phone, tool-use, function-calling

Lo que cuesta correr esto

31.6B params · 32,768 Contexto

PrecisiónNecesitaEl más barato que lo soporta
16 bits70GBGB10$0.24/h
8 bits35GBGB10$0.24/h
4 bits17GBRTX 2080 Ti$0.07/h

Pesos más caché de atención, con un 15% extra para activaciones y la sobrecarga del asignador de memoria. Todo aquí es aritmética: no medimos velocidad, así que no ordenamos los chips por ella. Ver todos los precios de GPU

Lee el artículo completo en huggingface.co

overfeed.news indexa y enlaza. Publicamos un extracto breve; el artículo completo sigue en Hugging Face New Models.

Inicia sesión para seguir esta fuente
pipecat-ai/phonellm-alpha-1 — overfeed.news