overfeed.news

inclusionAI/Ling-3.0-tiny

2mês

Idade

330

Curtidas

12K

Downloads

Publicado
Coletado

Quanto custa rodar isto

7.9B params · 32,768 Contexto

PrecisãoPrecisa deMais barato que cabe
16 bits24GBRTX 3090$0.12/h
8 bits12GBTesla P100$0.03/h
4 bits6.0GBGTX 1660 S$0.02/h

Pesos mais cache de atenção, com 15% de folga para ativações e o alocador. Tudo aqui é aritmética — não medimos velocidade, então não classificamos chip por ela. Ver todos os preços de GPU

New text-generation model. Tags: bailing_hybrid, text-generation, conversational, custom_code, license:mit

Leia o artigo completo em huggingface.co

O overfeed.news indexa e aponta. Publicamos um trecho curto — o artigo completo fica em Hugging Face New Models.

Entre para seguir esta fonte
inclusionAI/Ling-3.0-tiny — overfeed.news