Anúncio

Privum

Construímos, protegemos e operamos sua infraestrutura digital.

Software, sistemas de IA, testes de intrusão e cloud segura para empresas.

Falar com a Privum

RecursiveSI/flint

22d

Idade

125

Curtidas

Coletado

New text-generation model. Tags: flint, text-generation, conversational, license:apache-2.0

Quanto custa rodar isto

39.8B params · 32,768 Contexto

PrecisãoPrecisa deMais barato que cabe
16 bits89GBGB10$0.24/h
8 bits44GBGB10$0.24/h
4 bits22GBRTX 3090$0.10/h

Pesos mais cache de atenção, com 15% de folga para ativações e o alocador. Tudo aqui é aritmética — não medimos velocidade, então não classificamos chip por ela. Ver todos os preços de GPU

Leia o artigo completo em huggingface.co

O overfeed.news indexa e aponta. Publicamos um trecho curto — o artigo completo fica em Hugging Face New Models.

Entre para seguir esta fonte
RecursiveSI/flint — overfeed.news