Skip to content
CllsPyPublic

About

ChatBot Running On CPU

Topics

Resources

Stars

0 stars

Watchers

0 watching

Forks

Latest commit

 

History

12 Commits

Folders and files

NameName
Last commit message
Last commit date
 
 
 
 
 
 
 
 

Repository files navigation

THIS TEXT IS A WORK ON PROGRESS

medlite

O objetivo do projeto era experimentar com LFM2-1.2B-GGUF. Por se apresentar um modelo leve sendo capaz inclusive de rodar via CPU. Pelo seu tamanho, tarefas como condificação apresentam grande limitações.

Porque?

Partimos do pressuposto de que uma qualidade maior de parâmetros implica modelos melhores, nessa direção o uso dos modelos generativos se restrige a quem possui grande poder de harware, a alternativa os Small Language models se provaram democráticos e eficientes em certas tarefas quando treinados com dataset específicos Ronen Eldan & Yuanzhi Li, 2023

Demo

mlite.mp4

About

ChatBot Running On CPU

Topics

Resources

Stars

0 stars

Watchers

0 watching

Forks

Releases

Packages

Contributors

Languages