Jan - framework multiplataforma para una alternativa open source a ChatGPT
(github.com/janhq)- 100% local, ejecutable en todo tipo de hardware: desde GPU de NVidia y Apple Silicon hasta clústeres multi-GPU
- El objetivo final es ayudar a que cualquiera pueda incorporar IA fácilmente
- Jan Framework, Jan Desktop Client + Server, Nitro
- Nitro: motor de inferencia de alta eficiencia escrito en C++ (3 MB)
- Llama.cpp + TensorRT + Whisper.cpp + StableDiffusion
1 comentarios
Me pregunto qué tal será su rendimiento en coreano.