Largest LLM and VLM run on laptop

What is the largest LLM and VLM that can be run on a laptop with 16 GB RAM and RTX 3050 8 GB graphics card ? With and Without LoRA/QLoRA or quantization techniques.

submitted by /u/Commercial-Fly-6296 to r/learnmachinelearning
[link] [comments]


Commentaires

Laisser un commentaire

Votre adresse e-mail ne sera pas publiée. Les champs obligatoires sont indiqués avec *