Run LLM locally

Поділитися
Вставка
  • Опубліковано 3 січ 2025

КОМЕНТАРІ • 7

  • @User22005
    @User22005 Місяць тому

    hey broo , i liked it !

  • @mishalchowdhury5610
    @mishalchowdhury5610 Місяць тому

    16GB macbook Air good for Llm? Or a rtx 3060 laptop

    • @harshbhatt7585
      @harshbhatt7585  Місяць тому

      16GB vram macbook air is good. for rtx will depend on how many vram available.

    • @mishalchowdhury5610
      @mishalchowdhury5610 Місяць тому

      @@harshbhatt7585 for LLM is it enough tho? 3060 is 6GB

    • @harshbhatt7585
      @harshbhatt7585  Місяць тому

      @@mishalchowdhury5610 no 6GB won't be enough, it require higher vram gpu 16GB+

    • @mishalchowdhury5610
      @mishalchowdhury5610 Місяць тому

      @@harshbhatt7585 so would you say none of them is woth it?

    • @harshbhatt7585
      @harshbhatt7585  Місяць тому

      16GB vram macbook air is worth than 6GB rtx 3060