Python Portal

Наткнулся тут на годную штуку — Gemma

Если хочешь дообучать LLM (большие языковые модели) на легке — это именно то, что надо!

Что умеет:

⏩Поддержка LoRA, PEFT, шардирования и мультимодальности

⏩Тонкая настройка токенизации

⏩Простая интеграция и 100% open-source

pip install gemma — и ты уже в деле

Начните здесь: https://gemma-llm.readthedocs.io/en/latest/

👉 @PythonPortal

Please open Telegram to view this post

VIEW IN TELEGRAM

👍13❤3🏆1

www.tgoop.com/PythonPortal/4123

6.74K viewsMar 24 at 16:07

Наткнулся тут на годную штуку — Gemma

Если хочешь дообучать LLM (большие языковые модели) на легке — это именно то, что надо!

Что умеет:

⏩Поддержка LoRA, PEFT, шардирования и мультимодальности

⏩Тонкая настройка токенизации

⏩Простая интеграция и 100% open-source

pip install gemma — и ты уже в деле

Начните здесь: https://gemma-llm.readthedocs.io/en/latest/

👉 @PythonPortal