unslothai/unsloth

Add support for LISA ?

Open

#285 建立於 2024年3月28日

在 GitHub 查看
 (4 留言) (0 反應) (0 負責人)Python (5,658 fork)batch import
feature requesthelp wanted

倉庫指標

Star
 (64,271 star)
PR 合併指標
 (平均合併 3天 15小時) (30 天內合併 525 個 PR)

描述

Hello any plans to support with LISA ?

Arxiv: https://arxiv.org/pdf/2403.17919.pdf

how it compares in the terms of VRAM usage ? standard 16 bit model fine tuning ?

貢獻者指南