arrmansa/Basic-UI-for-GPT-J-6B-with-low-vram

A repository to run gpt-j-6b on low vram machines (4.2 gb minimum vram for 2000 token context, 3.5 gb for 1000 token context). Model loading takes 12gb free ram.

语言：Jupyter Notebook · GitHub 星标：113 · Fork：12

话题：gpt · gpt-neo · transformers

在 GitHub 上查看原仓库