init commit
Browse files
app.py
CHANGED
@@ -28,7 +28,7 @@ accelerator = Accelerator()
|
|
28 |
# Завантажуємо модель на CPU з використанням автентифікації
|
29 |
model = AutoModelForCausalLM.from_pretrained(
|
30 |
model_id,
|
31 |
-
device_map="cpu", #
|
32 |
use_auth_token=hf_token,
|
33 |
low_cpu_mem_usage=True
|
34 |
)
|
|
|
28 |
# Завантажуємо модель на CPU з використанням автентифікації
|
29 |
model = AutoModelForCausalLM.from_pretrained(
|
30 |
model_id,
|
31 |
+
# device_map="cpu", # Пробуйте без цього параметра
|
32 |
use_auth_token=hf_token,
|
33 |
low_cpu_mem_usage=True
|
34 |
)
|