HashTagDev commited on
Commit
2c16027
verified
1 Parent(s): 05ff3e6

Des(HashTag): Model Card has been created

Browse files
Files changed (1) hide show
  1. README.md +57 -0
README.md ADDED
@@ -0,0 +1,57 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ ---
2
+ language:
3
+ - es
4
+ base_model:
5
+ - corneille97/llama-2-7b-4bits-turbo
6
+ ---
7
+ # S.A.V.I.O: Sistema de Acesoria Virtual e Inteligencia en Operaciones
8
+ SAVIO es un modelo de lenguaje ajustado espec铆ficamente para tareas de an谩lisis y respuesta en contexto, con integraci贸n de capacidades de RAG (Retrieval-Augmented Generation). Este modelo est谩 dise帽ado para procesar preguntas complejas en base a documentos proporcionados por el usuario y responde con precisi贸n adapt谩ndose al contenido.
9
+
10
+ # Basado en
11
+ + LLaMA 2 from Meta IA
12
+ + Adaptado a quantizaci贸n de 4bits en: "corneille97/llama-2-7b-4bits-turbo"
13
+ El modelo base elegido proporciona una combinaci贸n 贸ptima de rendimiento y eficiencia en memoria, haciendo de SAVIO una soluci贸n ligera y potente.
14
+
15
+ # Caracter铆sticas Principales
16
+ Fine-Tuning Espec铆fico: SAVIO ha sido afinado con un conjunto de datos personalizado relacionado con ventas y an谩lisis empresarial.
17
+ Integraci贸n de RAG: El modelo permite la inclusi贸n de archivos en formatos .pdf, .xlsx, y .csv para responder preguntas basadas en datos espec铆ficos.
18
+ Eficiencia en Memoria: Utiliza t茅cnicas avanzadas como cuantizaci贸n a 4 bits y almacenamiento optimizado con SafeTensors y GUFF.
19
+ Compatibilidad Extensa: Dise帽ado para despliegues en entornos limitados, desde servidores hasta bots de Telegram.
20
+
21
+ # Herramientas Usadas
22
+ + Transformers: Para la carga y manipulaci贸n del modelo base.
23
+ + UnsLoth: Para cuantizaci贸n eficiente y soporte de t茅cnicas avanzadas como LoRA.
24
+ + PEFT: Para la implementaci贸n de Fine-Tuning eficiente con LoRA.
25
+ + RAG Framework: Integraci贸n para generaci贸n aumentada por recuperaci贸n.
26
+ + Datasets y Pandas: Manejo de datos personalizados en formatos .csv.
27
+ + Accelerate y BitsAndBytes: Optimizaci贸n en el entrenamiento y uso del modelo.
28
+ + Torch y Safetensors: Guardado eficiente del modelo ajustado.
29
+
30
+ # Uso
31
+ SAVIO puede ser utilizado tanto localmente como en la nube para tareas como:
32
+ + Responder preguntas sobre datos de ventas en tiempo real.
33
+ + Integraci贸n en aplicaciones empresariales para an谩lisis y reportes.
34
+ + Despliegue como bot de atenci贸n en plataformas como Telegram.
35
+
36
+ # Ejemplo(python):
37
+ from transformers import AutoTokenizer
38
+ from unsloth import FastLanguageModel
39
+
40
+ # Cargar el modelo
41
+ model = FastLanguageModel.from_pretrained("usuario/SAVIO")
42
+ tokenizer = AutoTokenizer.from_pretrained("usuario/SAVIO")
43
+
44
+ # Pregunta
45
+ question = "驴Cu谩les fueron las ventas totales del 煤ltimo trimestre?"
46
+
47
+ # Generar respuesta
48
+ inputs = tokenizer(question, return_tensors="pt").to("cuda")
49
+ output = model.generate(**inputs, max_new_tokens=100)
50
+ response = tokenizer.decode(output[0], skip_special_tokens=True)
51
+ print(response)
52
+
53
+ # Licencia
54
+ Sin licencia, uso aplicado de acuerdo con los terminos de uso de Llama (Meta IA)
55
+
56
+ # Contribuciones
57
+ Si deseas contribuir o reportar un problema, visita el repositorio asociado o contacta al equipo de desarrollo.