Upload README.md with huggingface_hub
Browse files
README.md
CHANGED
@@ -24,30 +24,38 @@ base_model: unsloth/gemma-2b-it-bnb-4bit
|
|
24 |
![Evaluation Loss Plot](eval_loss_plot.png)
|
25 |
|
26 |
## Evaluation score
|
27 |
-
### Évaluation
|
28 |
|
29 |
-
|
30 |
-
|
31 |
-
2. **Qualité du langage (5/10):** Le langage utilisé est correct mais manque de fluidité et de sophistication. Certains passages sont maladroits et peu naturels.
|
32 |
-
|
33 |
-
3. **Cohérence (6/10):** Le rapport manque parfois de cohérence dans la transition entre les différents sujets abordés. Certains passages semblent déconnectés les uns des autres.
|
34 |
|
35 |
-
|
|
|
36 |
|
37 |
-
|
38 |
-
|
39 |
-
2. **Qualité du langage (7/10):** Le langage utilisé est plus fluide et naturel, avec une meilleure maîtrise de la syntaxe et du vocabulaire.
|
40 |
-
|
41 |
-
3. **Cohérence (8/10):** Le rapport est plus cohérent dans la transition entre les différents sujets abordés, offrant une meilleure continuité et fluidité.
|
42 |
|
43 |
-
|
|
|
44 |
|
45 |
-
|
46 |
-
- Modèle fine-tuned: 23/30
|
47 |
|
48 |
-
|
|
|
49 |
|
50 |
-
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
51 |
[Evaluation report and scoring](evaluation/run-unsloth/gemma-2b-it-bnb-4bit-7449/Model_evaluator-gemma-Summarizer-2b-it-bnb-4bit.md)
|
52 |
|
53 |
## Wandb logs
|
|
|
24 |
![Evaluation Loss Plot](eval_loss_plot.png)
|
25 |
|
26 |
## Evaluation score
|
27 |
+
### Évaluation des rapports générés par les modèles d'IA :
|
28 |
|
29 |
+
#### Modèle de base unsloth/gemma-2b-it-bnb-4bit :
|
|
|
|
|
|
|
|
|
30 |
|
31 |
+
1. **Performance de la structuration du rapport : 6/10**
|
32 |
+
- Le rapport est structuré en chapitres, mais la transition entre les chapitres n'est pas toujours fluide.
|
33 |
|
34 |
+
2. **Qualité du langage : 7/10**
|
35 |
+
- Le langage utilisé est professionnel et formel, mais il manque parfois de précision dans les termes techniques.
|
|
|
|
|
|
|
36 |
|
37 |
+
3. **Cohérence : 6/10**
|
38 |
+
- La cohérence entre les différentes parties du rapport est parfois faible, ce qui rend la lecture moins fluide.
|
39 |
|
40 |
+
#### Modèle fine-tuned /home/will/LM_summarizer_trainer/model/gemma-Summarizer-2b-it-bnb-4bit :
|
|
|
41 |
|
42 |
+
1. **Performance de la structuration du rapport : 8/10**
|
43 |
+
- Le rapport est bien structuré en chapitres clairs et la transition entre les parties est plus fluide.
|
44 |
|
45 |
+
2. **Qualité du langage : 8/10**
|
46 |
+
- Le langage utilisé est professionnel et précis, avec une meilleure utilisation des termes techniques.
|
47 |
+
|
48 |
+
3. **Cohérence : 7/10**
|
49 |
+
- La cohérence entre les parties du rapport est améliorée par rapport au modèle de base, mais il reste quelques incohérences mineures.
|
50 |
+
|
51 |
+
#### Score global :
|
52 |
+
|
53 |
+
- Modèle de base : 6.3/10
|
54 |
+
- Modèle fine-tuned : 7.7/10
|
55 |
+
|
56 |
+
### Conclusion :
|
57 |
+
|
58 |
+
Le modèle fine-tuned /home/will/LM_summarizer_trainer/model/gemma-Summarizer-2b-it-bnb-4bit présente une amélioration significative par rapport au modèle de base unsloth/gemma-2b-it-bnb-4bit. Il offre une meilleure structuration du rapport, une qualité de langage plus précise et une cohérence améliorée. Cependant, il reste encore des marges d'amélioration pour atteindre une perfection totale.
|
59 |
[Evaluation report and scoring](evaluation/run-unsloth/gemma-2b-it-bnb-4bit-7449/Model_evaluator-gemma-Summarizer-2b-it-bnb-4bit.md)
|
60 |
|
61 |
## Wandb logs
|