Labagaite commited on
Commit
6909512
1 Parent(s): 2aa5f7d

Upload README.md with huggingface_hub

Browse files
Files changed (1) hide show
  1. README.md +25 -17
README.md CHANGED
@@ -24,30 +24,38 @@ base_model: unsloth/gemma-2b-it-bnb-4bit
24
  ![Evaluation Loss Plot](eval_loss_plot.png)
25
 
26
  ## Evaluation score
27
- ### Évaluation du rapport généré par le modèle de base:
28
 
29
- 1. **Performance de la structuration du rapport (6/10):** Le rapport présente une structuration claire en chapitres, mais certains sujets pourraient être plus détaillés et approfondis.
30
-
31
- 2. **Qualité du langage (5/10):** Le langage utilisé est correct mais manque de fluidité et de sophistication. Certains passages sont maladroits et peu naturels.
32
-
33
- 3. **Cohérence (6/10):** Le rapport manque parfois de cohérence dans la transition entre les différents sujets abordés. Certains passages semblent déconnectés les uns des autres.
34
 
35
- ### Évaluation du rapport généré par le modèle fine-tuned:
 
36
 
37
- 1. **Performance de la structuration du rapport (8/10):** Le rapport présente une structuration claire et détaillée en chapitres, offrant une meilleure organisation des informations.
38
-
39
- 2. **Qualité du langage (7/10):** Le langage utilisé est plus fluide et naturel, avec une meilleure maîtrise de la syntaxe et du vocabulaire.
40
-
41
- 3. **Cohérence (8/10):** Le rapport est plus cohérent dans la transition entre les différents sujets abordés, offrant une meilleure continuité et fluidité.
42
 
43
- ### Score global:
 
44
 
45
- - Modèle de base: 17/30
46
- - Modèle fine-tuned: 23/30
47
 
48
- ### Conclusion:
 
49
 
50
- Le modèle fine-tuned offre une meilleure performance globale en termes de structuration, qualité du langage et cohérence par rapport au modèle de base. Il présente une amélioration significative dans la clarté et la fluidité du rapport généré. Cependant, des améliorations peuvent encore être apportées pour atteindre un niveau optimal.
 
 
 
 
 
 
 
 
 
 
 
 
 
51
  [Evaluation report and scoring](evaluation/run-unsloth/gemma-2b-it-bnb-4bit-7449/Model_evaluator-gemma-Summarizer-2b-it-bnb-4bit.md)
52
 
53
  ## Wandb logs
 
24
  ![Evaluation Loss Plot](eval_loss_plot.png)
25
 
26
  ## Evaluation score
27
+ ### Évaluation des rapports générés par les modèles d'IA :
28
 
29
+ #### Modèle de base unsloth/gemma-2b-it-bnb-4bit :
 
 
 
 
30
 
31
+ 1. **Performance de la structuration du rapport : 6/10**
32
+ - Le rapport est structuré en chapitres, mais la transition entre les chapitres n'est pas toujours fluide.
33
 
34
+ 2. **Qualité du langage : 7/10**
35
+ - Le langage utilisé est professionnel et formel, mais il manque parfois de précision dans les termes techniques.
 
 
 
36
 
37
+ 3. **Cohérence : 6/10**
38
+ - La cohérence entre les différentes parties du rapport est parfois faible, ce qui rend la lecture moins fluide.
39
 
40
+ #### Modèle fine-tuned /home/will/LM_summarizer_trainer/model/gemma-Summarizer-2b-it-bnb-4bit :
 
41
 
42
+ 1. **Performance de la structuration du rapport : 8/10**
43
+ - Le rapport est bien structuré en chapitres clairs et la transition entre les parties est plus fluide.
44
 
45
+ 2. **Qualité du langage : 8/10**
46
+ - Le langage utilisé est professionnel et précis, avec une meilleure utilisation des termes techniques.
47
+
48
+ 3. **Cohérence : 7/10**
49
+ - La cohérence entre les parties du rapport est améliorée par rapport au modèle de base, mais il reste quelques incohérences mineures.
50
+
51
+ #### Score global :
52
+
53
+ - Modèle de base : 6.3/10
54
+ - Modèle fine-tuned : 7.7/10
55
+
56
+ ### Conclusion :
57
+
58
+ Le modèle fine-tuned /home/will/LM_summarizer_trainer/model/gemma-Summarizer-2b-it-bnb-4bit présente une amélioration significative par rapport au modèle de base unsloth/gemma-2b-it-bnb-4bit. Il offre une meilleure structuration du rapport, une qualité de langage plus précise et une cohérence améliorée. Cependant, il reste encore des marges d'amélioration pour atteindre une perfection totale.
59
  [Evaluation report and scoring](evaluation/run-unsloth/gemma-2b-it-bnb-4bit-7449/Model_evaluator-gemma-Summarizer-2b-it-bnb-4bit.md)
60
 
61
  ## Wandb logs