Update model on 2024-08-19 03:59:59
Browse files- README.md +47 -47
- added_tokens.json +0 -0
- config.json +2 -2
- model.safetensors +2 -2
- tokenizer.json +0 -0
- tokenizer_config.json +0 -0
README.md
CHANGED
@@ -1,5 +1,5 @@
|
|
1 |
---
|
2 |
-
base_model:
|
3 |
datasets: []
|
4 |
language: []
|
5 |
library_name: sentence-transformers
|
@@ -9,45 +9,46 @@ tags:
|
|
9 |
- sentence-similarity
|
10 |
- feature-extraction
|
11 |
- generated_from_trainer
|
12 |
-
- dataset_size:
|
13 |
- loss:MultipleNegativesRankingLoss
|
14 |
widget:
|
15 |
-
- source_sentence:
|
16 |
sentences:
|
17 |
-
-
|
18 |
-
-
|
19 |
-
-
|
20 |
-
|
|
|
21 |
sentences:
|
22 |
-
-
|
23 |
-
-
|
24 |
-
-
|
25 |
-
- source_sentence:
|
26 |
sentences:
|
27 |
-
-
|
28 |
-
-
|
29 |
-
-
|
30 |
-
- source_sentence:
|
31 |
sentences:
|
32 |
-
-
|
33 |
-
-
|
34 |
-
-
|
35 |
-
- source_sentence:
|
36 |
sentences:
|
37 |
-
-
|
38 |
-
-
|
39 |
-
-
|
40 |
---
|
41 |
|
42 |
-
# SentenceTransformer based on
|
43 |
|
44 |
-
This is a [sentence-transformers](https://www.SBERT.net) model finetuned from [
|
45 |
|
46 |
## Model Details
|
47 |
|
48 |
### Model Description
|
49 |
- **Model Type:** Sentence Transformer
|
50 |
-
- **Base model:** [
|
51 |
- **Maximum Sequence Length:** 128 tokens
|
52 |
- **Output Dimensionality:** 768 tokens
|
53 |
- **Similarity Function:** Cosine Similarity
|
@@ -88,9 +89,9 @@ from sentence_transformers import SentenceTransformer
|
|
88 |
model = SentenceTransformer("jh8416/my_ewha_model_2024_1")
|
89 |
# Run inference
|
90 |
sentences = [
|
91 |
-
'
|
92 |
-
'
|
93 |
-
'
|
94 |
]
|
95 |
embeddings = model.encode(sentences)
|
96 |
print(embeddings.shape)
|
@@ -145,19 +146,19 @@ You can finetune this model on your own dataset.
|
|
145 |
#### Unnamed Dataset
|
146 |
|
147 |
|
148 |
-
* Size:
|
149 |
* Columns: <code>sentence_0</code> and <code>sentence_1</code>
|
150 |
* Approximate statistics based on the first 1000 samples:
|
151 |
| | sentence_0 | sentence_1 |
|
152 |
|:--------|:----------------------------------------------------------------------------------|:----------------------------------------------------------------------------------|
|
153 |
| type | string | string |
|
154 |
-
| details | <ul><li>min:
|
155 |
* Samples:
|
156 |
-
| sentence_0
|
157 |
-
|
158 |
-
| <code
|
159 |
-
| <code
|
160 |
-
| <code
|
161 |
* Loss: [<code>MultipleNegativesRankingLoss</code>](https://sbert.net/docs/package_reference/sentence_transformer/losses.html#multiplenegativesrankingloss) with these parameters:
|
162 |
```json
|
163 |
{
|
@@ -294,18 +295,17 @@ You can finetune this model on your own dataset.
|
|
294 |
### Training Logs
|
295 |
| Epoch | Step | Training Loss |
|
296 |
|:------:|:----:|:-------------:|
|
297 |
-
| 0.
|
298 |
-
| 0.
|
299 |
-
| 0.
|
300 |
-
| 0.
|
301 |
-
| 0.
|
302 |
-
| 0.
|
303 |
-
| 0.
|
304 |
-
| 0.
|
305 |
-
| 0.
|
306 |
-
| 0.
|
307 |
-
| 0.
|
308 |
-
| 0.9818 | 6000 | 0.472 |
|
309 |
|
310 |
|
311 |
### Framework Versions
|
|
|
1 |
---
|
2 |
+
base_model: jhgan/ko-sroberta-multitask
|
3 |
datasets: []
|
4 |
language: []
|
5 |
library_name: sentence-transformers
|
|
|
9 |
- sentence-similarity
|
10 |
- feature-extraction
|
11 |
- generated_from_trainer
|
12 |
+
- dataset_size:88850
|
13 |
- loss:MultipleNegativesRankingLoss
|
14 |
widget:
|
15 |
+
- source_sentence: 또한 관광과 여가활동 그 자체만이 아니라 그러한
|
16 |
sentences:
|
17 |
+
- 첫째 주에 zoom을 통한 온라인 작품발표가 예정되어 있습니다
|
18 |
+
- 균형계획 교재 장 실험계획법과 분산분석 일원분산분석 비균형계획 교재 장 실험계획법과 분산분석
|
19 |
+
- 농촌관광지의사회적변화 농촌경제의재구조화 강의소개및평가안내 국제관광과관광소비 관광과세계화 관광과여가에대한사회적접근 관광과여가산업 관광의상품화
|
20 |
+
국가의개입과통제 임시공휴일 기말고사본
|
21 |
+
- source_sentence: 고학년 수강생 학년과 독일어 수준이 상대적으로 높은 학생들을 대상으로 한다 교재
|
22 |
sentences:
|
23 |
+
- 변화할까 장 의미 변화 장 화행 장 함축 발화의 숨겨진 의미를
|
24 |
+
- 제이콥스 원숭이 발 푸른 수염 앤절라 카터 피로 물든 방
|
25 |
+
- 정의 여가의 역사적 변천 여가의 상대적 기준 레크리에이션의 개념 대상 활동
|
26 |
+
- source_sentence: KMOOC비정형데이터분석소셜네트워크의이해및분석 본 과목은 소셜 네크워크에 대한
|
27 |
sentences:
|
28 |
+
- 논리적 사고는 추상적이고 논증적이기에 어렵고 복잡하다고 생각하기 쉽다
|
29 |
+
- 조각 매체와 형식의 확장 부드러운 조각비정형 페미니즘 미학과 조각 세기 중반
|
30 |
+
- Verkehr 계속 계속 기말시험 온라인 오픈북 시험 계속 Lektion Post und
|
31 |
+
- source_sentence: 부모교육의 이론 원가족의 영향에 대한 통찰사티어 가족이해 가족 내 의사소통 가족
|
32 |
sentences:
|
33 |
+
- 유체 정역학II 부양체의 안정성 유체의 상대적 평형 유체 운동학II 손실수두와 동력
|
34 |
+
- Im Restaurant 기말시험 준비 기말시험 결과발표 분반 온라인 테스트 참여 필수
|
35 |
+
- 과정 속에서 파악하여 글로벌화에 대한 통찰력과 분석력을 기른다
|
36 |
+
- source_sentence: 지급 건강보험급여 현물급여와 현금급여 노인장기요양제도 노인장기요양보험의 개요 과제 건강보험의 이론과 실제
|
37 |
sentences:
|
38 |
+
- 육체의 탄생 권한솔 년대 조선인 실업학교
|
39 |
+
- 이론 소개 이태용 온라인 강의 인장 실험 이태용 장소 공학관 B
|
40 |
+
- 세기 마드리갈과 세속노래 프랑스 독일 영국 기악음악의
|
41 |
---
|
42 |
|
43 |
+
# SentenceTransformer based on jhgan/ko-sroberta-multitask
|
44 |
|
45 |
+
This is a [sentence-transformers](https://www.SBERT.net) model finetuned from [jhgan/ko-sroberta-multitask](https://huggingface.co/jhgan/ko-sroberta-multitask). It maps sentences & paragraphs to a 768-dimensional dense vector space and can be used for semantic textual similarity, semantic search, paraphrase mining, text classification, clustering, and more.
|
46 |
|
47 |
## Model Details
|
48 |
|
49 |
### Model Description
|
50 |
- **Model Type:** Sentence Transformer
|
51 |
+
- **Base model:** [jhgan/ko-sroberta-multitask](https://huggingface.co/jhgan/ko-sroberta-multitask) <!-- at revision ab957ae6a91e99c4cad36d52063a2a9cf1bf4419 -->
|
52 |
- **Maximum Sequence Length:** 128 tokens
|
53 |
- **Output Dimensionality:** 768 tokens
|
54 |
- **Similarity Function:** Cosine Similarity
|
|
|
89 |
model = SentenceTransformer("jh8416/my_ewha_model_2024_1")
|
90 |
# Run inference
|
91 |
sentences = [
|
92 |
+
'지급 건강보험급여 현물급여와 현금급여 노인장기요양제도 노인장기요양보험의 개요 과제 건강보험의 이론과 실제',
|
93 |
+
'이론 소개 이태용 온라인 강의 인장 실험 이태용 장소 공학관 B',
|
94 |
+
'육체의 탄생 권한솔 년대 조선인 실업학교',
|
95 |
]
|
96 |
embeddings = model.encode(sentences)
|
97 |
print(embeddings.shape)
|
|
|
146 |
#### Unnamed Dataset
|
147 |
|
148 |
|
149 |
+
* Size: 88,850 training samples
|
150 |
* Columns: <code>sentence_0</code> and <code>sentence_1</code>
|
151 |
* Approximate statistics based on the first 1000 samples:
|
152 |
| | sentence_0 | sentence_1 |
|
153 |
|:--------|:----------------------------------------------------------------------------------|:----------------------------------------------------------------------------------|
|
154 |
| type | string | string |
|
155 |
+
| details | <ul><li>min: 3 tokens</li><li>mean: 19.41 tokens</li><li>max: 55 tokens</li></ul> | <ul><li>min: 4 tokens</li><li>mean: 19.93 tokens</li><li>max: 53 tokens</li></ul> |
|
156 |
* Samples:
|
157 |
+
| sentence_0 | sentence_1 |
|
158 |
+
|:---------------------------------------------|:-----------------------------------------------------------------|
|
159 |
+
| <code>이는 마케팅 관리자가 사용하는 개념과 도구 그리고 그들이</code> | <code>텍스트 관련 부분 리딩 위험과 위기관리 오리엔테이션 위험과 위험 사회텍스트 관련</code> |
|
160 |
+
| <code>이는 마케팅 관리자가 사용하는 개념과 도구 그리고 그들이</code> | <code>프로세스 관리 파일 시스템 디스크 관리와 디스크 스케줄링 창립 주년 기념일</code> |
|
161 |
+
| <code>이는 마케팅 관리자가 사용하는 개념과 도구 그리고 그들이</code> | <code>I PenFin 제장 연금기금의 이자율리스크 관리 II PenFin 제장 연금기금의 자산관리</code> |
|
162 |
* Loss: [<code>MultipleNegativesRankingLoss</code>](https://sbert.net/docs/package_reference/sentence_transformer/losses.html#multiplenegativesrankingloss) with these parameters:
|
163 |
```json
|
164 |
{
|
|
|
295 |
### Training Logs
|
296 |
| Epoch | Step | Training Loss |
|
297 |
|:------:|:----:|:-------------:|
|
298 |
+
| 0.0900 | 500 | 1.3127 |
|
299 |
+
| 0.1801 | 1000 | 0.9609 |
|
300 |
+
| 0.2701 | 1500 | 0.8853 |
|
301 |
+
| 0.3601 | 2000 | 0.812 |
|
302 |
+
| 0.4501 | 2500 | 0.7371 |
|
303 |
+
| 0.5402 | 3000 | 0.698 |
|
304 |
+
| 0.6302 | 3500 | 0.6728 |
|
305 |
+
| 0.7202 | 4000 | 0.6489 |
|
306 |
+
| 0.8102 | 4500 | 0.6113 |
|
307 |
+
| 0.9003 | 5000 | 0.5993 |
|
308 |
+
| 0.9903 | 5500 | 0.5864 |
|
|
|
309 |
|
310 |
|
311 |
### Framework Versions
|
added_tokens.json
CHANGED
The diff for this file is too large to render.
See raw diff
|
|
config.json
CHANGED
@@ -1,5 +1,5 @@
|
|
1 |
{
|
2 |
-
"_name_or_path": "
|
3 |
"architectures": [
|
4 |
"RobertaModel"
|
5 |
],
|
@@ -25,5 +25,5 @@
|
|
25 |
"transformers_version": "4.43.3",
|
26 |
"type_vocab_size": 1,
|
27 |
"use_cache": true,
|
28 |
-
"vocab_size":
|
29 |
}
|
|
|
1 |
{
|
2 |
+
"_name_or_path": "jhgan/ko-sroberta-multitask",
|
3 |
"architectures": [
|
4 |
"RobertaModel"
|
5 |
],
|
|
|
25 |
"transformers_version": "4.43.3",
|
26 |
"type_vocab_size": 1,
|
27 |
"use_cache": true,
|
28 |
+
"vocab_size": 39775
|
29 |
}
|
model.safetensors
CHANGED
@@ -1,3 +1,3 @@
|
|
1 |
version https://git-lfs.github.com/spec/v1
|
2 |
-
oid sha256:
|
3 |
-
size
|
|
|
1 |
version https://git-lfs.github.com/spec/v1
|
2 |
+
oid sha256:8f189d11fa9e9c4fc8e26af5609abe1539f617d18d1d53851f172f90a79003e5
|
3 |
+
size 466379624
|
tokenizer.json
CHANGED
The diff for this file is too large to render.
See raw diff
|
|
tokenizer_config.json
CHANGED
The diff for this file is too large to render.
See raw diff
|
|