---
language:
- en
license: apache-2.0
tags:
- sentence-transformers
- sentence-similarity
- feature-extraction
- generated_from_trainer
- dataset_size:264810
- loss:MatryoshkaLoss
- loss:MultipleNegativesRankingLoss
base_model: answerdotai/ModernBERT-base
widget:
- source_sentence: Die Einwohner Haarens protestierten, da der Name ihrer Gemeinde
bei der Eröffnung der Strecke von den Wegweisern entfernt und durch "Wünnenberg"
ersetzt wurde.
sentences:
- Die Wirksamkeit von Duolingos Ansatz wurde von einer externen Studie untersucht,
die von der Firma selbst in Auftrag gegeben worden war. Professoren der City University
of New York und der University of South Carolina haben die Studie durchgeführt
und schätzen, dass 34 Stunden Duolingo den gleichen Fortschritt bei Lesen und
Schreiben erzielen wie ein Erstsemesterkurs an einem US-College, der mehr als
geschätzte 130 Stunden dauert. Die Studie untersuchte nicht die Sprechfähigkeiten
der Probanden. Bei einem Vergleich wurde festgestellt, dass Benutzer der Software
Rosetta Stone etwa 55 bis 60 Stunden benötigten, um den gleichen Stoff zu lernen.
Die Studie hat darüber hinaus keine Vergleiche mit anderen kostenlosen oder günstigen
Kursen durchgeführt wie "BBC", "Book2", oder "Before You Know It".
- Da im selben Jahr im Zuge der Gebietsreform in Nordrhein-Westfalen die Gemeinde
Haaren in die Stadt Wünnenberg eingemeindet wurde, änderte man kurzfristig vor
Eröffnung der Strecke den Namen der Anschlussstelle "Haaren" in "Wünnenberg",
sodass Haaren von den Wegweisern gänzlich verschwand. Bei der feierlichen Eröffnung
der Strecke kam es zu Protestaktionen seitens Einwohner Haarens, bei denen die
Fahrbahn blockiert wurde, sodass die Eröffnungskolonne nicht wie geplant stattfinden
konnte. Wünnenberger Lokalpolitiker erwirkten schließlich beim Landesverkehrsministerium
in Düsseldorf einen Kompromiss, sodass die Anschlussstelle, wie das spätere Autobahnkreuz,
ab Oktober 1975 "Wünnenberg-Haaren" hieß. Bemerkenswerterweise trägt das Autobahnkreuz
(noch 2021) diesen Namen, obwohl Wünnenberg seit dem Jahr 2000 "Bad Wünnenberg"
heißt und das Voranstellen des Gemeinde- bzw. Städtenamens vor den Stadtteilnamen
bei Orten mit weniger als 100.000 Einwohnern gegen die nordrhein-westfälischen
Wegweisungs-Richtlinien verstößt.
- Auf Basis der Planungen einer 1957 gegründeten Arbeitsgruppe der Industrie- und
Handelskammer Kassel genehmigte das Bundesverkehrsministerium in Bonn den Bau
einer 4,7 km langen Verbindung zwischen der Autobahn Hamburg–Frankfurt und der
B 3. Die einbahnige "hochwasserfreie Verbindung Kassel" entstand von 1958 bis
1962 auf der vorbereiteten Trasse der Reichsautobahn. Dabei wurde auch die Fuldatalbrücke
Bergshausen mit einer Fahrbahn fertiggestellt. Der Bau dieser Brücke wurde bereits
in der NS-Zeit begonnen, bis zur Einstellung des Baus infolge des Zweiten Weltkriegs
waren nur einige Arbeiten an der Gründung im Gange gewesen.
- source_sentence: Das Weibchen legt jeden Tag in den Morgenstunden ein Ei und übernachtet
manchmal schon vor der Eiablage auf dem Nest.
sentences:
- Während der Phase der Eiablage legt das Weibchen jeden Tag in den Morgenstunden
ein Ei. Das Weibchen übernachtet auch vor der Eiablage bisweilen schon auf dem
Nest, die Bebrütung wird allerdings erst nach der Ablage des vorletzten (manchmal
des letzten) Eis begonnen, sodass alle Jungvögel etwa am selben Tag schlüpfen.
- Das Gelege besteht aus 2 bis maximal 8, zumeist 5–6 Eiern. Diese sind oval und
durchschnittlich 22 × 17 mm groß. Die möglichen Grundfärbungen – weißlich (weiß,
gelblich, hellgrau oder beige), grünlich oder rötlich – tragen eine Obersprenkelung,
die zwischen verschiedenen Brauntönen variieren kann. Darunter liegt eine blassere
Sprenkelung in je nach Farbtyp unterschiedlich getöntem Grau. Auch die Verteilung
der Sprenkelung kann recht unterschiedlich sein.
- Die Serienhandlung dreht sich am Anfang neben der Bewahrung von Clarks Geheimnis
hauptsächlich um das Stoppen von gewalttätigen und verbrecherischen „Meteoritenfreaks“,
die durch das Meteoritengestein (Kryptonit) nach den beiden Meteoritenschauern
auf Smallville (Anfang der ersten und Ende der vierten Staffel) besondere Fähigkeiten
erlangt haben und dadurch korrumpiert oder in den Wahnsinn getrieben werden. Die
entstandenen kuriosen Kräfte erinnern besonders in der Anfangszeit der Serie oft
an "Akte X". Von den Fans werden solche Charaktere in der Fantasy und der Science-Fiction
als "Freak of the Week" (dt. „Monster der Woche“) bezeichnet, da in der wöchentlich
ausgestrahlten Serie in jeder Folge einer der Freaks auftaucht und besiegt werden
muss.
- source_sentence: Reichhart vollzog vertretungsweise Hinrichtungen in verschiedenen
deutschen Städten, darunter Berlin-Plötzensee, wo er unter anderem Hans und Sophie
Scholl hinrichtete.
sentences:
- Reichhart vollzog vertretungsweise auch Hinrichtungen in Köln, Frankfurt-Preungesheim,
Berlin-Plötzensee, Brandenburg-Görden und Breslau, wo ebenfalls zentrale Hinrichtungsstätten
eingerichtet worden waren. Von 1938 bis 1944 war er auch zuständiger Scharfrichter
für die zentralen Hinrichtungsstätten in Wien und Graz. Insgesamt vollstreckte
er seit 1924 während der Weimarer Republik und der Zeit des Nationalsozialismus
2.951 Todesurteile mit der Guillotine und 59 mit dem Galgen. Unter den Verurteilten
waren 250 Frauen. Er richtete auch Hans und Sophie Scholl hin († 22. Februar 1943),
die bekanntesten Mitglieder der Widerstandsgruppe Weiße Rose. Reichhart äußerte
später, er habe noch nie jemanden so tapfer sterben sehen wie Sophie Scholl.
- 2012 war Frentzen in Melbourne im Rahmenprogramm der Formel 1 Gaststarter im Porsche
Carrera Cup Australien.
- Im Juli 1932 veröffentlichten mehrere niederländische Zeitungen Artikel über Reichharts
andere Tätigkeit und lüfteten damit sein Inkognito. Seine Geschäfte florierten
nicht mehr; im Frühjahr 1933 kehrte er nach München zurück. Er erwog, seine Scharfrichtertätigkeit
aufzugeben.
- source_sentence: Wann empfahl das RKI der Bevölkerung in Deutschland, einfachen
Mundschutz zusätzlich zu anderen Schutzmaßnahmen zu tragen?
sentences:
- Trotz des Festhaltens an ägyptischer Tradition war das Land auch großen Veränderungen
unterworfen. So verlor Theben seine Bedeutung als kultureller und administrativer
Mittelpunkt an Saïs. Weiterhin lässt sich bei allen Herrschern der 26. Dynastie
eine starke Anlehnung an die griechischen Stadtstaaten feststellen, wenn auch
unter Pharao Apries der Versuch einer Loslösung von den Griechen erkennbar ist,
die das Heer dominierten. Amasis eroberte Zypern im ersten Jahrzehnt seiner Herrschaft
und schloss ein Bündnis mit Kyrene, das sein Vorgänger noch bekämpft hatte. Dazu
heiratete er eine kyrenische Prinzessin. Dieses Bündnis war noch intakt, als 525
v. Chr. die Perser Ägypten attackierten.
- Das RKI bewertete das Risiko für die Bevölkerung in Deutschland am 28. Februar
2020 als „gering bis mäßig“, seit dem 17. März als „hoch“ und für Risikogruppen
seit dem 26. März als „sehr hoch“. Die Gefahr variiere regional; schwere Krankheitsverläufe
seien „mit zunehmendem Alter und bestehenden Vorerkrankungen“ wahrscheinlicher.
Das RKI empfahl zum Infektionsschutz, genügend Abstand zu anderen Menschen einzuhalten
(zum Eigen- und Fremdschutz), sich regelmäßig die Hände mit Seife zu waschen und
sich nicht ins Gesicht zu fassen, um nicht das Virus auf die Schleimhäute von
Mund, Nase oder Augen zu bringen. Nachdem am 26. März 2020 der Präsident der Bundesärztekammer
die Bevölkerung aufgerufen hatte, zusätzlich einfachen Mundschutz zu tragen, erklärte
das RKI am 2. April, das Tragen von einfachem Mundschutz könne zusätzlich mithelfen,
andere Menschen nicht anzustecken. Es sei aber kein Ersatz für andere Maßnahmen
wie das Abstandhalten.
- Nach dem Tod Kochs am 27. Mai 1910 wurde im Institutsgebäude eine Grabstätte für
ihn eingerichtet. Im Erdgeschoss des Südwestflügels wurde dafür ein großer Raum
gegenüber dem Hörsaal ausgewählt und mit Marmor in verschiedenen Farbtönen ausgekleidet.
In diesem Zimmer war zu Lebzeiten Kochs die photographische Abteilung untergebracht.
Die Adaptierung des Raums als Mausoleum erfolgte nach Plänen des Architekten Paul
Mebes. Am 4. Dezember 1910 wurde in Anwesenheit von Familienangehörigen Kochs
die kupferne Urne mit seiner Asche dort beigesetzt. Die offizielle Einweihung
des Mausoleums fand am 10. Dezember 1910 statt. Das Mausoleum des Institutsgebäudes
enthält an seiner westlichen Schmalseite das von dem Berliner Künstler Walter
Schmarje ausgeführte Epitaph mit dem Reliefbild Kochs. Darunter befindet sich
in einer durch eine weiße Marmorplatte verschlossenen Nische die Urne mit der
Asche Kochs. An der Ostseite des Raumes sind unter der Überschrift „Robert Koch
– Werke und Wirken“ wesentliche Daten zu den Ergebnissen seiner Forschungsarbeit
dargestellt. Die Bestattung Kochs im Institutsgebäude war möglich, da es zu der
Zeit in Preußen noch kein Gesetz über die Urnenbeisetzung gab.
- source_sentence: Wieso verklagte die Familie von Ritter die behandelnden Ärzte auf
67 Millionen US-Dollar Schadensersatz?
sentences:
- Während Proben zu einer Folge von "Meine wilden Töchter" traten bei Ritter im
September 2003 starke Brustschmerzen auf, und er begab sich in das nahegelegene
"Providence Saint Joseph Medical Center", in dem er am 11. September 2003 im Alter
von 54 Jahren – eine Woche vor seinem 55. Geburtstag – an einer Aortendissektion
starb. Seine Familie verklagte Anfang 2008 die behandelnden Ärzte auf einen Schadensersatz
von 67 Millionen US-Dollar. Die Klage wurde im März 2008 abgewiesen.
- Nach der Einstellung der Fernsehserie "Herzbube mit zwei Damen" nach acht Staffeln
im Jahr 1984 machte er mit dem Spin-off "Three’s A Crowd" weiter, jedoch wurde
die Serie nach einer Staffel eingestellt. Weitere Fernsehrollen hatte er in "Inspektor
Hooperman" (1987), die ihm eine Nominierung sowohl für den Golden Globe als auch
für den Emmy einbrachte, "Küß’ mich, John" (1992), "Ally McBeal" (1997), "Buffy
– Im Bann der Dämonen" (1997), "Clifford the Big Red Dog" (2000), "Scrubs – Die
Anfänger" oder "Meine wilden Töchter" (2002).
- In Taiwan wurde im April 2014 der Bau des Kernkraftwerks Lungmen nach heftigen
Protesten bis zu einem Referendum ausgesetzt.
pipeline_tag: sentence-similarity
library_name: sentence-transformers
metrics:
- cosine_accuracy@1
- cosine_accuracy@3
- cosine_accuracy@5
- cosine_accuracy@10
- cosine_precision@1
- cosine_precision@3
- cosine_precision@5
- cosine_precision@10
- cosine_recall@1
- cosine_recall@3
- cosine_recall@5
- cosine_recall@10
- cosine_ndcg@10
- cosine_mrr@10
- cosine_map@100
model-index:
- name: BGE base Financial Matryoshka
results:
- task:
type: information-retrieval
name: Information Retrieval
dataset:
name: dim 768
type: dim_768
metrics:
- type: cosine_accuracy@1
value: 0.5817699836867863
name: Cosine Accuracy@1
- type: cosine_accuracy@3
value: 0.9327759651984774
name: Cosine Accuracy@3
- type: cosine_accuracy@5
value: 0.952215878194671
name: Cosine Accuracy@5
- type: cosine_accuracy@10
value: 0.9681552474170745
name: Cosine Accuracy@10
- type: cosine_precision@1
value: 0.5817699836867863
name: Cosine Precision@1
- type: cosine_precision@3
value: 0.3109253217328258
name: Cosine Precision@3
- type: cosine_precision@5
value: 0.1904431756389342
name: Cosine Precision@5
- type: cosine_precision@10
value: 0.09681552474170746
name: Cosine Precision@10
- type: cosine_recall@1
value: 0.5817699836867863
name: Cosine Recall@1
- type: cosine_recall@3
value: 0.9327759651984774
name: Cosine Recall@3
- type: cosine_recall@5
value: 0.952215878194671
name: Cosine Recall@5
- type: cosine_recall@10
value: 0.9681552474170745
name: Cosine Recall@10
- type: cosine_ndcg@10
value: 0.8140491092898914
name: Cosine Ndcg@10
- type: cosine_mrr@10
value: 0.7608257917087448
name: Cosine Mrr@10
- type: cosine_map@100
value: 0.7617714980276816
name: Cosine Map@100
---
# BGE base Financial Matryoshka
This is a [sentence-transformers](https://www.SBERT.net) model finetuned from [answerdotai/ModernBERT-base](https://huggingface.co/answerdotai/ModernBERT-base) on the json dataset. It maps sentences & paragraphs to a 768-dimensional dense vector space and can be used for semantic textual similarity, semantic search, paraphrase mining, text classification, clustering, and more.
## Model Details
### Model Description
- **Model Type:** Sentence Transformer
- **Base model:** [answerdotai/ModernBERT-base](https://huggingface.co/answerdotai/ModernBERT-base)
- **Maximum Sequence Length:** 8192 tokens
- **Output Dimensionality:** 768 dimensions
- **Similarity Function:** Cosine Similarity
- **Training Dataset:**
- json
- **Language:** en
- **License:** apache-2.0
### Model Sources
- **Documentation:** [Sentence Transformers Documentation](https://sbert.net)
- **Repository:** [Sentence Transformers on GitHub](https://github.com/UKPLab/sentence-transformers)
- **Hugging Face:** [Sentence Transformers on Hugging Face](https://huggingface.co/models?library=sentence-transformers)
### Full Model Architecture
```
SentenceTransformer(
(0): Transformer({'max_seq_length': 8192, 'do_lower_case': False}) with Transformer model: ModernBertModel
(1): Pooling({'word_embedding_dimension': 768, 'pooling_mode_cls_token': False, 'pooling_mode_mean_tokens': True, 'pooling_mode_max_tokens': False, 'pooling_mode_mean_sqrt_len_tokens': False, 'pooling_mode_weightedmean_tokens': False, 'pooling_mode_lasttoken': False, 'include_prompt': True})
)
```
## Usage
### Direct Usage (Sentence Transformers)
First install the Sentence Transformers library:
```bash
pip install -U sentence-transformers
```
Then you can load this model and run inference.
```python
from sentence_transformers import SentenceTransformer
# Download from the 🤗 Hub
model = SentenceTransformer("avemio-digital/ModernBERT_base_triples_embedding")
# Run inference
sentences = [
'Wieso verklagte die Familie von Ritter die behandelnden Ärzte auf 67 Millionen US-Dollar Schadensersatz?',
'Während Proben zu einer Folge von "Meine wilden Töchter" traten bei Ritter im September 2003 starke Brustschmerzen auf, und er begab sich in das nahegelegene "Providence Saint Joseph Medical Center", in dem er am 11. September 2003 im Alter von 54 Jahren – eine Woche vor seinem 55. Geburtstag – an einer Aortendissektion starb. Seine Familie verklagte Anfang 2008 die behandelnden Ärzte auf einen Schadensersatz von 67 Millionen US-Dollar. Die Klage wurde im März 2008 abgewiesen.',
'Nach der Einstellung der Fernsehserie "Herzbube mit zwei Damen" nach acht Staffeln im Jahr 1984 machte er mit dem Spin-off "Three’s A Crowd" weiter, jedoch wurde die Serie nach einer Staffel eingestellt. Weitere Fernsehrollen hatte er in "Inspektor Hooperman" (1987), die ihm eine Nominierung sowohl für den Golden Globe als auch für den Emmy einbrachte, "Küß’ mich, John" (1992), "Ally McBeal" (1997), "Buffy – Im Bann der Dämonen" (1997), "Clifford the Big Red Dog" (2000), "Scrubs – Die Anfänger" oder "Meine wilden Töchter" (2002).',
]
embeddings = model.encode(sentences)
print(embeddings.shape)
# [3, 768]
# Get the similarity scores for the embeddings
similarities = model.similarity(embeddings, embeddings)
print(similarities.shape)
# [3, 3]
```
## Evaluation
### Metrics
#### Information Retrieval
* Dataset: `dim_768`
* Evaluated with [InformationRetrievalEvaluator
](https://sbert.net/docs/package_reference/sentence_transformer/evaluation.html#sentence_transformers.evaluation.InformationRetrievalEvaluator)
| Metric | Value |
|:--------------------|:----------|
| cosine_accuracy@1 | 0.5818 |
| cosine_accuracy@3 | 0.9328 |
| cosine_accuracy@5 | 0.9522 |
| cosine_accuracy@10 | 0.9682 |
| cosine_precision@1 | 0.5818 |
| cosine_precision@3 | 0.3109 |
| cosine_precision@5 | 0.1904 |
| cosine_precision@10 | 0.0968 |
| cosine_recall@1 | 0.5818 |
| cosine_recall@3 | 0.9328 |
| cosine_recall@5 | 0.9522 |
| cosine_recall@10 | 0.9682 |
| **cosine_ndcg@10** | **0.814** |
| cosine_mrr@10 | 0.7608 |
| cosine_map@100 | 0.7618 |
## Training Details
### Training Dataset
#### json
* Dataset: json
* Size: 264,810 training samples
* Columns: anchor
, positive
, and negative
* Approximate statistics based on the first 1000 samples:
| | anchor | positive | negative |
|:--------|:------------------------------------------------------------------------------------|:--------------------------------------------------------------------------------------|:--------------------------------------------------------------------------------------|
| type | string | string | string |
| details |
Was passiert, als die Haeduer sich gegen Caesar erheben und die Römer die Schlacht um Gergovia führen?
| Während er Titus Labienus mit vier Legionen in die Gebiete der Senonen und Parisier verlegt, macht sich Caesar auf nach Gergovia ins Gebiet der Arverner und die Heimat des Vercingetorix. Die Haeduer erheben sich jedoch schon bald gegen Caesar. Während die Schlacht um Gergovia tobt, rücken die Haeduer auf die römischen Truppen zu. Die Römer verlieren an diesem Tag fast siebenhundert Männer, können die Stadt aber nicht einnehmen. Caesar zieht weiter zur Stadt Noviodunum, die von den Haeduern zerstört wurde, während Labienus gegen die Stadt Lutetia zieht. Dort kommt es für Labienus zur siegreichen Schlacht. Die Gallier fliehen. Nach drei Tagen vereinigen sich seine Truppen mit denen Caesars.
| Unterdessen hält Vercingetorix gallischen Landtag in Bibracte. Fast alle gallischen Stämme nehmen teil und bestätigen Vercingetorix als Feldherrn. Es kommt zur Schlacht, in deren Verlauf die gallischen Reiter am Fluss Armançon vernichtet werden. Vercingetorix zieht mit seinen Fußtruppen zur Festung Alesia ab. Dort kommt es erneut zum Kampf, den Caesar dank germanischer Hilfstruppen für sich entscheiden kann. Ihm gelingt es, die Gallier einzuschließen und ein ausgeklügeltes Befestigungssystem rund um die Stadt zu errichten. Die eingeschlossenen Gallier warten jetzt dringend auf heranziehende gallische Hilfstruppen, denn ihre Lebensmittelvorräte sind fast aufgebraucht. Die Gallier diskutieren die Möglichkeit, sich zu ergeben. In der flammenden Rede des Arverners Critognatus spricht sich dieser gegen eine Kapitulation aus und überzeugt die Übrigen. Reitergefechte eröffnen die nächsten Kampfhandlungen, bis zum Abend bahnt sich aber keine Entscheidung an. Auch in den kommenden Tagen gelingt...
|
| Wo war die Geburtsstätte der Hip-Hop-Musik und welches Label spielte eine bedeutende Rolle in den 1990er Jahren an der US-Ostküste?
| Hip-Hop-Musik entstand in New York City, an der US-Ostküste. Obwohl es inzwischen auch andere wichtige Zentren wie zum Beispiel Philadelphia und Los Angeles gibt, ist die Stadt bis heute das Zentrum der Szene. 1992 begann sich die Musikszene zu verändern. Hip-Hop-Musik wurde immer mehr und schließlich endgültig vom Mainstream übernommen und versprach, kommerziell sehr lukrativ zu werden. Ein wichtiges Label an der Ostküste war zu dieser Zeit Bad Boy Entertainment von Puff Daddy, dort veröffentlichten Craig Mack, Mase und The Notorious B.I.G.
| East Coast vs. West Coast ("Ostküste gegen Westküste") ist die gängigste Bezeichnung für den bekanntesten "Beef" – eine Fehde im Hip-Hop. Bei der in der Mitte der 1990er-Jahre stattfindenden Auseinandersetzung handelte es sich um eine Rivalität zwischen den Plattenfirmen Bad Boy Entertainment aus New York City und Death Row Records aus Los Angeles sowie den dazugehörigen Rappern und Produzenten, die gewaltsam eskalierte. In ihrer Folge wurden unter anderem die Rapper Tupac Shakur und Notorious B.I.G. erschossen, wobei die Täter und der jeweilige Zusammenhang mit der Fehde ungeklärt blieben. Benannt ist der Konflikt nach den Szenen des Eastcoast-Hip-Hops und des Westcoast-Hip-Hops.
|
| Die Annäherung zwischen Nord- und Südkorea in Bezug auf die Olympischen Spiele von 2018 beinhaltete gemeinsame Gespräche, die Einigung auf die Teilnahme nordkoreanischer Athleten sowie das gemeinsame Eintreten bei der Eröffnungsfeier und im Frauen-Eishockey.
| Am 1. Januar 2018 sagte der nordkoreanische Machthaber Kim Jong-un in seiner Neujahrsansprache, dass die beiden Länder wieder gemeinsame Gespräche führen sollten. Am 9. Januar 2018 trafen sich Regierungsvertreter beider Länder und einigten sich unter anderem auf Athleten aus Nordkorea bei den Wettkämpfen in Südkorea. Am 17. Januar 2018 sagte ein Sprecher des südkoreanischen Vereinigungsministeriums, dass die beiden Länder unter dem Namen „Korea“ bei der Eröffnungsfeier gemeinsam einlaufen und im Frauen-Eishockey gemeinsam antreten würden.
| Während der XXIII. Olympischen Winterspiele gab es vier Dopingfälle. So wurde der japanische Shorttracker Kei Saito positiv auf das Diuretikum Acetazolamid, der slowenische Eishockeyspieler Žiga Jeglič positiv auf das Asthmamittel Fenoterol, der russische Curler Alexander Alexandrowitsch Kruschelnizki positiv auf das Herzmittel Meldonium und die russische Bobfahrerin Nadeschda Wiktorowna Sergejewa positiv auf das Herzmittel Trimetazidin getestet. Alle vier Athleten wurden von der Veranstaltung ausgeschlossen. Außerdem wurden dem russischen Curler und seiner Partnerin die zuvor gewonnene Bronzemedaille bei den Mixed Doubles aberkannt und dem norwegischen Team Kristin Skaslien/Magnus Nedregotten zugesprochen.
|
* Loss: [MatryoshkaLoss
](https://sbert.net/docs/package_reference/sentence_transformer/losses.html#matryoshkaloss) with these parameters:
```json
{
"loss": "MultipleNegativesRankingLoss",
"matryoshka_dims": [
768
],
"matryoshka_weights": [
1
],
"n_dims_per_step": -1
}
```
### Training Hyperparameters
#### Non-Default Hyperparameters
- `eval_strategy`: epoch
- `gradient_accumulation_steps`: 16
- `learning_rate`: 2e-05
- `num_train_epochs`: 1
- `lr_scheduler_type`: cosine
- `warmup_ratio`: 0.1
- `bf16`: True
- `tf32`: True
- `load_best_model_at_end`: True
- `optim`: adamw_torch_fused
- `batch_sampler`: no_duplicates
#### All Hyperparameters