Add BERTopic model

README.md

@@ -0,0 +1,195 @@
+
+---
+tags:
+- bertopic
+library_name: bertopic
+pipeline_tag: text-classification
+---
+
+# BERTopic_mepanews
+
+This is a [BERTopic](https://github.com/MaartenGr/BERTopic) model. 
+BERTopic is a flexible and modular topic modeling framework that allows for the generation of easily interpretable topics from large datasets. 
+
+## Usage 
+
+To use this model, please install BERTopic:
+
+```
+pip install -U bertopic
+```
+
+You can use the model as follows:
+
+```python
+from bertopic import BERTopic
+topic_model = BERTopic.load("sdantonio/BERTopic_mepanews")
+
+topic_model.get_topic_info()
+```
+
+## Topic overview
+
+* Number of topics: 126
+* Number of training documents: 18671
+
+<details>
+  <summary>Click here for an overview of all topics.</summary>
+  
+  | Topic ID | Topic Keywords | Topic Frequency | Label | 
+|----------|----------------|-----------------|-------| 
+| -1 | mısır - operasyonu - abd - irak - ilis | 10 | -1_mısır_operasyonu_abd_irak | 
+| 0 | atıs - abd - yas - irak - kars | 7439 | 0_atıs_abd_yas_irak | 
+| 1 | azerbaycan - ıkma - abd - atıs - konus | 4153 | 1_azerbaycan_ıkma_abd_atıs | 
+| 2 | emirlikleri - mısır - velayet - abd - irak | 659 | 2_emirlikleri_mısır_velayet_abd | 
+| 3 | deyecek - patlamanın - ıkaracak - gelebilir - dahale | 376 | 3_deyecek_patlamanın_ıkaracak_gelebilir | 
+| 4 | kanlıg - kılıc - bırakmayacag - enflasyonun - uzatılacak | 270 | 4_kanlıg_kılıc_bırakmayacag_enflasyonun | 
+| 5 | sevkiyatı - imzalandı - abd - ıklama - alımını | 252 | 5_sevkiyatı_imzalandı_abd_ıklama | 
+| 6 | katliamının - ıssız - bakıs - alıs - katliamı | 196 | 6_katliamının_ıssız_bakıs_alıs | 
+| 7 | katliamına - muhafızları - kıbrıs - anmasında - emirlikleri | 184 | 7_katliamına_muhafızları_kıbrıs_anmasında | 
+| 8 | ukraynalı - sevkiyatı - hollanda - abd - tankı | 181 | 8_ukraynalı_sevkiyatı_hollanda_abd | 
+| 9 | galeri - lmesinin - baskını - kaldırılmasının - katliamı | 174 | 9_galeri_lmesinin_baskını_kaldırılmasının | 
+| 10 | ilkeleri - mutsuzların - kuvvetleri - konmamıs - yasası | 171 | 10_ilkeleri_mutsuzların_kuvvetleri_konmamıs | 
+| 11 | alıkoydug - lgeleri - filistinlilere - sivillerin - filistinliler | 158 | 11_alıkoydug_lgeleri_filistinlilere_sivillerin | 
+| 12 | mısır - adaylık - kılıc - partili - partisi | 152 | 12_mısır_adaylık_kılıc_partili | 
+| 13 | dolarsızlas - tutuklandı - yasaklanabilir - bankası - harcamalarında | 148 | 13_dolarsızlas_tutuklandı_yasaklanabilir_bankası | 
+| 14 | sırtımızdan - muhafızları - hollandalı - baskınında - abdullahiyan | 116 | 14_sırtımızdan_muhafızları_hollandalı_baskınında | 
+| 15 | plakaları - evsizlere - tutsaklar - onarıp - denemeler | 105 | 15_plakaları_evsizlere_tutsaklar_onarıp | 
+| 16 | siyahiyi - belirleyemiyor - kararlılık - mesleki - toplama | 104 | 16_siyahiyi_belirleyemiyor_kararlılık_mesleki | 
+| 17 | ilerliyor - tıkanıklık - taraftarları - tırmanmak - etkiler | 101 | 17_ilerliyor_tıkanıklık_taraftarları_tırmanmak | 
+| 18 | husilerin - devletler - kaldıramayacag - inkılap - soykırım | 98 | 18_husilerin_devletler_kaldıramayacag_inkılap | 
+| 19 | planladıkları - ıkarmayı - toplamasına - tıkanması - hareketlilik | 96 | 19_planladıkları_ıkarmayı_toplamasına_tıkanması | 
+| 20 | kılınc - bakıs - nleriz - elenmeli - lucian | 95 | 20_kılınc_bakıs_nleriz_elenmeli | 
+| 21 | kırgızistan - azerbaycan - minnettarız - tarlalarının - aramızdaki | 92 | 21_kırgızistan_azerbaycan_minnettarız_tarlalarının | 
+| 22 | filistinlileri - filistinlilerin - havalimanlarını - gazeteciyi - birbirlerini | 88 | 22_filistinlileri_filistinlilerin_havalimanlarını_gazeteciyi | 
+| 23 | imajını - vaazı - badethaneler - abdulmalik - resimler | 84 | 23_imajını_vaazı_badethaneler_abdulmalik | 
+| 24 | nepotizmin - hristiyanlıg - anatomisi - desteklemekten - gibson | 82 | 24_nepotizmin_hristiyanlıg_anatomisi_desteklemekten | 
+| 25 | milislerden - bulamadı - fırlattı - diyecekler - niversiteler | 80 | 25_milislerden_bulamadı_fırlattı_diyecekler | 
+| 26 | sarsıldı - hazırlanmıs - hizmete - birlikler - fuarlarda | 77 | 26_sarsıldı_hazırlanmıs_hizmete_birlikler | 
+| 27 | operasyonu - zamanlı - mlkp - zlerce - bursa | 75 | 27_operasyonu_zamanlı_mlkp_zlerce | 
+| 28 | harekatında - baskınlarında - mesafede - netemiyor - ananlardan | 65 | 28_harekatında_baskınlarında_mesafede_netemiyor | 
+| 29 | ilgilendiren - kıymetini - ortaklık - tavrı - kızılderililere | 65 | 29_ilgilendiren_kıymetini_ortaklık_tavrı | 
+| 30 | bartın - yerinden - fırtınasında - hapishanelerin - kasırgası | 64 | 30_bartın_yerinden_fırtınasında_hapishanelerin | 
+| 31 | kaldırılsın - gidebilirim - beklentiler - lkeyiz - almıs | 64 | 31_kaldırılsın_gidebilirim_beklentiler_lkeyiz | 
+| 32 | zırhlıları - alıkoymayı - kurtulamayız - katletmesinin - yakalanırsa | 64 | 32_zırhlıları_alıkoymayı_kurtulamayız_katletmesinin | 
+| 33 | ukraynalı - komutasını - zayıflamasına - esirlerini - birbirini | 63 | 33_ukraynalı_komutasını_zayıflamasına_esirlerini | 
+| 34 | soykırımı - galeri - azerbaycan - vefatının - paramiliter | 63 | 34_soykırımı_galeri_azerbaycan_vefatının | 
+| 35 | hıristiyanların - filistinlileri - azınlık - soykırım - abd | 63 | 35_hıristiyanların_filistinlileri_azınlık_soykırım | 
+| 36 | tanıyabilir - kullanamıyor - soykırım - saldırganlıg - ıkmalarına | 62 | 36_tanıyabilir_kullanamıyor_soykırım_saldırganlıg | 
+| 37 | harekatıyla - bakıs - zayıflatıp - julian - harrison | 61 | 37_harekatıyla_bakıs_zayıflatıp_julian | 
+| 38 | dokunulmazlıklarının - gidemeyecekler - faydalanamayacaklar - kesz30rd7p0 - kafkasyalılar | 60 | 38_dokunulmazlıklarının_gidemeyecekler_faydalanamayacaklar_kesz30rd7p0 | 
+| 39 | taksicilerden - yazıldı - taraftar - harcamalar - bankası | 59 | 39_taksicilerden_yazıldı_taraftar_harcamalar | 
+| 40 | a5io50h4yln - j8gp50gu5zp - u09z50gc60k - wvsk50jk8uf - 2zxv50gsvoh | 52 | 40_a5io50h4yln_j8gp50gu5zp_u09z50gc60k_wvsk50jk8uf | 
+| 41 | saldırıda - arpıs - eteler - endonezya - patlamalar | 49 | 41_saldırıda_arpıs_eteler_endonezya | 
+| 42 | gazetecilerden - bombardımanlarında - mısır - doktorları - saldırıda | 45 | 42_gazetecilerden_bombardımanlarında_mısır_doktorları | 
+| 43 | destekledikleri - hazırlanmıs - patlamasının - atmasında - yayında | 45 | 43_destekledikleri_hazırlanmıs_patlamasının_atmasında | 
+| 44 | tırmalarına - yarın - gelmedi - sızıntısı - mayıs | 44 | 44_tırmalarına_yarın_gelmedi_sızıntısı | 
+| 45 | faaliyeti - karayoluna - sızdırıldı - akıncı - lkeleriyle | 44 | 45_faaliyeti_karayoluna_sızdırıldı_akıncı | 
+| 46 | osmanlı - azerbaycan - alıs - mayıs - knesset | 44 | 46_osmanlı_azerbaycan_alıs_mayıs | 
+| 47 | emirlerinizi - saldırabilir - ısınma - lmelerini - dahalesine | 43 | 47_emirlerinizi_saldırabilir_ısınma_lmelerini | 
+| 48 | suriyelileri - kaynakları - partiler - yapmadan - rkiyesi | 42 | 48_suriyelileri_kaynakları_partiler_yapmadan | 
+| 49 | ilerleyen - almıyoruz - ukraynalı - kuvvetleri - bombalanmayacag | 42 | 49_ilerleyen_almıyoruz_ukraynalı_kuvvetleri | 
+| 50 | kesilmesini - siyahiyi - oturumları - durdurdu - meclisi | 41 | 50_kesilmesini_siyahiyi_oturumları_durdurdu | 
+| 51 | desteklemiyor - bırakılacaklar - ınmacılara - tatbikatlarına - baskınında | 38 | 51_desteklemiyor_bırakılacaklar_ınmacılara_tatbikatlarına | 
+| 52 | yarın - ıklayacag - ıklamalar - yasası - ıklamalarda | 37 | 52_yarın_ıklayacag_ıklamalar_yasası | 
+| 53 | devletli - abdullahiyan - ıklamalar - abbas - rkiyesiz | 37 | 53_devletli_abdullahiyan_ıklamalar_abbas | 
+| 54 | mısır - alıs - mayıs - ayın - beyrut | 36 | 54_mısır_alıs_mayıs_ayın | 
+| 55 | hazırlanmıs - tamamlamalı - hazırlanıyoruz - desteklemiyorum - insanlarla | 36 | 55_hazırlanmıs_tamamlamalı_hazırlanıyoruz_desteklemiyorum | 
+| 56 | katliamını - saldırıda - katliamı - bırakıldı - milis | 36 | 56_katliamını_saldırıda_katliamı_bırakıldı | 
+| 57 | wunz50gc5xi - tkpx50flc5b - nsli50joq7i - z2e850gbfws - gkq850j8bf9 | 35 | 57_wunz50gc5xi_tkpx50flc5b_nsli50joq7i_z2e850gbfws | 
+| 58 | katliamında - enkazı - abd - bini - deki | 35 | 58_katliamında_enkazı_abd_bini | 
+| 59 | azaltabilir - azaltmasını - slamcılıkla - dolandırdılar - devletine | 35 | 59_azaltabilir_azaltmasını_slamcılıkla_dolandırdılar | 
+| 60 | pkfq30qezre - bgfy30qdzs3 - zhng30qdvyv - abpx30qgvyz - xssd30qf1ij | 35 | 60_pkfq30qezre_bgfy30qdzs3_zhng30qdvyv_abpx30qgvyz | 
+| 61 | katliamların - toparlanmayı - kızılayı - operasyonuyla - toplandı | 35 | 61_katliamların_toparlanmayı_kızılayı_operasyonuyla | 
+| 62 | gazetecilerin - yansıması - yenilmesini - kırtıyor - gelecekte | 34 | 62_gazetecilerin_yansıması_yenilmesini_kırtıyor | 
+| 63 | mity50i1z0g - zj4k50fkm0l - 3ov750hkg5i - bb2k50j76vq - nugc50f2mzr | 34 | 63_mity50i1z0g_zj4k50fkm0l_3ov750hkg5i_bb2k50j76vq | 
+| 64 | gazetecilerin - katliamlarına - ablukasındaki - saldırdı - saldırdıg | 31 | 64_gazetecilerin_katliamlarına_ablukasındaki_saldırdı | 
+| 65 | yanlıları - barajlardaki - caddesi - lemlere - kaldırıldı | 31 | 65_yanlıları_barajlardaki_caddesi_lemlere | 
+| 66 | mayıs - eyrekte - beyrut - hedeflerini - ermenistan | 30 | 66_mayıs_eyrekte_beyrut_hedeflerini | 
+| 67 | husilerin - veremeyiz - koalisyonuna - onaylanmalı - birkac | 30 | 67_husilerin_veremeyiz_koalisyonuna_onaylanmalı | 
+| 68 | rvht50f9skw - xh7v50eufyf - 2ly050gxj1v - sr9f50h7nyj - i0pb50gzw1c | 29 | 68_rvht50f9skw_xh7v50eufyf_2ly050gxj1v_sr9f50h7nyj | 
+| 69 | komutasına - destekleriz - okunmasına - infazları - edilemeyen | 29 | 69_komutasına_destekleriz_okunmasına_infazları | 
+| 70 | ayın - ıklamaları - piyasasında - altındaki - kırdı | 29 | 70_ayın_ıklamaları_piyasasında_altındaki | 
+| 71 | kapsamına - kaldırıldı - kadınlara - marketlerde - ehliyetlerde | 28 | 71_kapsamına_kaldırıldı_kadınlara_marketlerde | 
+| 72 | alıs - mutasyona - ramıs - biliniyor - binin | 28 | 72_alıs_mutasyona_ramıs_biliniyor | 
+| 73 | onaylamasını - ramıs - riske - brexit - onayladı | 28 | 73_onaylamasını_ramıs_riske_brexit | 
+| 74 | sarsılmazdır - stratejisi - hazırlanıyoruz - saldırmaya - lkeleriyle | 28 | 74_sarsılmazdır_stratejisi_hazırlanıyoruz_saldırmaya | 
+| 75 | iileri - endonezyalı - iraklı - abdulkadir - velayet | 26 | 75_iileri_endonezyalı_iraklı_abdulkadir | 
+| 76 | depremlerinde - kurtarma - alıs - lgesindeki - lgesinden | 25 | 76_depremlerinde_kurtarma_alıs_lgesindeki | 
+| 77 | yarımadası - mısır - endonezya - threads - tataristan | 24 | 77_yarımadası_mısır_endonezya_threads | 
+| 78 | denemesi - tahliyesi - kuzeyinde - mozambik - partisi | 24 | 78_denemesi_tahliyesi_kuzeyinde_mozambik | 
+| 79 | yarıs - ukraynalı - diyen - stratejik - lgedeki | 24 | 79_yarıs_ukraynalı_diyen_stratejik | 
+| 80 | husilerin - emirlerine - saldırıda - ekilmesinin - depreminde | 23 | 80_husilerin_emirlerine_saldırıda_ekilmesinin | 
+| 81 | askıya - yaptırımları - ıktı - abd - ilis | 23 | 81_askıya_yaptırımları_ıktı_abd | 
+| 82 | sırtından - tırmacıya - alıs - kadına - sarayı | 22 | 82_sırtından_tırmacıya_alıs_kadına | 
+| 83 | katliamında - filistinlilerin - hastanesinde - irak - bini | 22 | 83_katliamında_filistinlilerin_hastanesinde_irak | 
+| 84 | soykırımdan - makamları - havaalanlarındaki - karartıyor - lgelerine | 21 | 84_soykırımdan_makamları_havaalanlarındaki_karartıyor | 
+| 85 | ılıklı - askıya - azerbaycan - kiler - ilig | 21 | 85_ılıklı_askıya_azerbaycan_kiler | 
+| 86 | hayatın - binin - vaka - sayılarında - toplanıyor | 21 | 86_hayatın_binin_vaka_sayılarında | 
+| 87 | tırmalarını - abd - vaka - rkiye - testleri | 21 | 87_tırmalarını_abd_vaka_rkiye | 
+| 88 | etiyopyalı - milisleri - saldırıları - halkı - etiyopya | 20 | 88_etiyopyalı_milisleri_saldırıları_halkı | 
+| 89 | siyahileri - milyarderlerin - yakalananların - tırma - abd | 20 | 89_siyahileri_milyarderlerin_yakalananların_tırma | 
+| 90 | saldırıda - katliama - altındaki - yakalandı - abd | 20 | 90_saldırıda_katliama_altındaki_yakalandı | 
+| 91 | desteklemedik - onaylamayanların - dezavantajları - soracaklar - tarlasıdır | 20 | 91_desteklemedik_onaylamayanların_dezavantajları_soracaklar | 
+| 92 | husileri - hastalıg - kullanılıyor - krizini - yoksulluk | 18 | 92_husileri_hastalıg_kullanılıyor_krizini | 
+| 93 | planlanmıs - hassasiyeti - harekatının - mezunu - korumak | 18 | 93_planlanmıs_hassasiyeti_harekatının_mezunu | 
+| 94 | srail - ifa - sakat - hastanesi - askeri | 17 | 94_srail_ifa_sakat_hastanesi | 
+| 95 | suriyelileri - niversitesindeki - kanlıg - caddesi - kapatıldıg | 17 | 95_suriyelileri_niversitesindeki_kanlıg_caddesi | 
+| 96 | ısrarcı - kıbrıs - mısır - azerbaycan - ilerleyis | 17 | 96_ısrarcı_kıbrıs_mısır_azerbaycan | 
+| 97 | ınmacıların - alıkonulan - husileri - saldırdıg - tarlalarını | 16 | 97_ınmacıların_alıkonulan_husileri_saldırdıg | 
+| 98 | enflasyonu - enflasyon - yu - ıkladı - kseldi | 16 | 98_enflasyonu_enflasyon_yu_ıkladı | 
+| 99 | akıncı - karıs - petrokimya - hazırlanıyor - idamlar | 16 | 99_akıncı_karıs_petrokimya_hazırlanıyor | 
+| 100 | yarın - artıs - bilgin - ıklamalar - hazırlanıyor | 15 | 100_yarın_artıs_bilgin_ıklamalar | 
+| 101 | c6ha50ha7xc - yamg50l1boh - a3av50hfkhh - unxb50kq0wb - kxnm50hjixs | 15 | 101_c6ha50ha7xc_yamg50l1boh_a3av50hfkhh_unxb50kq0wb | 
+| 102 | yanlıları - yasaklama - ortaklık - yakalandı - astrazeneca | 15 | 102_yanlıları_yasaklama_ortaklık_yakalandı | 
+| 103 | aywj50fhg7c - b1ub50j5wrg - xcko50fmxew - yfjy50g3j7e - teif50fofbs | 14 | 103_aywj50fhg7c_b1ub50j5wrg_xcko50fmxew_yfjy50g3j7e | 
+| 104 | imzalamıyor - emirlikleri - kalmıs - arayıs - lkesiyle | 14 | 104_imzalamıyor_emirlikleri_kalmıs_arayıs | 
+| 105 | lkelerle - filistinlilerin - asıllı - dahale - topraklarını | 14 | 105_lkelerle_filistinlilerin_asıllı_dahale | 
+| 106 | saldırıda - eylemleri - adaylık - astrazeneca - abd | 14 | 106_saldırıda_eylemleri_adaylık_astrazeneca | 
+| 107 | katliamına - mevzilerini - mısır - kuvvetleri - askerlerinden | 14 | 107_katliamına_mevzilerini_mısır_kuvvetleri | 
+| 108 | arazilerine - azaltıyor - satıs - havalimanlarında - lkedeki | 14 | 108_arazilerine_azaltıyor_satıs_havalimanlarında | 
+| 109 | katliamına - alıs - kısıtlama - mayıs - zammın | 13 | 109_katliamına_alıs_kısıtlama_mayıs | 
+| 110 | yasaklamayı - bombardıman - satıs - mısır - siyahi | 13 | 110_yasaklamayı_bombardıman_satıs_mısır | 
+| 111 | fırlatılacak - koruyabilirler - referandumda - hareketler - azmettirmekle | 13 | 111_fırlatılacak_koruyabilirler_referandumda_hareketler | 
+| 112 | tırmanmasından - partinin - kılıc - ıma - ilis | 13 | 112_tırmanmasından_partinin_kılıc_ıma | 
+| 113 | ilerliyor - lgelerinde - itibarıyla - kırsalında - imleri | 12 | 113_ilerliyor_lgelerinde_itibarıyla_kırsalında | 
+| 114 | mısırlı - mezarlıklarda - mısır - sarsıyor - okullarda | 12 | 114_mısırlı_mezarlıklarda_mısır_sarsıyor | 
+| 115 | ilerliyor - teslimatını - zırhlı - birlikler - lgelerinde | 12 | 115_ilerliyor_teslimatını_zırhlı_birlikler | 
+| 116 | anlayıs - partiler - artırıma - mayıs - indirimi | 12 | 116_anlayıs_partiler_artırıma_mayıs | 
+| 117 | bombardıman - mısırlılara - komutanı - meclisi - yapın | 12 | 117_bombardıman_mısırlılara_komutanı_meclisi | 
+| 118 | yaslayamayız - sırtımızı - komutanı - mısır - kabiliyetlerini | 12 | 118_yaslayamayız_sırtımızı_komutanı_mısır | 
+| 119 | temsilcisi - kurtarma - melerin - etmesini - abd | 11 | 119_temsilcisi_kurtarma_melerin_etmesini | 
+| 120 | hikayesi - askerlerinin - srail - yu - askerlerince | 11 | 120_hikayesi_askerlerinin_srail_yu | 
+| 121 | sızdırılan - mısır - sırbistan - pentagon - sevkiyatının | 10 | 121_sızdırılan_mısır_sırbistan_pentagon | 
+| 122 | cemevleriyle - hedefi - sendikaları - belediyeler - endonezya | 10 | 122_cemevleriyle_hedefi_sendikaları_belediyeler | 
+| 123 | yolsuzlukla - kefaletle - kalıyor - kars - lkeye | 10 | 123_yolsuzlukla_kefaletle_kalıyor_kars | 
+| 124 | harekatını - yanlılarına - sırbistan - selanik - abd | 10 | 124_harekatını_yanlılarına_sırbistan_selanik |
+  
+</details>
+
+## Training hyperparameters
+
+* calculate_probabilities: False
+* language: None
+* low_memory: False
+* min_topic_size: 10
+* n_gram_range: (1, 1)
+* nr_topics: None
+* seed_topic_list: None
+* top_n_words: 10
+* verbose: False
+* zeroshot_min_similarity: 0.7
+* zeroshot_topic_list: None
+
+## Framework versions
+
+* Numpy: 1.23.5
+* HDBSCAN: 0.8.38.post1
+* UMAP: 0.5.6
+* Pandas: 2.2.2
+* Scikit-Learn: 1.5.1
+* Sentence-transformers: 3.0.1
+* Transformers: 4.44.2
+* Numba: 0.60.0
+* Plotly: 5.24.0
+* Python: 3.10.12

config.json

@@ -0,0 +1,16 @@
+{
+  "calculate_probabilities": false,
+  "language": null,
+  "low_memory": false,
+  "min_topic_size": 10,
+  "n_gram_range": [
+    1,
+    1
+  ],
+  "nr_topics": null,
+  "seed_topic_list": null,
+  "top_n_words": 10,
+  "verbose": false,
+  "zeroshot_min_similarity": 0.7,
+  "zeroshot_topic_list": null
+}

ctfidf.safetensors

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:4a4978891b3da11c57c111eba57d5e1fdcceeb89e8dc49cd1405a551ddf191f6
+size 973560

topic_embeddings.safetensors

@@ -0,0 +1,3 @@
+version https://git-lfs.github.com/spec/v1
+oid sha256:c1b2d34eda19eadaab03456e8617ac9bf5120385ef8af684a442e87cf5593547
+size 516192