Hugging Face's logo

akhooli
/
setfit_ar_sst2

Text Classification
setfit
Safetensors
sentence-transformers
bert
generated_from_setfit_trainer
Eval Results
Model card Files Community
akhooli commited on
Commit
80f67ed
•
1 Parent(s): fc9154f

Push model using huggingface_hub.

Browse files
Files changed (4) hide show
  1. README.md +79 -49
  2. config.json +1 -1
  3. model.safetensors +1 -1
  4. model_head.pkl +1 -1
README.md CHANGED
@@ -10,13 +10,16 @@ tags:
10
  - text-classification
11
  - generated_from_setfit_trainer
12
  widget:
13
- - text: 'فيلم تشويق بدون الكثير من الإثارة. '
14
- - text: 'النقطة النهائية للفيلم - وهي أن كل شخص يجب أن يكون على طبيعته - هي نقطة مبتذلة،
15
- لكن كاتب السيناريو والمخرج ميشيل جوندري أعاد تأكيدها إلى حد السخافة. '
16
- - text: 'واحد من أعظم الأفلام التي رأيتها على الإطلاق. '
17
- - text: 'إنها لا تلعب دورًا دراميًا أبدًا حتى عندما تحدث أشياء دراماتيكية للناس. '
18
- - text: 'يستغل -lrb- headbanger -rrb- الصور النمطية بطريقة ممتعة، مع إضافة القليل
19
- من القلب والموضوع المقلق. '
 
 
 
20
  inference: true
21
  model-index:
22
  - name: SetFit with akhooli/sbert_ar_nli_500k_norm
@@ -30,7 +33,7 @@ model-index:
30
  split: test
31
  metrics:
32
  - type: accuracy
33
- value: 0.841995841995842
34
  name: Accuracy
35
  ---
36
 
@@ -62,17 +65,17 @@ The model has been trained using an efficient few-shot learning technique that i
62
  - **Blogpost:** [SetFit: Efficient Few-Shot Learning Without Prompts](https://huggingface.co/blog/setfit)
63
 
64
  ### Model Labels
65
- | Label | Examples |
66
- |:---------|:--------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|
67
- | positive | <ul><li>'جلبت إلى الحياة على الشاشة الكبيرة. '</li><li>'يجب أن ينظر إليه على أنه يعتقد. '</li><li>'تم إجراء القتال بالسيف بشكل جيد، كما أن auteuil هو متعة أبله. '</li></ul> |
68
- | negative | <ul><li>'الشعور العام لا يختلف عن مشاهدة حلقة مجيدة من "الجنة السابعة". \'\' '</li><li>'... الأمر برمته لم ينجح إلا في جعلني أشعر بالترنح. '</li><li>'يتطلب الكثير من معظم المشاهدين. '</li></ul> |
69
 
70
  ## Evaluation
71
 
72
  ### Metrics
73
  | Label | Accuracy |
74
  |:--------|:---------|
75
- | **all** | 0.8420 |
76
 
77
  ## Uses
78
 
@@ -92,7 +95,7 @@ from setfit import SetFitModel
92
  # Download from the 🤗 Hub
93
  model = SetFitModel.from_pretrained("akhooli/setfit")
94
  # Run inference
95
- preds = model("فيلم تشويق بدون الكثير من الإثارة. ")
96
  ```
97
 
98
  <!--
@@ -122,19 +125,19 @@ preds = model("فيلم تشويق بدون الكثير من الإثارة. ")
122
  ## Training Details
123
 
124
  ### Training Set Metrics
125
- | Training set | Min | Median | Max |
126
- |:-------------|:----|:-------|:----|
127
- | Word count | 2 | 15.787 | 45 |
128
 
129
  | Label | Training Sample Count |
130
  |:---------|:----------------------|
131
- | negative | 1000 |
132
- | positive | 1000 |
133
 
134
  ### Training Hyperparameters
135
- - batch_size: (32, 32)
136
- - num_epochs: (10, 10)
137
- - max_steps: 1000
138
  - sampling_strategy: undersampling
139
  - body_learning_rate: (2e-05, 1e-05)
140
  - head_learning_rate: 0.01
@@ -146,37 +149,64 @@ preds = model("فيلم تشويق بدون الكثير من الإثارة. ")
146
  - warmup_proportion: 0.1
147
  - l2_weight: 0.01
148
  - seed: 42
149
- - run_name: setfit_sst2
150
  - eval_max_steps: -1
151
  - load_best_model_at_end: False
152
 
153
  ### Training Results
154
- | Epoch | Step | Training Loss | Validation Loss |
155
- |:-----:|:----:|:-------------:|:---------------:|
156
- | 0.02 | 1 | 0.1616 | - |
157
- | 1.0 | 50 | 0.1473 | - |
158
- | 2.0 | 100 | 0.0924 | - |
159
- | 0.002 | 1 | 0.1187 | - |
160
- | 0.1 | 50 | 0.1062 | - |
161
- | 0.2 | 100 | 0.079 | - |
162
- | 0.3 | 150 | 0.0586 | - |
163
- | 0.4 | 200 | 0.0404 | - |
164
- | 0.5 | 250 | 0.0285 | - |
165
- | 0.6 | 300 | 0.02 | - |
166
- | 0.7 | 350 | 0.0151 | - |
167
- | 0.8 | 400 | 0.0163 | - |
168
- | 0.9 | 450 | 0.0125 | - |
169
- | 1.0 | 500 | 0.0094 | - |
170
- | 1.1 | 550 | 0.0109 | - |
171
- | 1.2 | 600 | 0.0086 | - |
172
- | 1.3 | 650 | 0.0074 | - |
173
- | 1.4 | 700 | 0.0081 | - |
174
- | 1.5 | 750 | 0.0071 | - |
175
- | 1.6 | 800 | 0.0076 | - |
176
- | 1.7 | 850 | 0.0078 | - |
177
- | 1.8 | 900 | 0.0103 | - |
178
- | 1.9 | 950 | 0.0074 | - |
179
- | 2.0 | 1000 | 0.011 | - |
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
180
 
181
  ### Framework Versions
182
  - Python: 3.10.14
 
10
  - text-classification
11
  - generated_from_setfit_trainer
12
  widget:
13
+ - text: 'لقد تم إنجازه من قبل ولكن لم يكن بهذه الوضوح أو بهذا القدر من الشغف. '
14
+ - text: 'بالنسبة لي، هذه الأوبرا ليست مفضلة، لذا فقد مر وقت طويل قبل أن تغني السيدة
15
+ السمينة. '
16
+ - text: 'جودينج وكوبورن كلاهما فائزان بجائزة الأوسكار، وهي حقيقة تبدو غير قابلة للتصور
17
+ عندما تشاهدهما وهما يشقان طريقهما بطريقة خرقاء عبر كلاب الثلج. '
18
+ - text: 'يتمتع الفيلم بلمعان عالي اللمعان وصدمات عالية الأوكتان التي تتوقعها من دي
19
+ بالما، ولكن ما يجعله مؤثرًا هو أنه أيضًا أحد أذكى التعبيرات وأكثرها إمتاعًا عن
20
+ الحب السينمائي الخالص الذي يأتي من مخرج أمريكي منذ سنوات . '
21
+ - text: 'ولكنه يأتي أيضًا مع الكسل والغطرسة التي يتميز بها الشيء الذي يعرف بالفعل
22
+ أنه فاز. '
23
  inference: true
24
  model-index:
25
  - name: SetFit with akhooli/sbert_ar_nli_500k_norm
 
33
  split: test
34
  metrics:
35
  - type: accuracy
36
+ value: 0.8783783783783784
37
  name: Accuracy
38
  ---
39
 
 
65
  - **Blogpost:** [SetFit: Efficient Few-Shot Learning Without Prompts](https://huggingface.co/blog/setfit)
66
 
67
  ### Model Labels
68
+ | Label | Examples |
69
+ |:---------|:--------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------------|
70
+ | negative | <ul><li>'إنه أمر رصاصي ويمكن التنبؤ به، ويفتقر إلى الضحك. '</li><li>'لا يعرف مايرز أبدًا متى يترك الكمامة تموت؛ وهكذا، فإننا نتعرض لنكات طويلة ومذهلة حول البراز والتبول تلو الأخرى. '</li><li>'غزل رعب ملحمي مبتذل ومبتذل ينتهي به الأمر إلى أن يكون أكثر غباءً من عنوانه. '</li></ul> |
71
+ | positive | <ul><li>'أوصي بشدة أن يشاهد الجميع هذا الفيلم، لأهميته التاريخية وحدها. '</li><li>'المخرج كابور هو مخرج أفلام يتمتع بميل ح��يقي للمناظر الطبيعية والمغامرات الملحمية، وهذا فيلم أفضل من فيلمه السابق باللغة الإنجليزية، إليزابيث الذي نال الثناء. '</li><li>'فيلم نوير صغير غير تقليدي، قصة جريمة منظمة تتضمن واحدة من أغرب قصص الحب التي يمكن أن تراها على الإطلاق. '</li></ul> |
72
 
73
  ## Evaluation
74
 
75
  ### Metrics
76
  | Label | Accuracy |
77
  |:--------|:---------|
78
+ | **all** | 0.8784 |
79
 
80
  ## Uses
81
 
 
95
  # Download from the 🤗 Hub
96
  model = SetFitModel.from_pretrained("akhooli/setfit")
97
  # Run inference
98
+ preds = model("لقد تم إنجازه من قبل ولكن لم يكن بهذه الوضوح أو بهذا القدر من الشغف. ")
99
  ```
100
 
101
  <!--
 
125
  ## Training Details
126
 
127
  ### Training Set Metrics
128
+ | Training set | Min | Median | Max |
129
+ |:-------------|:----|:--------|:----|
130
+ | Word count | 2 | 16.2702 | 52 |
131
 
132
  | Label | Training Sample Count |
133
  |:---------|:----------------------|
134
+ | negative | 2500 |
135
+ | positive | 2500 |
136
 
137
  ### Training Hyperparameters
138
+ - batch_size: (64, 64)
139
+ - num_epochs: (1, 1)
140
+ - max_steps: 5000
141
  - sampling_strategy: undersampling
142
  - body_learning_rate: (2e-05, 1e-05)
143
  - head_learning_rate: 0.01
 
149
  - warmup_proportion: 0.1
150
  - l2_weight: 0.01
151
  - seed: 42
152
+ - run_name: setfit_sst2_5k
153
  - eval_max_steps: -1
154
  - load_best_model_at_end: False
155
 
156
  ### Training Results
157
+ | Epoch | Step | Training Loss | Validation Loss |
158
+ |:------:|:----:|:-------------:|:---------------:|
159
+ | 0.0004 | 1 | 0.3009 | - |
160
+ | 0.04 | 100 | 0.2802 | - |
161
+ | 0.08 | 200 | 0.2312 | - |
162
+ | 0.12 | 300 | 0.1462 | - |
163
+ | 0.16 | 400 | 0.0838 | - |
164
+ | 0.2 | 500 | 0.0463 | - |
165
+ | 0.24 | 600 | 0.033 | - |
166
+ | 0.28 | 700 | 0.0206 | - |
167
+ | 0.32 | 800 | 0.0195 | - |
168
+ | 0.36 | 900 | 0.0174 | - |
169
+ | 0.4 | 1000 | 0.013 | - |
170
+ | 0.44 | 1100 | 0.0113 | - |
171
+ | 0.48 | 1200 | 0.0095 | - |
172
+ | 0.52 | 1300 | 0.0088 | - |
173
+ | 0.56 | 1400 | 0.0075 | - |
174
+ | 0.6 | 1500 | 0.0083 | - |
175
+ | 0.64 | 1600 | 0.0061 | - |
176
+ | 0.68 | 1700 | 0.0071 | - |
177
+ | 0.72 | 1800 | 0.0069 | - |
178
+ | 0.76 | 1900 | 0.0054 | - |
179
+ | 0.8 | 2000 | 0.007 | - |
180
+ | 0.84 | 2100 | 0.006 | - |
181
+ | 0.88 | 2200 | 0.0051 | - |
182
+ | 0.92 | 2300 | 0.0046 | - |
183
+ | 0.96 | 2400 | 0.0041 | - |
184
+ | 1.0 | 2500 | 0.0056 | - |
185
+ | 1.04 | 2600 | 0.0054 | - |
186
+ | 1.08 | 2700 | 0.0058 | - |
187
+ | 1.12 | 2800 | 0.0043 | - |
188
+ | 1.16 | 2900 | 0.0048 | - |
189
+ | 1.2 | 3000 | 0.004 | - |
190
+ | 1.24 | 3100 | 0.0036 | - |
191
+ | 1.28 | 3200 | 0.0042 | - |
192
+ | 1.32 | 3300 | 0.0041 | - |
193
+ | 1.3600 | 3400 | 0.004 | - |
194
+ | 1.4 | 3500 | 0.0029 | - |
195
+ | 1.44 | 3600 | 0.0047 | - |
196
+ | 1.48 | 3700 | 0.0041 | - |
197
+ | 1.52 | 3800 | 0.0026 | - |
198
+ | 1.56 | 3900 | 0.0029 | - |
199
+ | 1.6 | 4000 | 0.0027 | - |
200
+ | 1.6400 | 4100 | 0.0027 | - |
201
+ | 1.6800 | 4200 | 0.0033 | - |
202
+ | 1.72 | 4300 | 0.0031 | - |
203
+ | 1.76 | 4400 | 0.003 | - |
204
+ | 1.8 | 4500 | 0.0024 | - |
205
+ | 1.8400 | 4600 | 0.0028 | - |
206
+ | 1.88 | 4700 | 0.002 | - |
207
+ | 1.92 | 4800 | 0.0017 | - |
208
+ | 1.96 | 4900 | 0.0023 | - |
209
+ | 2.0 | 5000 | 0.0014 | - |
210
 
211
  ### Framework Versions
212
  - Python: 3.10.14
config.json CHANGED
@@ -1,5 +1,5 @@
1
  {
2
- "_name_or_path": "akhooli/setfit",
3
  "architectures": [
4
  "BertModel"
5
  ],
 
1
  {
2
+ "_name_or_path": "akhooli/sbert_ar_nli_500k_norm",
3
  "architectures": [
4
  "BertModel"
5
  ],
model.safetensors CHANGED
@@ -1,3 +1,3 @@
1
  version https://git-lfs.github.com/spec/v1
2
- oid sha256:1c3c9bd4f43375ac34f226441ff6e118c0795a5463192b9f50871ca3ad4d8f7d
3
  size 540795752
 
1
  version https://git-lfs.github.com/spec/v1
2
+ oid sha256:c1ddbc9cfbf6cf92889d459de679b811ae3498fbfb27c8662fff25ccafa94e8a
3
  size 540795752
model_head.pkl CHANGED
@@ -1,3 +1,3 @@
1
  version https://git-lfs.github.com/spec/v1
2
- oid sha256:04b6357807cd6b43a7286b5cc0ec040af512f57473ec9cc892dca2e3c648853b
3
  size 7007
 
1
  version https://git-lfs.github.com/spec/v1
2
+ oid sha256:314f0fa6195c82395e698a915380981643f942cfaf2d8456a3cf908dab117b5a
3
  size 7007