meandyou200175 commited on
Commit
a738c26
1 Parent(s): 519534c

Add new SentenceTransformer model

Browse files
1_Pooling/config.json ADDED
@@ -0,0 +1,10 @@
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "word_embedding_dimension": 768,
3
+ "pooling_mode_cls_token": false,
4
+ "pooling_mode_mean_tokens": true,
5
+ "pooling_mode_max_tokens": false,
6
+ "pooling_mode_mean_sqrt_len_tokens": false,
7
+ "pooling_mode_weightedmean_tokens": false,
8
+ "pooling_mode_lasttoken": false,
9
+ "include_prompt": true
10
+ }
README.md ADDED
@@ -0,0 +1,878 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ ---
2
+ base_model: bkai-foundation-models/vietnamese-bi-encoder
3
+ library_name: sentence-transformers
4
+ metrics:
5
+ - cosine_accuracy@1
6
+ - cosine_accuracy@2
7
+ - cosine_accuracy@5
8
+ - cosine_accuracy@10
9
+ - cosine_accuracy@100
10
+ - cosine_precision@1
11
+ - cosine_precision@2
12
+ - cosine_precision@5
13
+ - cosine_precision@10
14
+ - cosine_precision@100
15
+ - cosine_recall@1
16
+ - cosine_recall@2
17
+ - cosine_recall@5
18
+ - cosine_recall@10
19
+ - cosine_recall@100
20
+ - cosine_ndcg@10
21
+ - cosine_mrr@1
22
+ - cosine_mrr@2
23
+ - cosine_mrr@5
24
+ - cosine_mrr@10
25
+ - cosine_mrr@100
26
+ - cosine_map@100
27
+ - dot_accuracy@1
28
+ - dot_accuracy@2
29
+ - dot_accuracy@5
30
+ - dot_accuracy@10
31
+ - dot_accuracy@100
32
+ - dot_precision@1
33
+ - dot_precision@2
34
+ - dot_precision@5
35
+ - dot_precision@10
36
+ - dot_precision@100
37
+ - dot_recall@1
38
+ - dot_recall@2
39
+ - dot_recall@5
40
+ - dot_recall@10
41
+ - dot_recall@100
42
+ - dot_ndcg@10
43
+ - dot_mrr@1
44
+ - dot_mrr@2
45
+ - dot_mrr@5
46
+ - dot_mrr@10
47
+ - dot_mrr@100
48
+ - dot_map@100
49
+ pipeline_tag: sentence-similarity
50
+ tags:
51
+ - sentence-transformers
52
+ - sentence-similarity
53
+ - feature-extraction
54
+ - generated_from_trainer
55
+ - dataset_size:43804
56
+ - loss:CachedMultipleNegativesSymmetricRankingLoss
57
+ widget:
58
+ - source_sentence: Nhờ bác sĩ cho biết việc lựa chọn đóng đinh nội tủy và nẹp vít
59
+ để kết hợp xương đòn dựa trên cơ sở nào ạ? Ca phẫu thuật thường kéo dài trong
60
+ bao lâu? Bệnh nhân nằm viện mấy ngày?
61
+ sentences:
62
+ - ' Chào em, là bệnh mãn tính phải điều trị suốt đời, phải kiên nhẫn và kiên trì
63
+ nên đôi khi lượng đường trong cơ thể không ổn định. Lúc đi khám xét nghiệm thì
64
+ ổn do bản thân biết mai đi khám nên sẽ kiêng ăn, ăn ít... còn bệnh lâu dài nên
65
+ trong ngày đôi khi thèm chút này hay thích ăn chút kia, quên uống thuốc, suy
66
+ nghĩ, mất ngủ cũng làm đường không ổn định. Đường trong cơ thể lúc lên lúc xuống
67
+ dễ đưa đến biến chứng. Em hay thấy bệnh nhân tiểu đường tháo khớp ngón chân, ngón
68
+ tay, đôi khi tháo khớp gối, khớp háng, đây là do tê liệt hệ thần kinh nên khi
69
+ va chạm bệnh nhân không phát hiện. Đến khi phát hiện thì đã nhiễm trùng nặng phải
70
+ tháo khớp. Theo BS mẹ em có khả năng do biến chứng tiểu đường vì mẹ em bị bệnh
71
+ khá lâu nên ít nhiều ảnh hưởng thần kinh bị tê liệt gây đau. Em nên nhớ dặn mẹ
72
+ đi tái khám và điều trị cho thật ổn định nhé! Thân mến!'
73
+ - ' Để lựa chọn phương pháp đóng đinh nội tủy hay nẹp vít cho bệnh nhân cần dựa
74
+ vào nhiều yếu tố. Trong lòng tủy xương có một cái ống, nếu lòng tủy bệnh nhân
75
+ nhỏ mà đường gãy không bị gãy thành nhiều mảnh thì nên lựa chọn phương pháp đóng
76
+ đinh. Phương pháp này có nhược điểm dễ bị lộ phần đinh khi đinh vừa đóng, chưa
77
+ chắc vào xương. Tuy nhiên, ưu điểm là khi đóng đinh, đường mổ sẽ nhỏ, đơn giản.
78
+ Đối với nẹp vít, đường mổ dài hơn nhưng phần nắn chỉnh sẽ tuyệt đối, vững chắc
79
+ hơn. Nhìn chung, giữa 2 phương pháp thời gian mổ không khác biệt nhau nhiều, từ
80
+ 30-45 phút sẽ hoàn thành cuộc phẫu thuật kết hợp xương. Tại bệnh viện Nhân dân
81
+ 115, sau khi bệnh nhân được làm phẫu thuật có thể xuất viện rất sớm trong vòng
82
+ khoảng 3-5 ngày, tùy theo đường mổ lớn hay nhỏ. Giữa việc lựa chọn phẫu thuật
83
+ hay bảo tồn, đinh nội tủy hay nẹp vít phụ thuộc vào lòng tủy của bệnh nhân và
84
+ thói quen, sự đánh giá của phẫu thuật viên. Cá nhân tôi thường lựa chọn phương
85
+ pháp phẫu thuật nẹp vít sẽ cho kết quả nắn chỉnh tốt, chắc hơn và bệnh nhân không
86
+ bị biến chứng trồi đinh về sau. Thân mến.'
87
+ - Chào em, Tình trạng người mệt mỏi, khó thở, tim đập nhanh xảy ra khi không gắng
88
+ sức có thể do nhiều nguyên nhân, gồm tim mạch, hô hấp, thần kinh cơ, tiêu hóa
89
+ (chủ yếu là ống tiêu hóa trên), tâm lý, bệnh lý nội tiết tố… Viêm dạ dày trào
90
+ ngược có thể gây các triệu chứng này do dịch acid trào ngược từ dạ dày lên thực
91
+ quản kích thích thần kinh tim. Mặt khác bệnh dạ dày là bệnh có thể tái phát, điều
92
+ trị hết bệnh rồi thì bệnh vẫn có thể tái lại. Do đó, nếu em đã khám tim mạch và
93
+ hô hấp bình thường, để biết có phải mình mệt mỏi do bệnh dạ dày gây ra hay không
94
+ thì tốt nhất là em khám chuyên khoa nội tiêu hóa và điều trị trào ngược dạ dày
95
+ thực quản thử, nếu triệu chứng cải thiện nhanh chóng thì chính hắn là nguyên nhân,
96
+ em nhé.
97
+ - source_sentence: Tôi bị tình trạng nuốt nước miếng có cảm giác bị vướng ở cổ, không
98
+ đau rát, không ho sốt, ăn uống bình thường đã 1 ngày nay. Chỉ có nuốt nước miếng
99
+ là có cảm giác vướng thôi, lỗ tai bên trái thì cảm giác ngứa nhẹ. Xin hỏi là bệnh
100
+ gì vậy ạ?
101
+ sentences:
102
+ - "Em Lan thân mến, Hiện nay, xét nghiệm được xem là một xét nghiệm\r\nthường quy,\
103
+ \ nên thai kỳ của em cũng rất cần được làm những xét nghiệm này mặc\r\ndù gia\
104
+ \ đình em không có bệnh lý bất thường. Tuy nhiên, thai kỳ của em đã qua thời gian\
105
+ \ làm xét nghiệm Double test, bây\r\ngiờ em phải chờ đến lúc thai được 16 – 18\
106
+ \ tuần tuổi, làm xét nghiệm Triple test\r\nem nhé! Chúc em và bé khỏe mạnh!"
107
+ - 'Trường hợp thoái hóa cột sống thắt lưng gây đau mỏi liên tục dù đã dùng thuốc
108
+ giảm đau liều cao Chào em, Thoái hóa khớp, thoái hóa cột sống là tiến trình lão
109
+ hóa không thể tránh khỏi của con người, đặc biệt có thể xảy ra sớm và nhanh hơn
110
+ ở người nữ sau mãn kinh, sinh nở nhiều, suy dinh dưỡng hay ăn uống thiếu chất
111
+ khoáng, lao động vất vả lúc còn trẻ. Trường hợp thoái hóa cột sống thắt lưng gây
112
+ đau mỏi liên tục dù đã dùng thuốc giảm đau liều cao, đặc biệt là đau lan xuống
113
+ hai chân, tê yếu hai chân thì cần chụp MRI cột sống để tầm soát thoát vị đĩa đệm
114
+ chèn ép tủy sống. Trường hợp của em, mới phát hiện thoái hóa cột sống thắt lưng
115
+ gần đây, cũng mới uống thuốc 1 tuần và không duy trì nữa, việc đau lưng vẫn còn
116
+ âm ỉ nhưng không lan xuống hai chân thì chưa đến mức cần chụp MRI cột sống thắt
117
+ lưng. Nhưng mà, em cần tích cực điều trị để bệnh thoái hóa cột sống thắt lưng
118
+ không tiến triển nặng hơn. Bệnh này trị khỏi hoàn toàn là không thể, vì sinh lão
119
+ bệnh tử không thể cải hoàn, nhưng mà việc điều trị tích cực sẽ giúp khống chế
120
+ được bệnh, giảm đau và giảm tốc độ tiến triển của bệnh. Về việc sử dụng thuốc,
121
+ dù là thuốc Tây hay thuốc Đông y, em cũng cần phải thăm khám bs ck cơ xương khớp
122
+ (Tây y) hay ck y học cổ truyền (Đông y) để được kê thuốc phù hợp. các thuốc thường
123
+ dùng là giảm đau, giãn cơ, bổ sung vi khoáng chất (canxi, vitamin D3, magie...).
124
+ Bên cạnh đó, về phương pháp giảm đau hỗ trợ không dùng thuốc, em nên chú ý: -
125
+ Chú ý thay đổi tư thế trong quá trình làm việc, không giữ mãi một tư thế trong
126
+ nhiều giờ liền. Ngồi làm việc đúng tư thế để tránh các bệnh cột sống. - Vận động
127
+ đúng cách, khi vác vật nặng không vặn cột sống. - Thường xuyên tập thể dục rèn
128
+ luyện để cột sống vững chắc, cơ thể dẻo dai, bơi cũng được mà yoga là tốt nhất.
129
+ - Ăn uống khoa học, xây dựng chế độ dinh dưỡng hợp lý, tăng cường nhóm thực phẩm
130
+ giàu canxi, vitamin D, omega 3… giúp nâng cao độ chắc khỏe của đĩa đệm cũng như
131
+ xương khớp. - Duy trì cân nặng bình thường, tránh để tăng cân quá mức. - Tư thế
132
+ ngủ: nằm ngửa trên ván cứng hay nệm bông ép chặt, tránh nệm lò xo hay nệm cao
133
+ su quá mềm, có thể đệm ở vùng khoeo làm co nhẹ khớp gối và khớp háng, nên nằm
134
+ đầu thấp không gối sẽ tốt cho cột sống cổ. - Có thể thực hiện điều trị vật lý
135
+ và các liệu pháp phản xạ: bao gồm phương pháp nhiệt như chườm nóng (túi nước,
136
+ muối rang, cám rang, lá lốt, lá ngải cứu nóng); dùng các dòng điện tại khoa vật
137
+ lý trị liệu, điều trị bằng laser; châm cứu, kéo cơ để hỗ trợ giảm đau cơ cạnh
138
+ sống. Trân trọng!'
139
+ - Chào bạn, Nuốt vướng ở cổ thường gặp trong một số bệnh lý viêm nhiễm hầu họng
140
+ như viêm họng, viêm amidan mạn, trào ngược dạ dày thực quản, hội chứng chảy mũi
141
+ sau… Đây là có thể là triệu chứng đầu tiên báo hiệu một đợt bùng phát cấp tính
142
+ của viêm nhiễm hô hấp trên do triệu chứng mới chỉ xuất hiện 1 ngày. Bạn nên khám
143
+ bác sĩ Tai mũi họng để thăm khám trực tiếp, đánh giá và kê toa điều trị bạn nhé!
144
+ Thân mến.
145
+ - source_sentence: Chào bác sĩ, em bị gãy xương gót, đã đóng đinh đến nay được gần
146
+ 5 tuần. Vậy 6 tuần em tháo đinh được chưa ạ?
147
+ sentences:
148
+ - ' Chào em, gồm 2 trị số, trị số lớn nhất gọi là huyết áp tâm thu, bình thường
149
+ < 140 và > 90 mmHg; trị số thấp nhất gọi là huyết áp tâm trương, bình thường <
150
+ 90 và > 60 mmHg. Huyết áp có thể tăng khi căng thẳng, do lo lắng, do hội chứng
151
+ áo choàng trắng (khi vào bv, khi gặp bác sĩ thì huyết áp cao), bệnh lý viêm nhiễm,
152
+ do cafe, khi khó thở... nhìn chung là các stress đối với cơ thể. Như vậy, huyết
153
+ áp ghi nhận ở những lúc cơ thể đang lo lắng, bồn chồn, có bệnh thì sẽ không phản
154
+ ánh chính xác được huyết áp dao động bình thường của người bệnh. Do vậy em nên
155
+ khám chuyên khoa tim mạch, bác sĩ sẽ thăm khám và làm xét nghiệm kiểm tra xem
156
+ em có các dấu chứng của tăng huyết áp hay không (như dày thành tim, tiểu đạm,
157
+ đo huyết áp 24 giờ...) để xác định em có tăng huyết áp hay không và điều trị thích
158
+ hợp. Những triệu chứng hoa mắt, chóng mặt, đau đầu, đau 1 bên mắt, tiểu nhiều
159
+ có thể là do bệnh tăng huyết áp gây ra (ảnh hưởng lên mạch máu não, lên thận...)
160
+ hoặc là 1 bệnh lý khác như thiếu máu, rối loạn tiền đình, viêm nhiễm hệ thống,
161
+ viêm mũi xoang, bệnh lý mạch máu não... (và tăng huyết áp chỉ là phản ứng của
162
+ cơ thể khi có stress). Để tìm ra bệnh và giải quyết nỗi lo về bệnh, em nên đến
163
+ bệnh viện để kiểm tra sức khỏe em nhé. Thân mến! '
164
+ - ' Chào em, Thời điểm 6 tuần là quá sớm để rút đinh cố định xương gót (trừ trường
165
+ hợp khung cố định xương bên ngoài). Tháo đinh vít kim loại chỉ bắt buộc thực hiện
166
+ sớm trong những trường hợp bất thường như gãy vít, nhiễm trùng, khớp giả... gây
167
+ ra các triệu chứng bất thường với bệnh nhân mà thôi. Em nên tái khám tại chuyên
168
+ khoa Chấn thương Chỉnh hình để bác sĩ kiểm tra lại việc lành xương của em tốt
169
+ chưa và dặn em lịch trình rút đinh phù hợp, em nhé. Thân mến.'
170
+ - K dạ dày không điều trị tiên lượng sống khá ngắn Chào em, K dạ dày là ung thư
171
+ dạ dày. Bệnh ung thư dạ dày là bệnh lý ác tính và có chỉ định phẫu thuật cắt khối
172
+ u – cắt dạ dày khi còn có thể cắt được. Nếu đã phát hiện ung thư dạ dày mà không
173
+ điều trị phẫu thuật thì thời gian sống của bệnh nhân trung bình là 6 tháng đến
174
+ 1 năm tùy loại ung thư dạ dày, khi ung thư tiến triển di căn có thể gây nhiều
175
+ đau đớn hơn. Hiện tại chị em đang bị suy nhược cơ thể nhiều, không ăn uống được,
176
+ đau nhiều do ung thư dạ dày là có chỉ định vào bệnh viện nằm điều trị luôn rồi,
177
+ chứ không thể nào lấy thuốc mà không tới phòng khám được đâu. Vô bệnh viện chị
178
+ em sẽ được truyền dịch, chích thuốc, nâng thể trạng lên rồi mới tính đến chuyện
179
+ điều trị khối ung thư kia. Em đưa chị em đến bệnh viện càng sớm càng tốt, tốt
180
+ nhất là bệnh viện Ung bướu, em nhé.
181
+ - source_sentence: "Thưa bác sĩ,\r\n\r\nEm bị đục thủy tinh thể do chấn thương và\
182
+ \ vừa mổ mắt về và em cũng bị cận thị. Thời gian khoảng 1 tuần em thấy mắt mình\
183
+ \ nhìn chỉ rõ hơn được 1 phần nào. Nhìn xa thì vẫn thấy nhưng vẫn mờ mờ. Bác sĩ\
184
+ \ cho em lời khuyên nên làm cách nào và mắt em có thể sáng lại như bình thường\
185
+ \ được không ạ?\r\n\r\nEm xin chân thành cảm ơn! (Minh Tiến - Bình Định)"
186
+ sentences:
187
+ - Bạn Minh Tiến thân mến, Hiện nay phẫu thuật đục thủy tinh thể đã được y học nói
188
+ chung và ngành Nhãn khoa Việt Nam thực hiện hoàn chỉnh đến mức tuyệt vời. Phẫu
189
+ thuật này được xem như một cuộc cách mạng rất đáng tự hào của ngành nhãn khoa.
190
+ Hàng ngày có thể tới hàng ngàn ca phẫu thuật đem lại ánh sáng cho người mù lòa
191
+ đục thể thủy tinh tại Việt Nam. Nói như vậy để giúp cho bạn hiểu rõ phẫu thuật
192
+ này các bác sĩ Việt Nam thực hiện rất thường xuyên và rất tốt. Tuy nhiên, với
193
+ mắt đục thủy tinh thể do chấn thương của bạn là ca phẫu thuật tương đối không
194
+ đơn giản. Thêm vào đó ngoài đục thủy tinh thể do chấn thương, mắt bạn cũng có
195
+ thể kèm theo tổn thương ở các bộ phận khác của mắt mà trước mổ bác sĩ khó có thể
196
+ chẩn đoán được. Với hai lý do nêu trên, nên đôi khi mắt mổ khó có thể tốt theo
197
+ ý muốn của cả bệnh nhân lẫn thầy thuốc. Bạn cần có thời gian theo dõi và điều
198
+ trị tiếp sau mổ. Sau thời gian ổn định khoảng 1 tháng, bạn cần đo thử kính xem
199
+ có cải thiện thị lực thêm không? Chúc bạn may mắn!
200
+ - Chào em, Bình thường các hạch trong cơ thể không sưng to lên đến mức có thể sờ
201
+ chạm hay nhận biết được. Vì thế, hạch sưng lên, hay thường gọi là nổi hạch, là
202
+ một triệu chứng bất thường của cơ thể. Cho nên, em lo lắng là đúng khi phát hiện
203
+ hạch ở vùng cổ. Hạch bạch huyết đóng vai trò quan trọng đối với hoạt động của
204
+ hệ miễn dịch. Chúng chứa các tế bào miễn dịch như lympho bào, đại thực bào...
205
+ có chức năng miễn dịch chống lại các yếu tố lạ như vi khuẩn, virus, kí sinh trùng...
206
+ xâm nhập vào cơ thể. Trong quá trình đó các hạch có thể bị viêm và sưng lên. Một
207
+ số trường hợp hạch sưng có thể là hạch ung thư hoặc di căn. Đặc điểm của hạch
208
+ viêm là nhỏ, số lượng ít, bờ tròn đều, không phát triển theo thời gian, không
209
+ xâm lấn da xung quanh. Thông thường đối với hạch viêm thì nguồn viêm có thể tấn
210
+ công tại hạch, cũng có khi là hạch viêm phản ứng với ổ viêm nhiễm cạnh đó, điều
211
+ trị hết viêm thì hạch sẽ lặn dần, có thể lặn chậm hơn vài tuần đến vài tháng,
212
+ có một số loại hạch cũng là hạch viêm nhưng mà chỉ giảm kích thước rồi cứ "lì"
213
+ vậy luôn - không lặn hẳn nhưng không còn sưng như trước và vẫn giữ hình ảnh của
214
+ hạch viêm, cũng có loại hạch viêm sau lại chuyển sang xơ chai hóa như sẹo cũ và
215
+ không lặn. Như vậy, em có 1 hạch vùng cổ đã được xác định là hạch viêm thông qua
216
+ sinh thiết hạch cách đây 10 năm. Trong vòng 10 năm nay, hạch cổ đó không có triệu
217
+ chứng bất thường. Gần đây, hạch cổ đó có biểu hiện viêm trở lại, mặc dù em uống
218
+ thuốc (tự mua) thì hạch hết sưng đau, nhưng em cũng cần khám lại bên chuyên khoa
219
+ ung bướu để kiểm tra tổng quát lại 1 lần, tìm nguyên nhân gây kích thích hạch
220
+ viêm này tái hoạt động, xem là nguyên nhân lành tính hay tiềm ẩn nguyên nhân khác
221
+ (vì lần kiểm tra trước đã cách đây 10 năm rồi), em nhé.
222
+ - ' Chào em, Trường hợp em mô tả là những bất thường của hệ hô hấp có thể là bệnh
223
+ lý tai mũi họng hay hô hấp dưới như viêm phổi, viêm phế quản, em cần đến các cơ
224
+ sở y tế chuyên sâu tai mũi họng hay hô hấp để khám thêm. Những biểu hiện đó hoàn
225
+ toàn không có cơ sở nghĩ . Thân mến!'
226
+ - source_sentence: Bác sĩ cho em hỏi, em bị rạn nứt xương gót chân bên phải. Em bị
227
+ hơn 1 tháng nay rồi. Em bỏ thuốc lá. Em muốn hỏi bác sĩ thông thường bó bột hơn
228
+ hay thuốc lá hơn? Như của em khoảng bao lâu thì khỏi? Và giờ em vẫn chưa đi được
229
+ bác sĩ ạ. Em cảm ơn.
230
+ sentences:
231
+ - 'Câu hỏi của em rất chân thành. Tự ý thức quyết tâm cai nghiệm là điều đáng quý.
232
+ Nếu em tiếp tục sử dụng thì tình trạng sẽ tồi tệ hơn rất nhiều. Ba yếu tố quan
233
+ trọng nhất và tiến hành đồng thời để cai nghiện thành công, đó là: 1. Ý chí 2.
234
+ Sự hiểu biết thấu đáo 3. Môi trường thân thiện. Các Trung tâm cai nghiện sẽ giúp
235
+ em phần 2 và phần 3, từ đó sẽ củng cố phần 1 của em. Trường hợp ở nhà mà em tự
236
+ cai, thực hành mỗi ngày với 3 điều kiện trên, em sẽ thành công như nhiều bạn khác.
237
+ Không nên nôn nóng, sốt ruột. Trước tiên em phải thuộc lòng và thực hành những
238
+ quy tắc này thành thói quen và áp dụng suốt đời. Nhiều trường hợp cai được vài
239
+ năm vẫn tái nghiện. Do đó, nên tránh xa những "nguồn" khiến em tái nghiện, tránh
240
+ xa bạn bè nghiện ngập em nhé. Chúc em quyết tâm và đem lại niềm vui cho bố mẹ.'
241
+ - Chào em, Thứ nhất, bắt buộc phải có phim Xquang để biết em có thực sự nứt xương
242
+ gót hay bị gãy phức tạp hơn, vì nhiều trường hợp tưởng chỉ nứt xương thôi nhưng
243
+ thật ra là vỡ phức tạp, phải phẫu thuật mới nhanh ổn được. Thứ hai, theo nguyên
244
+ tắc điều trị nứt gãy xương là phải cố định tốt để can xương mọc ra, chỗ nứt gãy
245
+ mới được nối liền. Do đó, nếu bó bột thì chân sẽ được cố định liên tục trong 4-6
246
+ tuần, còn bó lá thì phải thay thường xuyên, mỗi lần thay là 1 lần xê dịch nên
247
+ xương khó lành. Tốt hơn hết em nên đến Bệnh viện Chấn thương Chỉnh hình để được
248
+ kiểm tra và điều trị thích hợp, em nhé. Thân mến.
249
+ - Chào bạn, Qua hình ảnh sang thương và mô tả triệu chứng, bệnh lý của bạn có khả
250
+ năng là chàm hay còn gọi là viêm da dị ứng với đặc điểm là viêm và nổi mụn nhỏ,
251
+ ngứa ngáy. Nguyên nhân của chàm hiện nay chưa rõ nhưng có thể do cơ địa dị ứng
252
+ (người mắc hen, viêm mũi dị ứng có nguy cơ cao mắc chàm), do kích thích của hóa
253
+ chất như nước rửa chén, bột giặt, cao su, kim loại, chất liệu giày dép (chàm tiếp
254
+ xúc),... Thời tiết lạnh, stress, đổ mồ hôi nhiều và phấn hoa... cũng là những
255
+ nguyên nhân có thể khiến da bị chàm. Chàm cũng có thể gặp ở người bị suy van tĩnh
256
+ mạch, giãn tĩnh mạch chân khiến tình trạng bệnh dai dẳng, kém đáp ứng điều trị.
257
+ Điều trị chàm thường phải sử dụng một số loại thuốc bôi da kéo dài, có thể để
258
+ lại tác dụng phụ, do đó bạn nên khám BS Da liễu để kê toa loại thuốc phù hợp.
259
+ Ngoài ra, bạn nên chú ý xem có yếu tố nào thường kích thích khởi phát chàm để
260
+ tránh cho bệnh tái phát bạn nhé! Thân mến.
261
+ model-index:
262
+ - name: SentenceTransformer based on bkai-foundation-models/vietnamese-bi-encoder
263
+ results:
264
+ - task:
265
+ type: information-retrieval
266
+ name: Information Retrieval
267
+ dataset:
268
+ name: Unknown
269
+ type: unknown
270
+ metrics:
271
+ - type: cosine_accuracy@1
272
+ value: 0.704163623082542
273
+ name: Cosine Accuracy@1
274
+ - type: cosine_accuracy@2
275
+ value: 0.79163623082542
276
+ name: Cosine Accuracy@2
277
+ - type: cosine_accuracy@5
278
+ value: 0.8772826880934989
279
+ name: Cosine Accuracy@5
280
+ - type: cosine_accuracy@10
281
+ value: 0.9251278305332359
282
+ name: Cosine Accuracy@10
283
+ - type: cosine_accuracy@100
284
+ value: 0.9921475529583638
285
+ name: Cosine Accuracy@100
286
+ - type: cosine_precision@1
287
+ value: 0.704163623082542
288
+ name: Cosine Precision@1
289
+ - type: cosine_precision@2
290
+ value: 0.39581811541271
291
+ name: Cosine Precision@2
292
+ - type: cosine_precision@5
293
+ value: 0.17545653761869978
294
+ name: Cosine Precision@5
295
+ - type: cosine_precision@10
296
+ value: 0.09251278305332358
297
+ name: Cosine Precision@10
298
+ - type: cosine_precision@100
299
+ value: 0.009921475529583638
300
+ name: Cosine Precision@100
301
+ - type: cosine_recall@1
302
+ value: 0.704163623082542
303
+ name: Cosine Recall@1
304
+ - type: cosine_recall@2
305
+ value: 0.79163623082542
306
+ name: Cosine Recall@2
307
+ - type: cosine_recall@5
308
+ value: 0.8772826880934989
309
+ name: Cosine Recall@5
310
+ - type: cosine_recall@10
311
+ value: 0.9251278305332359
312
+ name: Cosine Recall@10
313
+ - type: cosine_recall@100
314
+ value: 0.9921475529583638
315
+ name: Cosine Recall@100
316
+ - type: cosine_ndcg@10
317
+ value: 0.814195456424499
318
+ name: Cosine Ndcg@10
319
+ - type: cosine_mrr@1
320
+ value: 0.704163623082542
321
+ name: Cosine Mrr@1
322
+ - type: cosine_mrr@2
323
+ value: 0.747899926953981
324
+ name: Cosine Mrr@2
325
+ - type: cosine_mrr@5
326
+ value: 0.7721268565863164
327
+ name: Cosine Mrr@5
328
+ - type: cosine_mrr@10
329
+ value: 0.7786941864644579
330
+ name: Cosine Mrr@10
331
+ - type: cosine_mrr@100
332
+ value: 0.7819733549719949
333
+ name: Cosine Mrr@100
334
+ - type: cosine_map@100
335
+ value: 0.7819733549719943
336
+ name: Cosine Map@100
337
+ - type: dot_accuracy@1
338
+ value: 0.6930241051862673
339
+ name: Dot Accuracy@1
340
+ - type: dot_accuracy@2
341
+ value: 0.7797662527392257
342
+ name: Dot Accuracy@2
343
+ - type: dot_accuracy@5
344
+ value: 0.8743608473338204
345
+ name: Dot Accuracy@5
346
+ - type: dot_accuracy@10
347
+ value: 0.922936449963477
348
+ name: Dot Accuracy@10
349
+ - type: dot_accuracy@100
350
+ value: 0.9923301680058437
351
+ name: Dot Accuracy@100
352
+ - type: dot_precision@1
353
+ value: 0.6930241051862673
354
+ name: Dot Precision@1
355
+ - type: dot_precision@2
356
+ value: 0.38988312636961286
357
+ name: Dot Precision@2
358
+ - type: dot_precision@5
359
+ value: 0.17487216946676404
360
+ name: Dot Precision@5
361
+ - type: dot_precision@10
362
+ value: 0.09229364499634768
363
+ name: Dot Precision@10
364
+ - type: dot_precision@100
365
+ value: 0.009923301680058436
366
+ name: Dot Precision@100
367
+ - type: dot_recall@1
368
+ value: 0.6930241051862673
369
+ name: Dot Recall@1
370
+ - type: dot_recall@2
371
+ value: 0.7797662527392257
372
+ name: Dot Recall@2
373
+ - type: dot_recall@5
374
+ value: 0.8743608473338204
375
+ name: Dot Recall@5
376
+ - type: dot_recall@10
377
+ value: 0.922936449963477
378
+ name: Dot Recall@10
379
+ - type: dot_recall@100
380
+ value: 0.9923301680058437
381
+ name: Dot Recall@100
382
+ - type: dot_ndcg@10
383
+ value: 0.8065617212990648
384
+ name: Dot Ndcg@10
385
+ - type: dot_mrr@1
386
+ value: 0.6930241051862673
387
+ name: Dot Mrr@1
388
+ - type: dot_mrr@2
389
+ value: 0.7363951789627465
390
+ name: Dot Mrr@2
391
+ - type: dot_mrr@5
392
+ value: 0.7627434867299742
393
+ name: Dot Mrr@5
394
+ - type: dot_mrr@10
395
+ value: 0.76939197885144
396
+ name: Dot Mrr@10
397
+ - type: dot_mrr@100
398
+ value: 0.772737194012096
399
+ name: Dot Mrr@100
400
+ - type: dot_map@100
401
+ value: 0.7727371940120946
402
+ name: Dot Map@100
403
+ ---
404
+
405
+ # SentenceTransformer based on bkai-foundation-models/vietnamese-bi-encoder
406
+
407
+ This is a [sentence-transformers](https://www.SBERT.net) model finetuned from [bkai-foundation-models/vietnamese-bi-encoder](https://huggingface.co/bkai-foundation-models/vietnamese-bi-encoder). It maps sentences & paragraphs to a 768-dimensional dense vector space and can be used for semantic textual similarity, semantic search, paraphrase mining, text classification, clustering, and more.
408
+
409
+ ## Model Details
410
+
411
+ ### Model Description
412
+ - **Model Type:** Sentence Transformer
413
+ - **Base model:** [bkai-foundation-models/vietnamese-bi-encoder](https://huggingface.co/bkai-foundation-models/vietnamese-bi-encoder) <!-- at revision 84f9d9ada0d1a3c37557398b9ae9fcedcdf40be0 -->
414
+ - **Maximum Sequence Length:** 256 tokens
415
+ - **Output Dimensionality:** 768 tokens
416
+ - **Similarity Function:** Cosine Similarity
417
+ <!-- - **Training Dataset:** Unknown -->
418
+ <!-- - **Language:** Unknown -->
419
+ <!-- - **License:** Unknown -->
420
+
421
+ ### Model Sources
422
+
423
+ - **Documentation:** [Sentence Transformers Documentation](https://sbert.net)
424
+ - **Repository:** [Sentence Transformers on GitHub](https://github.com/UKPLab/sentence-transformers)
425
+ - **Hugging Face:** [Sentence Transformers on Hugging Face](https://huggingface.co/models?library=sentence-transformers)
426
+
427
+ ### Full Model Architecture
428
+
429
+ ```
430
+ SentenceTransformer(
431
+ (0): Transformer({'max_seq_length': 256, 'do_lower_case': False}) with Transformer model: RobertaModel
432
+ (1): Pooling({'word_embedding_dimension': 768, 'pooling_mode_cls_token': False, 'pooling_mode_mean_tokens': True, 'pooling_mode_max_tokens': False, 'pooling_mode_mean_sqrt_len_tokens': False, 'pooling_mode_weightedmean_tokens': False, 'pooling_mode_lasttoken': False, 'include_prompt': True})
433
+ )
434
+ ```
435
+
436
+ ## Usage
437
+
438
+ ### Direct Usage (Sentence Transformers)
439
+
440
+ First install the Sentence Transformers library:
441
+
442
+ ```bash
443
+ pip install -U sentence-transformers
444
+ ```
445
+
446
+ Then you can load this model and run inference.
447
+ ```python
448
+ from sentence_transformers import SentenceTransformer
449
+
450
+ # Download from the 🤗 Hub
451
+ model = SentenceTransformer("meandyou200175/vn_biencoder_CachedMultipleNegativesSymmetricRankingLoss")
452
+ # Run inference
453
+ sentences = [
454
+ 'Bác sĩ cho em hỏi, em bị rạn nứt xương gót chân bên phải. Em bị hơn 1 tháng nay rồi. Em bỏ thuốc lá. Em muốn hỏi bác sĩ thông thường bó bột hơn hay thuốc lá hơn? Như của em khoảng bao lâu thì khỏi? Và giờ em vẫn chưa đi được bác sĩ ạ. Em cảm ơn.',
455
+ 'Chào em, Thứ nhất, bắt buộc phải có phim Xquang để biết em có thực sự nứt xương gót hay bị gãy phức tạp hơn, vì nhiều trường hợp tưởng chỉ nứt xương thôi nhưng thật ra là vỡ phức tạp, phải phẫu thuật mới nhanh ổn được. Thứ hai, theo nguyên tắc điều trị nứt gãy xương là phải cố định tốt để can xương mọc ra, chỗ nứt gãy mới được nối liền. Do đó, nếu bó bột thì chân sẽ được cố định liên tục trong 4-6 tuần, còn bó lá thì phải thay thường xuyên, mỗi lần thay là 1 lần xê dịch nên xương khó lành. Tốt hơn hết em nên đến Bệnh viện Chấn thương Chỉnh hình để được kiểm tra và điều trị thích hợp, em nhé. Thân mến.',
456
+ 'Chào bạn, Qua hình ảnh sang thương và mô tả triệu chứng, bệnh lý của bạn có khả năng là chàm hay còn gọi là viêm da dị ứng với đặc điểm là viêm và nổi mụn nhỏ, ngứa ngáy. Nguyên nhân của chàm hiện nay chưa rõ nhưng có thể do cơ địa dị ứng (người mắc hen, viêm mũi dị ứng có nguy cơ cao mắc chàm), do kích thích của hóa chất như nước rửa chén, bột giặt, cao su, kim loại, chất liệu giày dép (chàm tiếp xúc),... Thời tiết lạnh, stress, đổ mồ hôi nhiều và phấn hoa... cũng là những nguyên nhân có thể khiến da bị chàm. Chàm cũng có thể gặp ở người bị suy van tĩnh mạch, giãn tĩnh mạch chân khiến tình trạng bệnh dai dẳng, kém đáp ứng điều trị. Điều trị chàm thường phải sử dụng một số loại thuốc bôi da kéo dài, có thể để lại tác dụng phụ, do đó bạn nên khám BS Da liễu để kê toa loại thuốc phù hợp. Ngoài ra, bạn nên chú ý xem có yếu tố nào thường kích thích khởi phát chàm để tránh cho bệnh tái phát bạn nhé! Thân mến.',
457
+ ]
458
+ embeddings = model.encode(sentences)
459
+ print(embeddings.shape)
460
+ # [3, 768]
461
+
462
+ # Get the similarity scores for the embeddings
463
+ similarities = model.similarity(embeddings, embeddings)
464
+ print(similarities.shape)
465
+ # [3, 3]
466
+ ```
467
+
468
+ <!--
469
+ ### Direct Usage (Transformers)
470
+
471
+ <details><summary>Click to see the direct usage in Transformers</summary>
472
+
473
+ </details>
474
+ -->
475
+
476
+ <!--
477
+ ### Downstream Usage (Sentence Transformers)
478
+
479
+ You can finetune this model on your own dataset.
480
+
481
+ <details><summary>Click to expand</summary>
482
+
483
+ </details>
484
+ -->
485
+
486
+ <!--
487
+ ### Out-of-Scope Use
488
+
489
+ *List how the model may foreseeably be misused and address what users ought not to do with the model.*
490
+ -->
491
+
492
+ ## Evaluation
493
+
494
+ ### Metrics
495
+
496
+ #### Information Retrieval
497
+
498
+ * Evaluated with [<code>InformationRetrievalEvaluator</code>](https://sbert.net/docs/package_reference/sentence_transformer/evaluation.html#sentence_transformers.evaluation.InformationRetrievalEvaluator)
499
+
500
+ | Metric | Value |
501
+ |:---------------------|:----------|
502
+ | cosine_accuracy@1 | 0.7042 |
503
+ | cosine_accuracy@2 | 0.7916 |
504
+ | cosine_accuracy@5 | 0.8773 |
505
+ | cosine_accuracy@10 | 0.9251 |
506
+ | cosine_accuracy@100 | 0.9921 |
507
+ | cosine_precision@1 | 0.7042 |
508
+ | cosine_precision@2 | 0.3958 |
509
+ | cosine_precision@5 | 0.1755 |
510
+ | cosine_precision@10 | 0.0925 |
511
+ | cosine_precision@100 | 0.0099 |
512
+ | cosine_recall@1 | 0.7042 |
513
+ | cosine_recall@2 | 0.7916 |
514
+ | cosine_recall@5 | 0.8773 |
515
+ | cosine_recall@10 | 0.9251 |
516
+ | cosine_recall@100 | 0.9921 |
517
+ | cosine_ndcg@10 | 0.8142 |
518
+ | cosine_mrr@1 | 0.7042 |
519
+ | cosine_mrr@2 | 0.7479 |
520
+ | cosine_mrr@5 | 0.7721 |
521
+ | cosine_mrr@10 | 0.7787 |
522
+ | cosine_mrr@100 | 0.782 |
523
+ | **cosine_map@100** | **0.782** |
524
+ | dot_accuracy@1 | 0.693 |
525
+ | dot_accuracy@2 | 0.7798 |
526
+ | dot_accuracy@5 | 0.8744 |
527
+ | dot_accuracy@10 | 0.9229 |
528
+ | dot_accuracy@100 | 0.9923 |
529
+ | dot_precision@1 | 0.693 |
530
+ | dot_precision@2 | 0.3899 |
531
+ | dot_precision@5 | 0.1749 |
532
+ | dot_precision@10 | 0.0923 |
533
+ | dot_precision@100 | 0.0099 |
534
+ | dot_recall@1 | 0.693 |
535
+ | dot_recall@2 | 0.7798 |
536
+ | dot_recall@5 | 0.8744 |
537
+ | dot_recall@10 | 0.9229 |
538
+ | dot_recall@100 | 0.9923 |
539
+ | dot_ndcg@10 | 0.8066 |
540
+ | dot_mrr@1 | 0.693 |
541
+ | dot_mrr@2 | 0.7364 |
542
+ | dot_mrr@5 | 0.7627 |
543
+ | dot_mrr@10 | 0.7694 |
544
+ | dot_mrr@100 | 0.7727 |
545
+ | dot_map@100 | 0.7727 |
546
+
547
+ <!--
548
+ ## Bias, Risks and Limitations
549
+
550
+ *What are the known or foreseeable issues stemming from this model? You could also flag here known failure cases or weaknesses of the model.*
551
+ -->
552
+
553
+ <!--
554
+ ### Recommendations
555
+
556
+ *What are recommendations with respect to the foreseeable issues? For example, filtering explicit content.*
557
+ -->
558
+
559
+ ## Training Details
560
+
561
+ ### Training Hyperparameters
562
+ #### Non-Default Hyperparameters
563
+
564
+ - `eval_strategy`: steps
565
+ - `per_device_train_batch_size`: 16
566
+ - `per_device_eval_batch_size`: 16
567
+ - `learning_rate`: 2e-05
568
+ - `num_train_epochs`: 5
569
+ - `warmup_ratio`: 0.1
570
+ - `fp16`: True
571
+ - `batch_sampler`: no_duplicates
572
+
573
+ #### All Hyperparameters
574
+ <details><summary>Click to expand</summary>
575
+
576
+ - `overwrite_output_dir`: False
577
+ - `do_predict`: False
578
+ - `eval_strategy`: steps
579
+ - `prediction_loss_only`: True
580
+ - `per_device_train_batch_size`: 16
581
+ - `per_device_eval_batch_size`: 16
582
+ - `per_gpu_train_batch_size`: None
583
+ - `per_gpu_eval_batch_size`: None
584
+ - `gradient_accumulation_steps`: 1
585
+ - `eval_accumulation_steps`: None
586
+ - `torch_empty_cache_steps`: None
587
+ - `learning_rate`: 2e-05
588
+ - `weight_decay`: 0.0
589
+ - `adam_beta1`: 0.9
590
+ - `adam_beta2`: 0.999
591
+ - `adam_epsilon`: 1e-08
592
+ - `max_grad_norm`: 1.0
593
+ - `num_train_epochs`: 5
594
+ - `max_steps`: -1
595
+ - `lr_scheduler_type`: linear
596
+ - `lr_scheduler_kwargs`: {}
597
+ - `warmup_ratio`: 0.1
598
+ - `warmup_steps`: 0
599
+ - `log_level`: passive
600
+ - `log_level_replica`: warning
601
+ - `log_on_each_node`: True
602
+ - `logging_nan_inf_filter`: True
603
+ - `save_safetensors`: True
604
+ - `save_on_each_node`: False
605
+ - `save_only_model`: False
606
+ - `restore_callback_states_from_checkpoint`: False
607
+ - `no_cuda`: False
608
+ - `use_cpu`: False
609
+ - `use_mps_device`: False
610
+ - `seed`: 42
611
+ - `data_seed`: None
612
+ - `jit_mode_eval`: False
613
+ - `use_ipex`: False
614
+ - `bf16`: False
615
+ - `fp16`: True
616
+ - `fp16_opt_level`: O1
617
+ - `half_precision_backend`: auto
618
+ - `bf16_full_eval`: False
619
+ - `fp16_full_eval`: False
620
+ - `tf32`: None
621
+ - `local_rank`: 0
622
+ - `ddp_backend`: None
623
+ - `tpu_num_cores`: None
624
+ - `tpu_metrics_debug`: False
625
+ - `debug`: []
626
+ - `dataloader_drop_last`: False
627
+ - `dataloader_num_workers`: 0
628
+ - `dataloader_prefetch_factor`: None
629
+ - `past_index`: -1
630
+ - `disable_tqdm`: False
631
+ - `remove_unused_columns`: True
632
+ - `label_names`: None
633
+ - `load_best_model_at_end`: False
634
+ - `ignore_data_skip`: False
635
+ - `fsdp`: []
636
+ - `fsdp_min_num_params`: 0
637
+ - `fsdp_config`: {'min_num_params': 0, 'xla': False, 'xla_fsdp_v2': False, 'xla_fsdp_grad_ckpt': False}
638
+ - `fsdp_transformer_layer_cls_to_wrap`: None
639
+ - `accelerator_config`: {'split_batches': False, 'dispatch_batches': None, 'even_batches': True, 'use_seedable_sampler': True, 'non_blocking': False, 'gradient_accumulation_kwargs': None}
640
+ - `deepspeed`: None
641
+ - `label_smoothing_factor`: 0.0
642
+ - `optim`: adamw_torch
643
+ - `optim_args`: None
644
+ - `adafactor`: False
645
+ - `group_by_length`: False
646
+ - `length_column_name`: length
647
+ - `ddp_find_unused_parameters`: None
648
+ - `ddp_bucket_cap_mb`: None
649
+ - `ddp_broadcast_buffers`: False
650
+ - `dataloader_pin_memory`: True
651
+ - `dataloader_persistent_workers`: False
652
+ - `skip_memory_metrics`: True
653
+ - `use_legacy_prediction_loop`: False
654
+ - `push_to_hub`: False
655
+ - `resume_from_checkpoint`: None
656
+ - `hub_model_id`: None
657
+ - `hub_strategy`: every_save
658
+ - `hub_private_repo`: False
659
+ - `hub_always_push`: False
660
+ - `gradient_checkpointing`: False
661
+ - `gradient_checkpointing_kwargs`: None
662
+ - `include_inputs_for_metrics`: False
663
+ - `eval_do_concat_batches`: True
664
+ - `fp16_backend`: auto
665
+ - `push_to_hub_model_id`: None
666
+ - `push_to_hub_organization`: None
667
+ - `mp_parameters`:
668
+ - `auto_find_batch_size`: False
669
+ - `full_determinism`: False
670
+ - `torchdynamo`: None
671
+ - `ray_scope`: last
672
+ - `ddp_timeout`: 1800
673
+ - `torch_compile`: False
674
+ - `torch_compile_backend`: None
675
+ - `torch_compile_mode`: None
676
+ - `dispatch_batches`: None
677
+ - `split_batches`: None
678
+ - `include_tokens_per_second`: False
679
+ - `include_num_input_tokens_seen`: False
680
+ - `neftune_noise_alpha`: None
681
+ - `optim_target_modules`: None
682
+ - `batch_eval_metrics`: False
683
+ - `eval_on_start`: False
684
+ - `use_liger_kernel`: False
685
+ - `eval_use_gather_object`: False
686
+ - `batch_sampler`: no_duplicates
687
+ - `multi_dataset_batch_sampler`: proportional
688
+
689
+ </details>
690
+
691
+ ### Training Logs
692
+ <details><summary>Click to expand</summary>
693
+
694
+ | Epoch | Step | Training Loss | Validation Loss | cosine_map@100 |
695
+ |:------:|:-----:|:-------------:|:---------------:|:--------------:|
696
+ | 0 | 0 | - | - | 0.5553 |
697
+ | 0.0365 | 100 | 0.3481 | - | - |
698
+ | 0.0730 | 200 | 0.2382 | - | - |
699
+ | 0.1096 | 300 | 0.1974 | - | - |
700
+ | 0.1461 | 400 | 0.1995 | - | - |
701
+ | 0.1826 | 500 | 0.1704 | - | - |
702
+ | 0.2191 | 600 | 0.1418 | - | - |
703
+ | 0.2557 | 700 | 0.1537 | - | - |
704
+ | 0.2922 | 800 | 0.1508 | - | - |
705
+ | 0.3287 | 900 | 0.1319 | - | - |
706
+ | 0.3652 | 1000 | 0.1398 | 0.1056 | 0.7137 |
707
+ | 0.4018 | 1100 | 0.1073 | - | - |
708
+ | 0.4383 | 1200 | 0.1412 | - | - |
709
+ | 0.4748 | 1300 | 0.1211 | - | - |
710
+ | 0.5113 | 1400 | 0.0981 | - | - |
711
+ | 0.5478 | 1500 | 0.1187 | - | - |
712
+ | 0.5844 | 1600 | 0.11 | - | - |
713
+ | 0.6209 | 1700 | 0.1023 | - | - |
714
+ | 0.6574 | 1800 | 0.0999 | - | - |
715
+ | 0.6939 | 1900 | 0.0969 | - | - |
716
+ | 0.7305 | 2000 | 0.0913 | 0.0782 | 0.7350 |
717
+ | 0.7670 | 2100 | 0.0894 | - | - |
718
+ | 0.8035 | 2200 | 0.0914 | - | - |
719
+ | 0.8400 | 2300 | 0.0886 | - | - |
720
+ | 0.8766 | 2400 | 0.0849 | - | - |
721
+ | 0.9131 | 2500 | 0.1117 | - | - |
722
+ | 0.9496 | 2600 | 0.1075 | - | - |
723
+ | 0.9861 | 2700 | 0.0899 | - | - |
724
+ | 1.0226 | 2800 | 0.0725 | - | - |
725
+ | 1.0592 | 2900 | 0.0638 | - | - |
726
+ | 1.0957 | 3000 | 0.0832 | 0.0680 | 0.7475 |
727
+ | 1.1322 | 3100 | 0.0576 | - | - |
728
+ | 1.1687 | 3200 | 0.0625 | - | - |
729
+ | 1.2053 | 3300 | 0.0604 | - | - |
730
+ | 1.2418 | 3400 | 0.0479 | - | - |
731
+ | 1.2783 | 3500 | 0.0505 | - | - |
732
+ | 1.3148 | 3600 | 0.0492 | - | - |
733
+ | 1.3514 | 3700 | 0.0485 | - | - |
734
+ | 1.3879 | 3800 | 0.0278 | - | - |
735
+ | 1.4244 | 3900 | 0.0445 | - | - |
736
+ | 1.4609 | 4000 | 0.0248 | 0.0598 | 0.7651 |
737
+ | 1.4974 | 4100 | 0.0259 | - | - |
738
+ | 1.5340 | 4200 | 0.0251 | - | - |
739
+ | 1.5705 | 4300 | 0.022 | - | - |
740
+ | 1.6070 | 4400 | 0.0206 | - | - |
741
+ | 1.6435 | 4500 | 0.0165 | - | - |
742
+ | 1.6801 | 4600 | 0.0257 | - | - |
743
+ | 1.7166 | 4700 | 0.0187 | - | - |
744
+ | 1.7531 | 4800 | 0.0221 | - | - |
745
+ | 1.7896 | 4900 | 0.0192 | - | - |
746
+ | 1.8262 | 5000 | 0.0177 | 0.0609 | 0.7685 |
747
+ | 1.8627 | 5100 | 0.0167 | - | - |
748
+ | 1.8992 | 5200 | 0.0224 | - | - |
749
+ | 1.9357 | 5300 | 0.0317 | - | - |
750
+ | 1.9722 | 5400 | 0.0245 | - | - |
751
+ | 2.0088 | 5500 | 0.0201 | - | - |
752
+ | 2.0453 | 5600 | 0.0155 | - | - |
753
+ | 2.0818 | 5700 | 0.014 | - | - |
754
+ | 2.1183 | 5800 | 0.0149 | - | - |
755
+ | 2.1549 | 5900 | 0.0172 | - | - |
756
+ | 2.1914 | 6000 | 0.0139 | 0.0588 | 0.7732 |
757
+ | 2.2279 | 6100 | 0.0155 | - | - |
758
+ | 2.2644 | 6200 | 0.0119 | - | - |
759
+ | 2.3009 | 6300 | 0.0143 | - | - |
760
+ | 2.3375 | 6400 | 0.0137 | - | - |
761
+ | 2.3740 | 6500 | 0.0077 | - | - |
762
+ | 2.4105 | 6600 | 0.0087 | - | - |
763
+ | 2.4470 | 6700 | 0.0097 | - | - |
764
+ | 2.4836 | 6800 | 0.0066 | - | - |
765
+ | 2.5201 | 6900 | 0.0052 | - | - |
766
+ | 2.5566 | 7000 | 0.0076 | 0.0546 | 0.7743 |
767
+ | 2.5931 | 7100 | 0.0051 | - | - |
768
+ | 2.6297 | 7200 | 0.0051 | - | - |
769
+ | 2.6662 | 7300 | 0.0064 | - | - |
770
+ | 2.7027 | 7400 | 0.0061 | - | - |
771
+ | 2.7392 | 7500 | 0.0049 | - | - |
772
+ | 2.7757 | 7600 | 0.0055 | - | - |
773
+ | 2.8123 | 7700 | 0.0039 | - | - |
774
+ | 2.8488 | 7800 | 0.0045 | - | - |
775
+ | 2.8853 | 7900 | 0.0064 | - | - |
776
+ | 2.9218 | 8000 | 0.0083 | 0.0535 | 0.7810 |
777
+ | 2.9584 | 8100 | 0.0058 | - | - |
778
+ | 2.9949 | 8200 | 0.0051 | - | - |
779
+ | 3.0314 | 8300 | 0.0047 | - | - |
780
+ | 3.0679 | 8400 | 0.0038 | - | - |
781
+ | 3.1045 | 8500 | 0.0053 | - | - |
782
+ | 3.1410 | 8600 | 0.0046 | - | - |
783
+ | 3.1775 | 8700 | 0.0038 | - | - |
784
+ | 3.2140 | 8800 | 0.0046 | - | - |
785
+ | 3.2505 | 8900 | 0.0047 | - | - |
786
+ | 3.2871 | 9000 | 0.0042 | 0.0530 | 0.7782 |
787
+ | 3.3236 | 9100 | 0.0044 | - | - |
788
+ | 3.3601 | 9200 | 0.0035 | - | - |
789
+ | 3.3966 | 9300 | 0.0021 | - | - |
790
+ | 3.4332 | 9400 | 0.004 | - | - |
791
+ | 3.4697 | 9500 | 0.0025 | - | - |
792
+ | 3.5062 | 9600 | 0.0024 | - | - |
793
+ | 3.5427 | 9700 | 0.0022 | - | - |
794
+ | 3.5793 | 9800 | 0.0018 | - | - |
795
+ | 3.6158 | 9900 | 0.0017 | - | - |
796
+ | 3.6523 | 10000 | 0.0022 | 0.0510 | 0.7788 |
797
+ | 3.6888 | 10100 | 0.0019 | - | - |
798
+ | 3.7253 | 10200 | 0.002 | - | - |
799
+ | 3.7619 | 10300 | 0.0024 | - | - |
800
+ | 3.7984 | 10400 | 0.0017 | - | - |
801
+ | 3.8349 | 10500 | 0.0018 | - | - |
802
+ | 3.8714 | 10600 | 0.0019 | - | - |
803
+ | 3.9080 | 10700 | 0.0023 | - | - |
804
+ | 3.9445 | 10800 | 0.0023 | - | - |
805
+ | 3.9810 | 10900 | 0.0018 | - | - |
806
+ | 4.0175 | 11000 | 0.0019 | 0.0521 | 0.7805 |
807
+ | 4.0541 | 11100 | 0.0018 | - | - |
808
+ | 4.0906 | 11200 | 0.002 | - | - |
809
+ | 4.1271 | 11300 | 0.0017 | - | - |
810
+ | 4.1636 | 11400 | 0.0017 | - | - |
811
+ | 4.2001 | 11500 | 0.0016 | - | - |
812
+ | 4.2367 | 11600 | 0.0021 | - | - |
813
+ | 4.2732 | 11700 | 0.0017 | - | - |
814
+ | 4.3097 | 11800 | 0.0023 | - | - |
815
+ | 4.3462 | 11900 | 0.0016 | - | - |
816
+ | 4.3828 | 12000 | 0.0013 | 0.0511 | 0.7813 |
817
+ | 4.4193 | 12100 | 0.0013 | - | - |
818
+ | 4.4558 | 12200 | 0.0014 | - | - |
819
+ | 4.4923 | 12300 | 0.0016 | - | - |
820
+ | 4.5289 | 12400 | 0.0011 | - | - |
821
+ | 4.5654 | 12500 | 0.0013 | - | - |
822
+ | 4.6019 | 12600 | 0.001 | - | - |
823
+ | 4.6384 | 12700 | 0.0011 | - | - |
824
+ | 4.6749 | 12800 | 0.0011 | - | - |
825
+ | 4.7115 | 12900 | 0.0011 | - | - |
826
+ | 4.7480 | 13000 | 0.0011 | 0.0510 | 0.7820 |
827
+ | 4.7845 | 13100 | 0.0012 | - | - |
828
+ | 4.8210 | 13200 | 0.001 | - | - |
829
+ | 4.8576 | 13300 | 0.0012 | - | - |
830
+ | 4.8941 | 13400 | 0.0012 | - | - |
831
+ | 4.9306 | 13500 | 0.0013 | - | - |
832
+ | 4.9671 | 13600 | 0.0011 | - | - |
833
+
834
+ </details>
835
+
836
+ ### Framework Versions
837
+ - Python: 3.10.14
838
+ - Sentence Transformers: 3.2.1
839
+ - Transformers: 4.45.1
840
+ - PyTorch: 2.4.0
841
+ - Accelerate: 0.34.2
842
+ - Datasets: 3.0.1
843
+ - Tokenizers: 0.20.0
844
+
845
+ ## Citation
846
+
847
+ ### BibTeX
848
+
849
+ #### Sentence Transformers
850
+ ```bibtex
851
+ @inproceedings{reimers-2019-sentence-bert,
852
+ title = "Sentence-BERT: Sentence Embeddings using Siamese BERT-Networks",
853
+ author = "Reimers, Nils and Gurevych, Iryna",
854
+ booktitle = "Proceedings of the 2019 Conference on Empirical Methods in Natural Language Processing",
855
+ month = "11",
856
+ year = "2019",
857
+ publisher = "Association for Computational Linguistics",
858
+ url = "https://arxiv.org/abs/1908.10084",
859
+ }
860
+ ```
861
+
862
+ <!--
863
+ ## Glossary
864
+
865
+ *Clearly define terms in order to be accessible across audiences.*
866
+ -->
867
+
868
+ <!--
869
+ ## Model Card Authors
870
+
871
+ *Lists the people who create the model card, providing recognition and accountability for the detailed work that goes into its construction.*
872
+ -->
873
+
874
+ <!--
875
+ ## Model Card Contact
876
+
877
+ *Provides a way for people who have updates to the Model Card, suggestions, or questions, to contact the Model Card authors.*
878
+ -->
added_tokens.json ADDED
@@ -0,0 +1,3 @@
 
 
 
 
1
+ {
2
+ "<mask>": 64000
3
+ }
bpe.codes ADDED
The diff for this file is too large to render. See raw diff
 
config.json ADDED
@@ -0,0 +1,28 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "_name_or_path": "bkai-foundation-models/vietnamese-bi-encoder",
3
+ "architectures": [
4
+ "RobertaModel"
5
+ ],
6
+ "attention_probs_dropout_prob": 0.1,
7
+ "bos_token_id": 0,
8
+ "classifier_dropout": null,
9
+ "eos_token_id": 2,
10
+ "hidden_act": "gelu",
11
+ "hidden_dropout_prob": 0.1,
12
+ "hidden_size": 768,
13
+ "initializer_range": 0.02,
14
+ "intermediate_size": 3072,
15
+ "layer_norm_eps": 1e-05,
16
+ "max_position_embeddings": 258,
17
+ "model_type": "roberta",
18
+ "num_attention_heads": 12,
19
+ "num_hidden_layers": 12,
20
+ "pad_token_id": 1,
21
+ "position_embedding_type": "absolute",
22
+ "tokenizer_class": "PhobertTokenizer",
23
+ "torch_dtype": "float32",
24
+ "transformers_version": "4.45.1",
25
+ "type_vocab_size": 1,
26
+ "use_cache": true,
27
+ "vocab_size": 64001
28
+ }
config_sentence_transformers.json ADDED
@@ -0,0 +1,10 @@
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "__version__": {
3
+ "sentence_transformers": "3.2.1",
4
+ "transformers": "4.45.1",
5
+ "pytorch": "2.4.0"
6
+ },
7
+ "prompts": {},
8
+ "default_prompt_name": null,
9
+ "similarity_fn_name": null
10
+ }
model.safetensors ADDED
@@ -0,0 +1,3 @@
 
 
 
 
1
+ version https://git-lfs.github.com/spec/v1
2
+ oid sha256:39d3090be17a13b6c49ecb67ea872099a7ccafca1b96aaadc52ccd2ac7d60044
3
+ size 540015464
modules.json ADDED
@@ -0,0 +1,14 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ [
2
+ {
3
+ "idx": 0,
4
+ "name": "0",
5
+ "path": "",
6
+ "type": "sentence_transformers.models.Transformer"
7
+ },
8
+ {
9
+ "idx": 1,
10
+ "name": "1",
11
+ "path": "1_Pooling",
12
+ "type": "sentence_transformers.models.Pooling"
13
+ }
14
+ ]
sentence_bert_config.json ADDED
@@ -0,0 +1,4 @@
 
 
 
 
 
1
+ {
2
+ "max_seq_length": 256,
3
+ "do_lower_case": false
4
+ }
special_tokens_map.json ADDED
@@ -0,0 +1,51 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "bos_token": {
3
+ "content": "<s>",
4
+ "lstrip": false,
5
+ "normalized": false,
6
+ "rstrip": false,
7
+ "single_word": false
8
+ },
9
+ "cls_token": {
10
+ "content": "<s>",
11
+ "lstrip": false,
12
+ "normalized": false,
13
+ "rstrip": false,
14
+ "single_word": false
15
+ },
16
+ "eos_token": {
17
+ "content": "</s>",
18
+ "lstrip": false,
19
+ "normalized": false,
20
+ "rstrip": false,
21
+ "single_word": false
22
+ },
23
+ "mask_token": {
24
+ "content": "<mask>",
25
+ "lstrip": false,
26
+ "normalized": false,
27
+ "rstrip": false,
28
+ "single_word": false
29
+ },
30
+ "pad_token": {
31
+ "content": "<pad>",
32
+ "lstrip": false,
33
+ "normalized": false,
34
+ "rstrip": false,
35
+ "single_word": false
36
+ },
37
+ "sep_token": {
38
+ "content": "</s>",
39
+ "lstrip": false,
40
+ "normalized": false,
41
+ "rstrip": false,
42
+ "single_word": false
43
+ },
44
+ "unk_token": {
45
+ "content": "<unk>",
46
+ "lstrip": false,
47
+ "normalized": false,
48
+ "rstrip": false,
49
+ "single_word": false
50
+ }
51
+ }
tokenizer_config.json ADDED
@@ -0,0 +1,54 @@
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
1
+ {
2
+ "added_tokens_decoder": {
3
+ "0": {
4
+ "content": "<s>",
5
+ "lstrip": false,
6
+ "normalized": false,
7
+ "rstrip": false,
8
+ "single_word": false,
9
+ "special": true
10
+ },
11
+ "1": {
12
+ "content": "<pad>",
13
+ "lstrip": false,
14
+ "normalized": false,
15
+ "rstrip": false,
16
+ "single_word": false,
17
+ "special": true
18
+ },
19
+ "2": {
20
+ "content": "</s>",
21
+ "lstrip": false,
22
+ "normalized": false,
23
+ "rstrip": false,
24
+ "single_word": false,
25
+ "special": true
26
+ },
27
+ "3": {
28
+ "content": "<unk>",
29
+ "lstrip": false,
30
+ "normalized": false,
31
+ "rstrip": false,
32
+ "single_word": false,
33
+ "special": true
34
+ },
35
+ "64000": {
36
+ "content": "<mask>",
37
+ "lstrip": false,
38
+ "normalized": false,
39
+ "rstrip": false,
40
+ "single_word": false,
41
+ "special": true
42
+ }
43
+ },
44
+ "bos_token": "<s>",
45
+ "clean_up_tokenization_spaces": true,
46
+ "cls_token": "<s>",
47
+ "eos_token": "</s>",
48
+ "mask_token": "<mask>",
49
+ "model_max_length": 256,
50
+ "pad_token": "<pad>",
51
+ "sep_token": "</s>",
52
+ "tokenizer_class": "PhobertTokenizer",
53
+ "unk_token": "<unk>"
54
+ }
vocab.txt ADDED
The diff for this file is too large to render. See raw diff