mms-1b-all/azj-script_latin/tokens.txt

<s>
<pad>
</s>
<unk>
|
a
ə
i
n
r
l
d
t
s
ı
m
y
e
k
b
u
o
ü
q
v
ş
z
h
ç
c
x
f
g
ö
p
ğ
-
0
1
̇
2
9
4
5
j
3
8
6
7
.
:
w
,
"
/
%
'
°
+
$
õ
?
[
]
—
–
ú
²
;
!