mms-1b-all/jav/tokens.txt

<s>
<pad>
</s>
<unk>
a
|
n
i
e
g
k
s
u
r
t
l
m
o
d
p
h
b
w
y
j
c
-
f
0
v
1
2
9
5
4
.
3
8
6
z
7
x
q
,
/
'
é
:
"
”
;
%
á
$
ü
&
+
—
ç
õ
í
[
]
£
ã
ê
°
²
‘
!
ó
ö
`