Upload tokenizer
355d63f
verified
|
#version: 0.2 |
|
i n |
|
a n |
|
Ġ a |
|
Ġ n |
|
Ġ t |
|
Ġ w |
|
Ġ e |
|
Ġt h |
|
g a |
|
Ġ y |
|
b o |
|
u n |
|
Ġn a |
|
Ġth e |
|
d o |
|
Ġ k |
|
p e |
|
b a |
|
h i |
|
Ġ m |
|
b e |
|
g an |
|
y a |
|
z hi |
|
Ġ f |
|
a a |
|
c i |
|
j in |
|
l l |
|
l o |
|
r e |
|
Ġ o |
|
Ġ ga |
|
Ġ be |
|
Ġk p |
|
a s |
|
i s |
|
i ll |
|
w a |
|
y e |
|
Ġ N |
|
Ġ d |
|
Ġ l |
|
Ġ s |
|
Ġ gan |
|
in g |
|
Ġn do |
|
Ġw o |
|
bo lo |
|
a k |
|
a m |
|
a ye |
|
d e |
|
e s |
|
g ba |
|
n do |
|
o n |
|
o r |
|
u pe |
|
y i |
|
z a |
|
Ġ c |
|
Ġ zhi |
|
Ġ jin |
|
Ġn ya |
|
Ġt a |
|
Ġw un |
|
Ġw ill |
|
Ġthe y |
|
Ġm an |
|
ĠN upe |
|
Ġndo ndo |
|
Ġwun ga |
|
A l |
|
T a |
|
b i |
|
e a |
|
e r |
|
f e |
|
i k |
|
i r |
|
i t |
|
k a |
|
l à |
|
m aa |
|
n a |
|
n ya |
|
s e |
|
t i |
|
Ġ g |
|
Ġ r |
|
Ġ z |
|
Ġ in |
|
Ġ ci |
|
Ġ is |
|
Ġ bolo |
|
an g |
|
Ġa ga |
|
Ġa maa |
|
Ġw r |
|
Ġe bo |
|
Ġe nya |
|
Ġe ti |
|
Ġth an |
|
Ġy a |
|
Ġy e |
|
Ġy i |
|
Ġthe ir |
|
Ġk am |
|
pe ak |
|
Ġm aa |
|
Ġf i |
|
Ġf u |
|
Ġo f |
|
Ġkp aye |
|
Ġkp ik |
|
as h |
|
wa l |
|
Ġd a |
|
Ġs h |
|
Ġs peak |
|
Ġgan gan |
|
za ba |
|
Ġc o |
|
Ġbolo bolo |
|
Ġkam in |
|
Ġkpik pe |
|
A n |
|
H ash |
|
M u |
|
O h |
|
S o |
|
T o |
|
W or |
|
Y ea |
|
Z a |
|
Z an |
|
a b |
|
a c |
|
a g |
|
a u |
|
a bo |
|
a jin |
|
a ll |
|
b ba |
|
c au |
|
d l |
|
d à |
|
e d |
|
e z |
|
e as |
|
f ill |
|
g h |
|
h o |
|
i on |
|
i er |
|
i gh |
|
j an |
|
k n |
|
k o |
|
k an |
|
l e |
|
l ea |
|
l fill |
|
m p |
|
m in |
|
o o |
|
o u |
|
o re |
|
o se |
|
p lea |
|
r d |
|
r de |
|
r kn |
|
s t |
|
s à |
|
s ka |
|
t a |
|
t s |
|
t un |
|
u bo |
|
u re |
|
u is |
|
u ag |
|
u tun |
|
v er |
|
w un |
|
z in |
|
¡ là |
|
¢ n |
|
Ġ u |
|
Ġ an |
|
Ġ bo |
|
Ġ un |
|
Ġ do |
|
Ġ lo |
|
Ġ re |
|
Ġ Al |
|
Ġ bi |
|
Ġ it |
|
Ġ zaba |
|
Ġ So |
|
Ġ To |
|
Ġ Wor |
|
Ġ Yea |
|
Ġ Za |
|
Ġ plea |
|
ł dà |
|
in min |
|
in st |
|
an ba |
|
an ya |
|
an ion |
|
Ġa a |
|
Ġa ci |
|
Ġa re |
|
Ġa ye |
|
Ġa bi |
|
Ġa fe |
|
Ġa zaba |
|
Ġn or |
|
Ġn yi |
|
Ġt o |
|
Ġt is |
|
Ġt utun |
|
Ġw a |
|
Ġw ang |
|
Ġw ho |
|
Ġe ga |
|
Ġe as |
|
Ġe gba |
|
Ġe za |
|
Ġth ose |
|
Ġy in |
|
Ġy an |
|
Ġy aa |
|
Ġy es |
|
Ġy ou |
|
un y |
|
un ci |
|
un gba |
|
Ġthe m |
|
Ġthe re |
|
do ing |
|
Ġk inmin |
|
Ġk anya |
|
pe a |
|
Ġm eas |
|
Ġm ore |
|
zhi o |
|
Ġf or |
|
Ġf ac |
|
Ġga jin |
|
Ġga yi |
|
Ġga ajin |
|
Ġga rde |
|
Ġbe cau |
|
Ġkp in |
|
wa zhi |
|
wa rd |
|
ĠN o |
|
Ġd ash |
|
Ġd anba |
|
Ġl ing |
|
Ġl ak |
|
Ġl aye |
|
Ġl ang |
|
Ġndo ci |
|
Ġwo a |
|
am e |
|
es s |
|
on g |
|
on yi |
|
Ġc in |
|
Ġjin a |
|
Ġta bba |
|
Al ka |
|
it ing |
|
là łdà |
|
na zhio |
|
Ġg oo |
|
Ġg onyi |
|
Ġr igh |
|
Ġr ungba |
|
Ġz un |
|
Ġz wal |
|
Ġci a |
|
Ġaga inst |
|
Ġwr ong |
|
Ġwr iting |
|
Ġebo na |
|
Ġeti abo |
|
Ġeti ubo |
|
Ġye fe |
|
Ġmaa de |
|
Ġfi bo |
|
Ġfu lfill |
|
Ġfu ska |
|
wal i |
|
Ġda rkn |
|
Ġsh all |
|
Ġsh ame |
|
Ġspeak ing |
|
Ġco mp |
|
Ġco ver |
|
Ġkamin a |
|
Ġkpikpe wazhi |
|
An d |
|
Mu ez |
|
Zan a |
|
ab le |
|
dl y |
|
jan nazhio |
|
kan ga |
|
sà ¡là |
|
uis ts |
|
uag e |
|
Ġan d |
|
Ġbo a |
|
Ġun able |
|
Ġre ward |
|
ĠAl jannazhio |
|
Ġbi be |
|
ĠSo ko |
|
ĠWor d |
|
ĠZa wun |
|
anion s |
|
Ġabi de |
|
Ġtis hi |
|
Ġwang i |
|
Ġega gba |
|
Ġeas ier |
|
Ġeza zhi |
|
Ġyes uny |
|
Ġthere in |
|
Ġmeas ure |
|
Ġfac es |
|
Ġgarde n |
|
Ġbecau se |
|
Ġdash in |
|
Ġling uists |
|
Ġlak pea |
|
Ġlang uage |
|
Ġtabba ta |
|
Alka wali |
|
lÃłdà ¢n |
|
Ġgoo dly |
|
Ġrigh t |
|
Ġzwal unci |
|
Ġfulfill ed |
|
Ġdarkn ess |
|
Ġcomp anions |
|
Muez zin |
|
sálà º |
|
|