ipe-tok.1.8.3.source-code.de-nonbreaker.txt Maven / Gradle / Ivy
Go to download
Show more of this group Show more artifacts with this name
Show all versions of ixa-pipe-tok Show documentation
Show all versions of ixa-pipe-tok Show documentation
The ixa pipes tokenizer (ixa2.si.ehu.es/ixa-pipes)
#Anything in this file, followed by a period (and an upper-case word), does NOT indicate an end-of-sentence marker.
#usually upper case letters are initials in a name
#no german words end in single lower-case letters, so we throw those in too.
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
a
b
c
d
e
f
g
h
i
j
k
l
m
n
o
p
q
r
s
t
u
v
w
x
y
z
#Roman Numerals. A dot after one of these is not a sentence break in German.
I
II
III
IV
V
VI
VII
VIII
IX
X
XI
XII
XIII
XIV
XV
XVI
XVII
XVIII
XIX
XX
i
ii
iii
iv
v
vi
vii
viii
ix
x
xi
xii
xiii
xiv
xv
xvi
xvii
xviii
xix
xx
# provided by the univ of zurich
Dkr
Betr
Empf
Hrn
abds
abgedr
abgeschl
abs
abzgl
akt
allg
allgem
allj
alph
amtl
anerk
ang
anschl
ausgest
ausgez
ausl
ausschl
aut
auth
bef
befr
beil
ber
bes
betr
bev
bew
bez
br
bsd
bspw
bwgl
bzgl
bzw
ca
chem
demn
dergl
desgl
dgl
div
dstl
dt
dto
dtsch
ea
ebd
ed
ehel
ehm
eig
eigtl
eingetr
eingez
einh
einschl
einst
einz
em
engl
enth
entspr
entw
erb
erf
erg
erh
erl
erm
erstkl
erw
etc
etw
ev
ev-luth
evt
evtl
ew
exkl
ff
fl
folg
fortl
fr
frz
gb
geb
gebr
geg
gegr
geh
gek
gel
gem
gen
gepl
gepr
ger
ges
gesch
geschl
gesp
gest
getr
gew
gez
gg
ggf
ggs
ggz
glt
gltg
gr
gt
gyn
hdgm
hdschr
herg
hins
hist
hl
hpts
hrsg
hs
hydr
hzb
inbegr
inf
inkl
inoff
insb
insbes
int
inv
jg
jhrl
jr
jun
jur
kath
kfm
kgl
kl
komm
kompl
kons
konz
kpl
kt
künstl
landw
lb
ld
leit
lfd
lg
lgfr
lit
liz
lt
luth
magn
masch
mbl
mdls
mech
med
mehrf
met
min
mm
mod
mst
mtl
möbl
mögl
nachm
nat
nb
ndl
neutr
neuw
nhd
od
op
opt
ord
org
orth
pat
perf
pers
pharm
phys
pol
pos
pp
ppa
priv
prot
prov
psych
päd
r-k
rd
ref
reg
rel
ren
res
resp
restl
rückw
schw
sek
selbstv
sen
sep
sof
sog
sogen
sonst
soz
spez
st
staatl
stdl
stellv
stg
stv
städt
sym
syst
teilw
tel
tgl
tlw
tägl
umf
unbek
ung
ungebr
ungek
unreg
unv
unverb
unw
urspr
usf
usw
ver
verf
verg
verh
verk
verl
verm
verp
vers
versch
verst
vertr
verw
verz
vgl
vollst
vorh
vorm
vorw
wbl
wd
wg
wiss
wö
zahlr
zeitw
zgl
ziv
zuf
zugl
zul
zus
zust
zw
zz
zzgl
zzt
öff
öfftl
ökon
üb
überh
übers
#These are often followed by upper-case names, but do not indicate sentence breaks
Adj
Adm
Adv
Asst
Assn
Assoc
Ave
Bart
Bldg
Blvd
Brig
Bros
Capt
Cmdr
Col
Comdr
Con
Corp
Cpl
Dep
Dept
DR
Dr
Drs
Ens
Esq
ext
Fac
Gen
Gov
Hon
Hr
Hosp
Inc
Insp
Intl
Jr
Lt
Lieut
Ltd
MM
MR
MRS
MS
Maj
Messrs
Mlle
Mme
Mr
Mrs
Ms
Msgr
Op
Ord
Pfc
Plc
Ph
Prof
Pvt
Rd
Rep
Reps
Res
Rev
Rt
Sen
Sens
Sfc
Sgt
Sys
Sr
St
sq
Supt
Surg
tel
Univ
#Misc symbols
Mio
Mrd
bzw
vs
usw
d.h
z.B
u.a
etc
Mrd
MwSt
ggf
d.J
D.h
m.E
vgl
I.F
z.T
sogen
ff
u.E
g.U
g.g.A
c.-à-d
Buchst
u.s.w
sog
u.ä
Std
evtl
Zt
Chr
u.U
o.ä
Ltd
b.A
z.Zt
spp
sen
SA
k.o
jun
i.H.v
dgl
dergl
Co
zzt
usf
s.p.a
Corp
bzgl
BSE
#Number indicators
No
Nos
Art
Nr
pp
ca
Ca
#Ordinals are done with . in German - "1." = "1st" in English
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
# dates
Jän
März
Mai
Okt
Dez
So
Mo
Di
Mi
Do
Fr
Sa
Jan
Feb
Mar
Apr
Jun
Jul
Aug
Sept
Oct
Nov
Dec
Mon
Tue
Wed
Thur
Fri
Sat
#states
Ala
Ariz
[A]rk
Calif
Colo
Conn
Dak
Del
Fla
Ga
[I]ll
Ind
Kans?
Ky
La
[M]ass
Md
Mich
Minn
[M]iss
Mo
Mont
Neb
Nev
Okla
[O]re
Pa
Penn
Tenn
Tex
Va
Vt
[W]ash
Wisc
Wyo