Ein Segment, dessen tokenisierte Struktur eine von mehreren Möglichkeiten der Tokenisierung darstellt, sei es wegen der Ambivalenz der Lesung oder wegen vorhandener Revisionen innerhalb der Textstelle. Unter verschiedener Tokenisierung wird nicht nur eine jeweils andere Festlegung der Tokengrenzen, sondern auch eine infolge von Revisionen jeweils unterschiedlich ausfallende linguistische Bewertung verstanden.
