Soll ich Satzzeichen mitlabeln?
Should I include punctuation?
Zur Einheitlichkeit ist wichtig, dass, wenn man einzelne Wörter aus Texten ausliest, Kommas, Punkte, Klammern und andere Satzzeichen nicht mitgelabelt werden. Man sollte immer nur den tatsächlichen Inhalt markieren, den man auch auslesen möchte. Satzzeichen kommen in der Regel aus dem Kontext des Satzbaus, sind aber auf Basis der Trainingsdaten eher arbiträr und somit nicht geeignet, zum Zwecke von Vorhersagen analysiert zu werden. Die KI wird sonst in der Zukunft z. B. nach einem Komma am Ende des einzulesenden Wortes suchen, selbst wenn es nichts mit der gesuchten Information zutun hat.
For consistency, it is important that when reading individual words from texts, commas, periods, brackets and other punctuation marks are not included. You should always mark only the actual content that you want to read. Punctuation marks usually come from the context of the sentence structure, but are rather arbitrary based on the training data and thus not suitable to be analyzed for the purpose of predictions. Otherwise, the AI will look for a comma at the end of the word to be read in the future, even if it has nothing to do with the information sought.