Übungsaufgabe 3

Einfache Korpusbearbeitung

Hier eine kleine Sammlung englischsprachiger Texte: zum Herunterladen

a) Schreiben Sie ein Programm, das den Text einliest, jedes Wort des laufenden Textes in einer neuen Zeile ausgibt, und die Großbuchstaben A-Z in die Kleinbuchstaben a-z konvertiert. Satzzeichen sollten ebenfalls in einer eigenen Zeile stehen. Beachten Sie folgendes:

• Alle echten Wörter im Text bestehen aus den Buchstaben A-Za-z (also nur Ascii - der Text ist Englisch).
• Bei einem Teil der Texte sind alle Wörter großgeschrieben.

b) Erweitern Sie das Programm, dass es die Häufigkeiten jeder Wortform und die Gesamtzahl der Wörter berechnet.

Wozu das Ganze? In der nächsten Woche sollen Sie die Assoziiertheit zwischen Wörtern berechnen.