| | |
- NGrams
class NGrams |
| |
Die Klasse berechnet NGramme für NSizeGramme -
ein n großes Fenster wird über die tokens/text des in_file gezogen
>>> Context/History und Ngramme werden erzeugt und gezählt
Meine Herangehensweise, für das Erzeugen und Zählen von NGrammen,
folgt dem Quellcode, den ich unter folgender URL gefunden habe:
http://www.ling.uni-potsdam.de/~jonask/teaching/StatMeth-SS07/beispiele/char_ngrams/char_ngram_10a.py.
|
| |
Methods defined here:
- __init__(self)
- constructor
- createAndCountNgramsA(self, nSize, tokens)
- create_sentence_boundary_grams(self, n, info, tokens)
- create_sentence_boundary_grams2(self, n, wliste, tokens)
| |