Przejdź do treści
100% lokalnie

Kalkulator różnorodności leksykalnej

Zmierz bogatwo słownika tekstu za pomocą współczynnika type-token i powiązanych miar.

Wejście
Wynik

Kalkulator różnorodności leksykalnej

Wklej dowolny tekst, a to narzędzie zmierzy różnorodność jego słownika — wskaźnik używany przez pisarzy, redaktorów, nauczycieli i naukowców do identificheracji powtarzających się zwrotów lub porównania bogactwa dwóch fragmentów. Liczy całkowitą liczbę wyrazów i liczbę unikalnych wyrazów, a następnie raportuje współczynnik type-token (TTR), jego wariant pierwiastkowy (indeks Guirauda) i wariant logarytmiczny (C Herdana), plus ruchomy średni TTR, który próbkuje różnorodność w oknach tekstu, aby długie dokumenty nie były niesprawiedliwie penalizowane za liczbę wyrazów.

Opcje określają, co liczy się jako odrębne słowo. Ignorowanie słów funkcyjnych eliminuje zwykłe funkcyjne słowa takie jak "the" czy "and" przed porównaniem, dzięki czemu stosunek odzwierciedla słowa zawartościowe zamiast gramatyki. Ignorowanie wielkości liter i znaków diakrytycznych traktuje "Apple" i "apple" — lub "café" i "cafe" — jako to samo słowo. Sprowadzenie wyrazów do formy podstawowej stosuje lekką heurystykę usuwania przyrostków dostrojoną dla angielskiego, dzięki czemu "running" i "runs" zbliżają się do "run", a nie do pełnej lematyzacji. Minimalna długość słowa filtruje krótkie wypełniacz, okno ruchomej średniej kontroluje liczbę wyrazów, które każda próbka różnorodności obejmuje, i możesz wymienić tyle najczęściej powtarzających się słów, ile chcesz. Wybierz zwięzłe streszczenie lub tabelę rozdzieloną tabulacją w zależności od tego, czy czytasz liczby, czy wklejasz je do arkusza kalkulacyjnego.

Współczynnik type-token sam w sobie maleje wraz z wydłużaniem się tekstu, czysto dlatego, że słowa zaczynają się powtarzać — dlatego właśnie istnieje wariant pierwiastkowy i logarytmiczny oraz ruchoma średnia, z których każdy koryguje długość na różne sposoby. Porównanie wszystkich czterech obok siebie daje pełniejszy obraz niż jakakolwiek pojedyncza liczba. Narzędzie obsługuje końce linii Windows (CRLF) i Unix (LF) w ten sam sposób, a aktualny sumator poniżej wyjścia pokazuje liczby wyrazów i unikalnych wyrazów wraz z podstawowym TTR podczas wpisywania.

Wszystko działa w przeglądarce. Twój tekst nigdy nie jest wysyłany na serwer, więc bezpiecznie możesz wklejać wersje robocze, rękopisy lub prace studenckie. Skopiuj wynik, pobierz go jako plik .txt lub wyślij wynik z powrotem do wejścia, aby dalej udoskonalić swoją analizę.

Częste pytania

Co dokładnie mierzy współczynnik type-token?
Dzieli liczbę unikalnych słów przez całkowitą liczbę słów. Wyższy stosunek oznacza mniej powtórzeń — szerszy słownik w stosunku do długości tekstu.
Dlaczego TTR spada w dłuższych tekstach, nawet jeśli styl pisania pozostaje taki sam?
Każdy tekst ostatecznie powtarza wspólne słowa takie jak "the" czy "and", więc stosunek naturalnie spada wraz ze wzrostem liczby słów. Root TTR, log TTR i ruchoma średnia TTR każdy dostosowują się inaczej, dlatego narzędzie raportuje wszystkie cztery.
Do czego służy okno ruchomej średniej TTR?
Przesuwa okno stałej wielkości słów przez tekst, oblicza TTR każdego okna i uśrednia wyniki — sposób na próbkowanie różnorodności lokalnie, aby długi dokument nie osłabił wyniku.
Jak dobra jest redukcja słów do formy podstawowej?
Usuwa mały zestaw wspólnych przyrostków (takich jak "-ing", "-ed", "-s") i jest dostosowany do angielskiego. To jest lekka heurystyka, a nie pełna lemmatyzacja lingwistyczna, więc traktuj ją jako przybliżenie, a nie jako dokładne stemming dla każdego języka.
Czy mój tekst jest gdzieś przesyłany?
Nie. Cała analiza działa lokalnie w Twojej przeglądarce — Twój tekst nigdy nie jest wysyłany na serwer.