Hľadať zamestnanie pre fulltextom
Token alebo známka v počítačovej vede je kategorizovaný blok textu, obyčajne pozostáva z nedeliteľných znakov, známych ako lexémy. Lexikálny analyzátor najprv číta lexémy a kategorizuje ich podľa funkcie, čím im priraďuje význam. Toto priradenie významu sa nazýva tokenizácia. Tokeny môžu vyzerať rôzne, napríklad to môžu byť slovenské, anglické alebo iné slová alebo rôzne symboly, musia to byť hlavne užitočné súčasti štruktúrovaného textu.
čítajte viac o Token (text)
Encyklopédia: ROBOTA.SK > Prírodné vedy > Informatika >
Algoritmy
Architektúra počítača
Bioinformatika
Dátové formáty
Dátové nosiče
Databázové systémy
Databázy
Formálne jazyky a automaty
Geoinformatika
Hardvér
Hypertext
Informácia
Informačné systémy
Informatici
Informatické organizácie
Informatické výhonky
Interakcia človeka s počítačom
Kódovanie
Komunikácia človek-počítač
Kryptológia
Logistika
Počítačová bezpečnosť
Počítačová grafika
Počítačová lingvistika
Počítačová terminológia
Počítačová veda
Počítačové inžinierstvo
Počítačové jazyky
Počítačové siete
Počítačové technológie
Prenosové rýchlosti
Programovanie
Súborové systémy
Softvér
Spoločné používanie súborov
Teória grafov
Telematika
Turingova cena
Umelá inteligencia
Výpočtová technika
Vyhľadávanie informácií
Zdieľanie súborov
Príbuzné výrazy:
Dejiny počítačov
Distribuované spracovanie
Dokument (informatika)
Font
Formalizovaný jazyk
Geocentrická súradnicová sústava
Geografický súradnicový systém GIS
Gigahertz
Glyf
Heterostáza
Hoareova logika
Hospodárska informatika
Indexovanie
Inferenčný mechanizmus
Informatická výchova
Informatika
Informačná explózia
Informačný jav
Informačný jazyk
Informačný zdroj
Informovanie
Internet
Interný informačný zdroj
Inštrukcia (informatika)
Jednosmerná komunikácia
Kapacita počítačových pamätí
Klasifikácia počítačových systémov
Klient-server
Kolaboratívne filtrovanie
Komputerizácia
Komunikačné prostriedky
Kontrolný súčet
Logging
Logistika (výrobné a obehové procesy)
Manažment používateľov
Manažérstvo informácií
Memoizácia
Metainformácia
Multiplexor
N-gram
Navigácia (informatika)
Nositeľ znaku
NP-úplný problém
Náhodné číslo
Objavovanie znalostí v databázach
Osi súradnicového systému
Overovanie modelov
Oznámenie počítača
Parita (kontrolný súčet)
Pertinentná informácia
Pohyblivá rádová čiarka
Polynomiálna transformovateľnosť
Používateľ
Počítačová bezpečnosť
Počítačová gramotnosť
Premenná (informatika)
Priama väzba
Problém fajčiarov cigariet
Problém obedujúcich filozofov
Problém spiaceho holiča
Promot
Pseudonáhodné číslo
Psychika (informatika)
Redukcia (teoretická informatika)
Redundantná informácia
Rekurzia (informatika)
Relevantná informácia
Reálny čas (počítače)
Riešenie problému
Rozšírená realita
Spracovanie dát
Spracovanie informácií
Spracovanie textu
Spätná väzba (všeobecne)
Stav (informatika)
Syntaktická analýza
Súbežnosť
Teoretická informatika
Terminálová udalosť
Teória algoritmov
Teória formálnych jazykov
Teória umelej inteligencie
Teória vypočítateľnosti
The Art of Computer Programming
Token (text)
Turingov test
Typografia (umenie)
Udalosť (informatika)
Umelá inteligencia
Unifikovaný signál
Voľná premenná
Vyhodnocovacia stratégia
Vyrovnávacia pamäť
Výpočtová zložitosť
Výpočtové náklady
Výroba s využitím počítača
Výstupné slovo
Portál:Informačné technológie
16-bit
32-bit
4-bit
64-bit
8-bit
Adresovanie (informatika)
Adresový priestor
Autorun.inf
Informačné a komunikačné technológie
Informačný horizont
IP Multimedia Subsystem
Knižnica infraštruktúry informačných technológií
Problém čitateľa-zapisovateľa
Rozhranie (interface)
Runtime error
Sťahovanie hudby
Systém manažérstva obsahu (všeobecne)
Vyhľadávací jazyk
Výraz (informatika)
Contextual Query Language
Čítanie s porozumením
Záchrana dát
Zoznam slotov a soketov spoločnosti AMD
Korešpondenčný seminár z programovania
Katedra knižničnej a informačnej vedy Filozofickej fakulty Univerzity Komenského v Bratislave
Text je dostupný za podmienok Creative
Commons Attribution/Share-Alike License 3.0 Unported; prípadne za ďalších
podmienok.
Podrobnejšie informácie nájdete na stránke Podmienky
použitia.