Cuprins:
Definiție - Ce înseamnă Analiza Lexicală?
Analiza lexicală este un concept care este aplicat informaticii într-un mod foarte similar cu cel aplicat lingvisticii. În esență, analiza lexicală înseamnă gruparea unui flux de litere sau sunete în seturi de unități care reprezintă sintaxa semnificativă. În lingvistică, se numește parsing, iar în informatică, se poate numi parsing sau tokenizare.
Techopedia explică analiza lexicală
Ideea analizei lexicale în informatică este că analiza lexicală se descompune în „lexeme” unde un jeton reprezintă unitatea de bază a sensului. Jetoanele sunt strânse împreună astfel încât compilatorul de limbă trebuie să se întoarcă și să le izoleze pentru a implementa instrucțiunile de calcul corecte. Practic, atât oamenii, cât și calculatoarele fac analize lexicale, dar calculatoarele o fac diferit și într-un mod mult mai tehnic. Modul în care calculatoarele fac analize lexicale nu trebuie să fie transparent pentru oameni - trebuie doar să fie programat în sistemul de calcul. Programele care fac analize lexicale în informatică sunt adesea numite lexere, tokenizatoare sau scanere.
