Obsah:
Definice - Co znamená Lexikální analýza?
Lexikální analýza je koncept, který je aplikován na informatiku velmi podobným způsobem, jako je aplikován na lingvistiku. Lexikální analýza v podstatě znamená seskupení proudu písmen nebo zvuků do sad jednotek, které představují smysluplnou syntaxi. V lingvistice se nazývá parsování a v informatice to lze nazvat parsování nebo tokenizování.
Techopedia vysvětluje Lexikální analýzu
Myšlenka lexikální analýzy v informatice spočívá v tom, že lexikální analýza rozděluje proudy na „lexémy“, kde token představuje základní jednotku významu. Žetony jsou spojeny takovým způsobem, že překladač jazyků se musí vrátit a izolovat je, aby implementoval správné instrukce pro výpočet. V podstatě lidé i počítače provádějí lexikální analýzu, ale počítače to dělají jinak a mnohem techničtěji. Způsob, jakým počítače provádějí lexikální analýzu, nemusí být pro člověka transparentní - musí být naprogramován pouze do počítačového systému. Programy, které provádějí lexikální analýzu v oblasti informatiky, se často nazývají lexery, tokenizéry nebo skenery.
