ANALIZADOR LEXICO

Herramientas

Automatas Finitos

Generadores

lex.Flex

JFlex

Ragel

ANTLR

Reglas

Dirigido por Tabla

Bucles anidados

Generar lista de Tokens

Interactuar con analizador sintactico

Detectar errores lexicos

Guardar informacion de los tokens

Eliminar comentarios

Principio maxima longitud

Palabras reservadas vs identificadores

Gestión de Buffer de entrada

Evalua Caracter a Caracter

Formar identificadores

Almacena una table de simbolos

Token

Patron

Lexema

Palabra Reservada

if, while, do

Centinela

Expresion Regular

Definicion Regular

Operadores

= * + - / == > < & ! =

Símbolos Especiales

( ) [ ] {}

Scanner

Lexer

Tokenizer

Bajo petición de analizador sintáctico