Este documento describe cómo las expresiones regulares se pueden usar para definir los tokens de los lenguajes de programación. Explica que los tokens suelen caer en categorías como palabras reservadas, símbolos especiales, identificadores y literales. Luego enumera ejemplos comunes de expresiones regulares para cada categoría de tokens.