Delphi - texto en un MEMO ...encontrar comparar

hola que tal

estoy batallando para como hagarrar el texto del memo y separarlos por palabrar para despues compararlas ( esto se llama token) sera conmparadas con unas palabras que estan en un listbox

seria asi?

itemindex.memo1.text:= token //seria la asignacion?

if token= copy ( list.text,4,lon -3) // seria la comparacion lon seria la longitud

que tan lo sierto estoy?

o que tan mal estoy?

cual quier sujerencia ayuda o comentario se los agradeseria

de hante mano gracias (:

mira yo hice eso para un compilador, esto con ayuda de una matriz de transicion, lo que en programacion es, ir analisando caracter por caracter del memo, e ir los acumulando en una variable token, asta encontrar un delimitador (espacio en blanco, enter, operadores, etc los delimitadores dependen de la sintaxis) y al encontrar el delimitador se que tengo un token completo y lo busco, espero y te sirba.

hola gracias

eso es oido y e tratado de haserlo pero no se como empesar

como los meto en la variable token? y que sea cuando se encuentre un delimitador?

En trucomania, truco 302 habla sobre tokens. www.q3.nu