zur Startseite zum Inhalt zur Navigation

Tokenizer

 

Tokenizer ist ein Sample das zeigt, wie z.B. ein 
Compiler einen Quellcode zerlegt, um ihn dann 
entsprechend umzusetzen.

Dadurch dass die Regeln des Parsings dynamisch 
erzeugt werden können, kann praktisch alles geparst 
werden.

Das Programm erwartet einen Text als Eingabe, 
bearbeitet diesen und gibt eine Liste der 
gefundenen Tokens zurück.

Ein Compiler würde diese Liste dann in den Syntaxbaum 
umstellen ( Was hier natürlich nicht gemacht wird ).

 

( 502 Hits )

 

  heapsim     hilbert     dithering_mask     library     wecker     klab     gorilla     generische_liste     screensaveblocker     ntools     pingpong     info     xml     io_serializer     filetools     trio     picking     mandelbrot     passbildcreator     schachprobleme     tippsy3     race_condition     network_delay     wii_headtrack     tg12864b     reihen     bignumber     graphen_algos     fpc_depencies     mauskoordinaten     balanced2     zauber     fouriersynthese     formelparser     8x8x8     cubemap     alt_f2     sudoku     codeviewer     pentago     multilanguage     button_tool     screeny     baum     file_transfer     jazzball     farbspectrum     ae20125     exp_func     opengl_graphikengine     hex     partikelengine     openglsphere     picturerotate     proto     opengltruetypefont     weihnachtskalender     binomial     copycommander     stereoprojektion     summe_n     dxtools     simple_cad     sprite_engine     mastermind     minipaint     tetris     l_system     rent_it     balanced     numeric_instability     cleanup     knack     gefangenen_dilemma     trackball     kollision     gedanken_leser     send_get_file     cpu_load     dcf77     fakenet     loop     simpleray     imageinspector     ascii     atmegaboard     ccm     affenpuzzle     uuart     sql     einstein     rubik_cube     ym1602c     textfilter     feder_masse     induktion     clickomania     weihnachtsstern     torus_chess     labyrintcreator