请教:有高手指点下NETBIT么?

本人现在在阅读sogo的那篇关于NETBIT浏览器的文章,
由于本人是初学者,对该文章中的词法分析部分,只懂
其大致的工作原理.
  有没哪位高手帮帮忙,详细解析下关于词法部分的C程序
或者告诉本人一些关于讲该解程序的网站或者文本
  不人不甚感激.......