ประโยคภาษาจีน : 中文句子 |
---|
sǎo miáo 扫描 chéng xù 程序 dú qǔ 读取 huǎn chōng 缓冲 zhòng dì 中的 dān ge 单个 zì fú 字符 bìng 并 fǎn huí 返回 jiě xī 解析 qì 器 néng 能 lǐ jiě 理解 de 的 jì hao 记号 chēng zuò 称做 biāo jì 标记 rú 如 guān jiàn zì 关键字 cào zuò fú 操作符 jí 及 zhēn duì 针对 tè dìng 特定 yǔ yán 语言 de 的 biāo diǎn fú hào 标点符号 |
A scanner reads in the individual characters of a buffer and returns symbols (called tokens) that the parser will understand -- such as keywords, operators, and language-specific punctuation. |