lexer造句

1、These directives are used to define the tokens the lexer can return.
这些指令用来定义lexer可以返回的记号。

2、KOREAN_LEXER: a lexer for extracting tokens from Korean text.
KOREAN_LEXER：一个从Korean文本在中提取标记的lexer。

3、Why does the lexer rule for strings takes precedence over all my other rules?
为什么字符串的词法规则优先于我的所有其他的规则？

4、Thus, p: : RD on top of Perl 5 is a powerful parser and lexer combination.
因此，Perl5之上的P：RD是一个解析器与词法分析器的强大组合。

5、How to use an Alex monadic lexer with Happy?
如何使用一个亚历克斯一元词法分析器与快乐吗？

6、Whenever possible, try to develop separate tests for your lexer and your parser.
只要有可能，请尝试为您的lexer和解析器开发单独的测试。

7、CHINESE_VGRAM: a lexer for extracting tokens from Chinese text.
CHINESE_VGRAM：一个从Chinese文本在中提取标记的lexer。

8、JAPANESE_VGRAM: a lexer for extracting tokens from Japanese text.
JAPANESE_VGRAM：一个从Japanese文本在中提取标记的lexer。

9、JAPANESE_LEXER: a lexer for extracting tokens from Japanese text.
JAPANESE_LEXER：一个从Japanese文本在中提取标记的lexer。

10、It USES start states — a feature allowing the lexer to match some rules only some of the time.
它使用了start声明——这项功能使lexer能够只在一些时候去匹配某些规则。

11、A listing of supported lexer types follows.
下面是一个支持lexer类型的清单。

12、A good lexer example can help a lot with learning how to write a tokenizer.
一个好的lexer例子会非常有助于学习如何编写断词器（tokenizer）。

lexer翻译