为「木兰」编程语言添加对中文命名标识符的支持
发布日期:2021-06-29 15:29:22 浏览次数:3 分类:技术文章

本文共 854 字,大约阅读时间需要 2 分钟。

基于 @肖剑 的(如很多人已经知道的, 当然是 Python 代码, 很不错, 嗯).

开始对「木兰」编程语言进行分析。首先打算摸索它的基本功能。前文已经进行了少量代码测试.

但, 可惜木兰, 打算先改进一下, 以便编写更易维护的测试代码. 测试代码打算先在逆向工程中运行(主力机器是 Mac),待基本确定范围后,再在 exe 中确认一遍。

运行 ulang-0.2.2.exe 后, 如果输入下面代码:

年 = year()

会报错LexingError.

在我 fork 出的逆向工程中运行python -m ulang可以启动同样的交互环境 ulang’s REPL. 但同样的代码报错不同, 似乎信息更多一些:

> 年 = year()SyntaxError: File "
", line 1:1, unknown token is found here年 = year()^

回头可以研究一下报错机制, 为何 exe 和逆向的不同.

早先回答时猜想是由于"实现的前端在词法分析这步拦住了"中文命名, 于是查看逆向代码中, 果然看到parser/lexer.py中关于标识符的正则表达规则中, 只允许英文/数字/下划线:

lg.add('IDENTIFIER', '\\$?[_a-zA-Z][_a-zA-Z0-9]*')

接下去就熟门熟路, 添加上中文字符的 unicode 范围:

lg.add('IDENTIFIER', '\\$?[_a-zA-Z\u4e00-\u9fa5][_a-zA-Z0-9\u4e00-\u9fa5]*')

再从逆向工程中运行:

$ python3 -m ulangWelcome to ulang's REPL..Type 'help' for more informations.> 年 = year()> 年2020

嗯, 告别过去, 不错的第一步.

逆向工程地址: https://github.com/MulanRevive/mulan

转载地址:https://codeinchinese.blog.csdn.net/article/details/104387132 如侵犯您的版权,请留言回复原文章的地址,我们会给您删除此文章,给您带来不便请您谅解!

上一篇:悬赏万元,重现「木兰」编程语言编译器
下一篇:戳破针对「木兰」编程语言的拙劣谣言

发表评论

最新留言

路过按个爪印,很不错,赞一个!
[***.219.124.196]2024年04月18日 22时08分48秒