refactor(lexer): refactor lexer

please refer to the work log for details

Author: CLimber-Rong

doc/工作日志/20250614.md

@@ -0,0 +1,7 @@
+# 2025/06/14 工作日志
+
+本次更新不会发布新版本。
+
+### 整合了Lexer的代码
+
+以往的getLineTok函数太臃肿了，我将不同的Token分析功能封装到了不同的函数。