一、词法分析器不能干啥

词法分析器是编译程序的第一步，它的主要工作是将源代码转化为单词流，为后续的语法分析做准备。但是，词法分析器并不能完成所有的任务，它有其自身的局限性，无法完成以下任务：

遇到错误时，无法自我纠错；
无法确定变量的类型；
无法处理复杂的语法结构；
无法处理不定长参数等复杂问题。

二、词法分析器不能做什么

在实际应用中，词法分析器也会遇到一些问题，比如：

无法避免歧义；
无法处理复杂的注释；
无法处理中文等多语言字符。

三、词法分析器不能识别

词法分析器并不能识别所有的字符，以下是一些它不能识别的字符：

符号多义性：如+既可以表示加法，又可以表示正号；
合法字符集外的字符：如中文、日文等；
数字右侧的字符：如1A、3E等；
程序中未声明的变量、常量等标识符。

四、词法分析器不能什么

词法分析器无法完成下列功能：

语义分析：包括变量类型检查、语句合理性、函数调用合法性等；
数据流分析：包括程序在运行时内存分配等；
代码生成：包括目标代码的生成等。

五、词法分析器不能实现的功能

虽然词法分析器是编译器中很重要的组成部分，但是它并不能实现以下功能：

对程序进行优化；
对程序进行自动化测试；
进行软件构建和自动构建。

六、词法分析器不能干什么

除了无法完成上述任务外，词法分析器还不能干其他一些事情，比如：

不能保证代码安全性；
不能保证代码的质量；
不能保证程序的正确性。

七、词法分析器不能识别出常量

在编程中，常量是很重要的一部分。但是词法分析器有时不能正确地识别出常量，这包括：

数字中间的下划线：如1_000_000等；
十六进制数字和八进制数字；
指数表示法：如6.02e23等。

八、词法分析器的含义

词法分析器的含义是将程序分解成单词，这些单词构成了程序的基本元素，是计算机理解和执行代码的基础。

def lexer(source_code: str):
    """
    词法分析器 
    """
    keywords = ['if', 'else', 'while', 'break',
                'continue', 'return', 'for', 'in', 'not',
                'and', 'or', 'True', 'False', 'None']
    tokens = []
    source_code = source_code.replace('\t', ' ')
    source_code = source_code.split('\n')
    #逐行遍历
    for line_num, line in enumerate(source_code):
        idx = 0
        #逐个字符遍历
        while idx < len(line):
            if line[idx] == ' ':
                idx += 1
            elif line[idx] == '#':
                break
            elif line[idx].isdigit():
                nums = ''
                while idx < len(line) and line[idx].isdigit():
                    nums += line[idx]
                    idx += 1   
                tokens.append(['INT', int(nums), line_num])
            elif line[idx].isalpha():
                ident = ''
                while idx < len(line) and line[idx].isalnum():
                    ident += line[idx]
                    idx += 1
                    #判断关键字
                    if ident in keywords:
                        tokens.append([ident.upper(), ident, line_num])
                    else:
                        tokens.append(['VAR', ident, line_num])
            else:
                tokens.append([line[idx], line[idx], line_num])
                idx += 1
    return tokens

九、词法分析器是什么

词法分析器是编译程序的一个组成部分，它将源代码分解成单词，然后由语法分析器进行语法分析，将单词流转化为抽象语法树，最终生成目标代码。

十、词法分析器的加工对象选择

在编译器的开发中，我们需要根据不同的编程语言选择不同的加工对象，如对于C语言的词法分析器，其加工对象包括：

标识符：包括变量名、函数名、枚举值等；
关键字：C语言中的关键字包括if、else、while等；
分界符：如左右大括号、括号等；
运算符：包括算术运算符、关系运算符、逻辑运算符等。

词法分析器的局限性