Ruff 类型检查器ty字节字面量比较的类型推断Literal 精度与序列边界【免费下载链接】ruffAn extremely fast Python linter and code formatter, written in Rust.项目地址: https://gitcode.com/GitHub_Trending/ru/ruff导读本文基于 Ruff 仓库中类型检查器 ty 的官方测试规格文档 byte_literals.md深入剖析bytes字面量参与、、in、is等比较运算时类型推断引擎如何在静态层面计算出Literal[True]/Literal[False]/bool等精确结果。你将理解 ty 中「精确字面量比较」的完整判定规则、与字符串字面量处理的平行关系以及当操作数退化为宽泛的Sequence[int]时推断如何回退到保守的bool同时获得可复现的 mdtest 用例与底层源码调用链作为实践依据。一、背景ty 的 mdtest 规格与reveal_type断言在 Ruff 仓库中类型检查器 ty 的功能验证主要依赖位于 crates/ty_python_semantic/resources/mdtest/ 目录下的 Markdown 测试规格。这类文档并非普通说明文字而是「可执行断言」代码块中的reveal_type(...)会揭示某个表达式的推断类型行尾# revealed: ...注释则是对该类型的期望值测试框架会逐一比对。byte_literals.md 属于comparison主题下的一个测试组与 strings.md、integers.md 等并列专门验证当对象被推断为拥有Literal字节类型bytes 字面量时各种比较运算符的推断精度。其核心断言思想是对于两个值完全确定的 bytes 字面量比较结果在运行时是唯一的因此类型系统应当给出Literal[True]或Literal[False]而非泛化的bool只有当运行时值不确定时才回退到bool。二、相等性比较与!的精确判定文档第一部分「Literal comparisons」首先覆盖相等性与不等性比较reveal_type(babc babc) # revealed: Literal[True] reveal_type(babc bab) # revealed: Literal[False] reveal_type(babc ! babc) # revealed: Literal[False] reveal_type(babc ! bab) # revealed: Literal[True]规则清晰且直白两侧字节序列逐字节完全相等推断为Literal[True]!推断为Literal[False]只要有一个字节不同即为Literal[False]!为Literal[True]。从源码看这一判定由类型推断的比较入口 crates/ty_python_semantic/src/types/infer/comparisons.rs 驱动/!会先交给equality_truthiness/inequality_truthiness见 equality.rs求值若两侧都是LiteralValueType且类型种类为Bytes则直接比较底层字节值命中(LiteralValueTypeKind::Bytes(left), LiteralValueTypeKind::Bytes(right))分支equality.rs#L2039-L2041最终通过Type::bool_literal(...)构造出字面布尔类型。ty_python_core::Truthiness枚举中的AlwaysTrue/AlwaysFalse正是这一「必然成立 / 必然不成立」语义的实现载体。三、字节序比较、、、的字典序语义bytes 在 Python 中按字节字典序lexicographic order比较因此字面量之间的大小关系同样可以静态确定reveal_type(babc babd) # revealed: Literal[True] reveal_type(babc babb) # revealed: Literal[False] reveal_type(babc babc) # revealed: Literal[True] reveal_type(babc babb) # revealed: Literal[False] reveal_type(babc babd) # revealed: Literal[False] reveal_type(babc babb) # revealed: Literal[True] reveal_type(babc babc) # revealed: Literal[True] reveal_type(babc babd) # revealed: Literal[False]推断结果与 Python 运行时行为完全一致先比较首个不同字节的码值全部相同则按长度决定。对应实现位于 comparisons.rs#L760-L790 的Bytes vs Bytes字面量分支Lt/Le/Gt/Ge分别映射为 Rust 的、、、运算后包装为字面布尔类型。这一实现与同一文件中String vs String分支的结构完全对称体现了 ty 对 str/bytes 两类序列字面量的统一处理策略。四、成员测试in/not in的子串语义文档进一步覆盖了in/not in其判定依据是bytes 的成员测试等价于子串substring搜索而非单字节包含reveal_type(b in b) # revealed: Literal[True] reveal_type(b in babc) # revealed: Literal[True] reveal_type(babc in b) # revealed: Literal[False] reveal_type(bab in babc) # revealed: Literal[True] reveal_type(babc in babc) # revealed: Literal[True] reveal_type(bd in babc) # revealed: Literal[False] reveal_type(bac in babc) # revealed: Literal[False] # 必须连续ac 不是子串 reveal_type(b\x81\x82 in b\x80\x81\x82) # revealed: Literal[True] reveal_type(b\x82\x83 in b\x80\x81\x82) # revealed: Literal[False] reveal_type(bab not in babc) # revealed: Literal[False] reveal_type(bac not in babc) # revealed: Literal[True]值得注意的几个边界用例空字节串b是任何字节串包括自身的子串因此b in b与b in babc均为Literal[True]子串必须连续出现bac in babc中ac并不连续结果为Literal[False]转义序列如\x81\x82参与推断时同样按原始字节值处理。底层实现上ty 并没有手写暴力搜索而是直接调用了高性能的memchrcrate在 comparisons.rs#L782-L787 中通过memchr::memmem::find(b2, b1)判定b1是否为b2的子串find返回Some则in为Literal[True]None则为Literal[False]not in取反。memchr依赖声明在 crates/ty_python_semantic/Cargo.toml 中这保证了即使涉及较长的字节序列字面量成员测试的静态推断也保持高效。关于in/not in的一般化处理机制__contains__、__iter__、__getitem__三阶段回退、unsupported-operator诊断等可进一步参考同目录下的 membership_test.md。五、身份比较is/is not的保守推断与值比较不同身份比较关心的是「是否为同一个对象」。字节字面量是否被 CPython 驻留intern并不受类型系统保证因此 ty 采取保守策略reveal_type(babc is babc) # revealed: bool reveal_type(babc is bab) # revealed: Literal[False] reveal_type(babc is not babc) # revealed: bool reveal_type(babc is not bab) # revealed: Literal[True]规则解读两侧字节值不同不同值的 bytes 对象不可能是同一个对象因此is恒为Literal[False]is not恒为Literal[True]两侧字节值相同它们可能指向同一个被驻留的对象但类型系统无法保证因此is与is not都回退为bool。这一行为与 strings.md 中字符串字面量的is处理完全一致-- is --也是bool说明 ty 对 str 与 bytes 采用了一致的身份比较语义。实现层面is/is not在 comparisons.rs#L320-L325 中走独立的identity_comparison_truthiness路径基于「两个单例类型是否必然 / 可能 / 不可能指向同一对象」来产出Truthiness结果其中is not会对is的结果取反。六、边界情形与Sequence[int]比较时为何退化为bool文档第二部分「Equality with sequences」给出了一个关键的类型理论边界from collections.abc import Sequence def _(value: Sequence[int]): reveal_type(value b) # revealed: bool reveal_type(b value) # revealed: bool reveal_type(value ! b) # revealed: bool reveal_type(b ! value) # revealed: bool这里的推理链是在 Python 中bytes本身就是一个Sequence[int]其元素是 0255 的整数因此一个类型为Sequence[int]的运行时对象完全有可能是某个bytes对象——包括空字节串。于是value b在运行时可能为True若value恰是空 bytes也可能为False若是list[int]等其他序列因为两侧都只约束为Sequence[int]与Literal[b]精确字面量分支无法触发推断结果必须保守地返回bool四个方向的比较字面量在左或右、或!对称地都是bool。这也印证了「字面量精度只在两侧值都完全确定时才成立」的整体设计原则一旦任何一侧退化为抽象类型如Sequence[int]静态推断立即回退到安全、不可缩窄的bool。与 strings.md 中Sequence[str]与字符串字面量比较返回bool的用例互为镜像。七、源码级原理从CmpOp到Literal的完整调用链综合以上用例bytes 字面量比较的推断在 ty 中遵循如下调用链均位于 crates/ty_python_semantic/src/types/infer/comparisons.rs入口分发infer_binary_type_comparison将 AST 比较操作符ast::CmpOp分类为三类——身份比较Is/IsNot、富比较Eq/Ne/Lt/Le/Gt/Ge经RichCompareOperator封装与成员测试In/NotIn经MembershipOperator封装快速路径/!先经equality_truthiness/inequality_truthiness求值命中确定结果则直接返回未命中则继续字面量精确分支当左右两侧都是Type::LiteralValue时进入(LiteralValueTypeKind::Bytes, LiteralValueTypeKind::Bytes)分支按操作符逐一分派到 Rust 的字节值运算、、memmem::find等统一用Type::bool_literal(...)产出Literal[True]或Literal[False]兜底路径任何精确分支无法覆盖的情况如一侧为Sequence[int]、Union、TypeVar或普通实例最终回退到「查找__dunder__方法」的通用富比较/成员测试逻辑或直接保守返回bool/Unknown。其中TruthinessAlwaysTrue/AlwaysFalse/Ambiguous定义于 crates/ty_python_semantic/src/types/equality.rs#L46-L61 附近是整个三态判定的统一抽象字面量比较产出前两者抽象类型比较产出Ambiguous并映射为bool。八、如何运行与扩展这些测试这批用例作为 mdtest 规格随仓库源码一起维护读者可在仓库中直接浏览完整断言清单字节字面量比较的全部用例byte_literals.md平行的字符串字面量比较strings.md成员测试的通用机制与诊断快照membership_test.md富比较 dunder 与反射比较规则rich_comparison.md核心比较推断实现comparisons.rsbytes 字面量分支在 L760-L790。运行这些测试需要构建整个 ty 语义 cratecargo test -p ty_python_semantic等命令在当前仓库中用于执行对应 crate 的测试套件测试框架会根据reveal_type注释自动比对推断结果与期望值任何对比较语义的改动都会在这里被精确校验。结语通过 byte_literals.md 这组规格可以清晰看到 ty 在 bytes 字面量比较上的三层精度策略值确定的字面量之间、!、、in等给出Literal[True]/Literal[False]的精确答案同值身份比较因驻留不确定性保守返回bool一旦操作数退化为Sequence[int]等抽象类型则整体回退为bool。配合 comparisons.rs 中对称的Bytes分支与memchr子串搜索实现这套规则既保证了类型推断的精度也守住了「绝不给出可能错误的窄类型」这一健全性底线。【免费下载链接】ruffAn extremely fast Python linter and code formatter, written in Rust.项目地址: https://gitcode.com/GitHub_Trending/ru/ruff创作声明：本文部分内容由AI辅助生成（AIGC），仅供参考 Ruff 类型检查器（ty）字节字面量比较的类型推断：Literal 精度与序列边界
Ruff 类型检查器ty字节字面量比较的类型推断Literal 精度与序列边界【免费下载链接】ruffAn extremely fast Python linter and code formatter, written in Rust.项目地址: https://gitcode.com/GitHub_Trending/ru/ruff导读本文基于 Ruff 仓库中类型检查器 ty 的官方测试规格文档 byte_literals.md深入剖析bytes字面量参与、、in、is等比较运算时类型推断引擎如何在静态层面计算出Literal[True]/Literal[False]/bool等精确结果。你将理解 ty 中「精确字面量比较」的完整判定规则、与字符串字面量处理的平行关系以及当操作数退化为宽泛的Sequence[int]时推断如何回退到保守的bool同时获得可复现的 mdtest 用例与底层源码调用链作为实践依据。一、背景ty 的 mdtest 规格与reveal_type断言在 Ruff 仓库中类型检查器 ty 的功能验证主要依赖位于 crates/ty_python_semantic/resources/mdtest/ 目录下的 Markdown 测试规格。这类文档并非普通说明文字而是「可执行断言」代码块中的reveal_type(...)会揭示某个表达式的推断类型行尾# revealed: ...注释则是对该类型的期望值测试框架会逐一比对。byte_literals.md 属于comparison主题下的一个测试组与 strings.md、integers.md 等并列专门验证当对象被推断为拥有Literal字节类型bytes 字面量时各种比较运算符的推断精度。其核心断言思想是对于两个值完全确定的 bytes 字面量比较结果在运行时是唯一的因此类型系统应当给出Literal[True]或Literal[False]而非泛化的bool只有当运行时值不确定时才回退到bool。二、相等性比较与!的精确判定文档第一部分「Literal comparisons」首先覆盖相等性与不等性比较reveal_type(babc babc) # revealed: Literal[True] reveal_type(babc bab) # revealed: Literal[False] reveal_type(babc ! babc) # revealed: Literal[False] reveal_type(babc ! bab) # revealed: Literal[True]规则清晰且直白两侧字节序列逐字节完全相等推断为Literal[True]!推断为Literal[False]只要有一个字节不同即为Literal[False]!为Literal[True]。从源码看这一判定由类型推断的比较入口 crates/ty_python_semantic/src/types/infer/comparisons.rs 驱动/!会先交给equality_truthiness/inequality_truthiness见 equality.rs求值若两侧都是LiteralValueType且类型种类为Bytes则直接比较底层字节值命中(LiteralValueTypeKind::Bytes(left), LiteralValueTypeKind::Bytes(right))分支equality.rs#L2039-L2041最终通过Type::bool_literal(...)构造出字面布尔类型。ty_python_core::Truthiness枚举中的AlwaysTrue/AlwaysFalse正是这一「必然成立 / 必然不成立」语义的实现载体。三、字节序比较、、、的字典序语义bytes 在 Python 中按字节字典序lexicographic order比较因此字面量之间的大小关系同样可以静态确定reveal_type(babc babd) # revealed: Literal[True] reveal_type(babc babb) # revealed: Literal[False] reveal_type(babc babc) # revealed: Literal[True] reveal_type(babc babb) # revealed: Literal[False] reveal_type(babc babd) # revealed: Literal[False] reveal_type(babc babb) # revealed: Literal[True] reveal_type(babc babc) # revealed: Literal[True] reveal_type(babc babd) # revealed: Literal[False]推断结果与 Python 运行时行为完全一致先比较首个不同字节的码值全部相同则按长度决定。对应实现位于 comparisons.rs#L760-L790 的Bytes vs Bytes字面量分支Lt/Le/Gt/Ge分别映射为 Rust 的、、、运算后包装为字面布尔类型。这一实现与同一文件中String vs String分支的结构完全对称体现了 ty 对 str/bytes 两类序列字面量的统一处理策略。四、成员测试in/not in的子串语义文档进一步覆盖了in/not in其判定依据是bytes 的成员测试等价于子串substring搜索而非单字节包含reveal_type(b in b) # revealed: Literal[True] reveal_type(b in babc) # revealed: Literal[True] reveal_type(babc in b) # revealed: Literal[False] reveal_type(bab in babc) # revealed: Literal[True] reveal_type(babc in babc) # revealed: Literal[True] reveal_type(bd in babc) # revealed: Literal[False] reveal_type(bac in babc) # revealed: Literal[False] # 必须连续ac 不是子串 reveal_type(b\x81\x82 in b\x80\x81\x82) # revealed: Literal[True] reveal_type(b\x82\x83 in b\x80\x81\x82) # revealed: Literal[False] reveal_type(bab not in babc) # revealed: Literal[False] reveal_type(bac not in babc) # revealed: Literal[True]值得注意的几个边界用例空字节串b是任何字节串包括自身的子串因此b in b与b in babc均为Literal[True]子串必须连续出现bac in babc中ac并不连续结果为Literal[False]转义序列如\x81\x82参与推断时同样按原始字节值处理。底层实现上ty 并没有手写暴力搜索而是直接调用了高性能的memchrcrate在 comparisons.rs#L782-L787 中通过memchr::memmem::find(b2, b1)判定b1是否为b2的子串find返回Some则in为Literal[True]None则为Literal[False]not in取反。memchr依赖声明在 crates/ty_python_semantic/Cargo.toml 中这保证了即使涉及较长的字节序列字面量成员测试的静态推断也保持高效。关于in/not in的一般化处理机制__contains__、__iter__、__getitem__三阶段回退、unsupported-operator诊断等可进一步参考同目录下的 membership_test.md。五、身份比较is/is not的保守推断与值比较不同身份比较关心的是「是否为同一个对象」。字节字面量是否被 CPython 驻留intern并不受类型系统保证因此 ty 采取保守策略reveal_type(babc is babc) # revealed: bool reveal_type(babc is bab) # revealed: Literal[False] reveal_type(babc is not babc) # revealed: bool reveal_type(babc is not bab) # revealed: Literal[True]规则解读两侧字节值不同不同值的 bytes 对象不可能是同一个对象因此is恒为Literal[False]is not恒为Literal[True]两侧字节值相同它们可能指向同一个被驻留的对象但类型系统无法保证因此is与is not都回退为bool。这一行为与 strings.md 中字符串字面量的is处理完全一致-- is --也是bool说明 ty 对 str 与 bytes 采用了一致的身份比较语义。实现层面is/is not在 comparisons.rs#L320-L325 中走独立的identity_comparison_truthiness路径基于「两个单例类型是否必然 / 可能 / 不可能指向同一对象」来产出Truthiness结果其中is not会对is的结果取反。六、边界情形与Sequence[int]比较时为何退化为bool文档第二部分「Equality with sequences」给出了一个关键的类型理论边界from collections.abc import Sequence def _(value: Sequence[int]): reveal_type(value b) # revealed: bool reveal_type(b value) # revealed: bool reveal_type(value ! b) # revealed: bool reveal_type(b ! value) # revealed: bool这里的推理链是在 Python 中bytes本身就是一个Sequence[int]其元素是 0255 的整数因此一个类型为Sequence[int]的运行时对象完全有可能是某个bytes对象——包括空字节串。于是value b在运行时可能为True若value恰是空 bytes也可能为False若是list[int]等其他序列因为两侧都只约束为Sequence[int]与Literal[b]精确字面量分支无法触发推断结果必须保守地返回bool四个方向的比较字面量在左或右、或!对称地都是bool。这也印证了「字面量精度只在两侧值都完全确定时才成立」的整体设计原则一旦任何一侧退化为抽象类型如Sequence[int]静态推断立即回退到安全、不可缩窄的bool。与 strings.md 中Sequence[str]与字符串字面量比较返回bool的用例互为镜像。七、源码级原理从CmpOp到Literal的完整调用链综合以上用例bytes 字面量比较的推断在 ty 中遵循如下调用链均位于 crates/ty_python_semantic/src/types/infer/comparisons.rs入口分发infer_binary_type_comparison将 AST 比较操作符ast::CmpOp分类为三类——身份比较Is/IsNot、富比较Eq/Ne/Lt/Le/Gt/Ge经RichCompareOperator封装与成员测试In/NotIn经MembershipOperator封装快速路径/!先经equality_truthiness/inequality_truthiness求值命中确定结果则直接返回未命中则继续字面量精确分支当左右两侧都是Type::LiteralValue时进入(LiteralValueTypeKind::Bytes, LiteralValueTypeKind::Bytes)分支按操作符逐一分派到 Rust 的字节值运算、、memmem::find等统一用Type::bool_literal(...)产出Literal[True]或Literal[False]兜底路径任何精确分支无法覆盖的情况如一侧为Sequence[int]、Union、TypeVar或普通实例最终回退到「查找__dunder__方法」的通用富比较/成员测试逻辑或直接保守返回bool/Unknown。其中TruthinessAlwaysTrue/AlwaysFalse/Ambiguous定义于 crates/ty_python_semantic/src/types/equality.rs#L46-L61 附近是整个三态判定的统一抽象字面量比较产出前两者抽象类型比较产出Ambiguous并映射为bool。八、如何运行与扩展这些测试这批用例作为 mdtest 规格随仓库源码一起维护读者可在仓库中直接浏览完整断言清单字节字面量比较的全部用例byte_literals.md平行的字符串字面量比较strings.md成员测试的通用机制与诊断快照membership_test.md富比较 dunder 与反射比较规则rich_comparison.md核心比较推断实现comparisons.rsbytes 字面量分支在 L760-L790。运行这些测试需要构建整个 ty 语义 cratecargo test -p ty_python_semantic等命令在当前仓库中用于执行对应 crate 的测试套件测试框架会根据reveal_type注释自动比对推断结果与期望值任何对比较语义的改动都会在这里被精确校验。结语通过 byte_literals.md 这组规格可以清晰看到 ty 在 bytes 字面量比较上的三层精度策略值确定的字面量之间、!、、in等给出Literal[True]/Literal[False]的精确答案同值身份比较因驻留不确定性保守返回bool一旦操作数退化为Sequence[int]等抽象类型则整体回退为bool。配合 comparisons.rs 中对称的Bytes分支与memchr子串搜索实现这套规则既保证了类型推断的精度也守住了「绝不给出可能错误的窄类型」这一健全性底线。【免费下载链接】ruffAn extremely fast Python linter and code formatter, written in Rust.项目地址: https://gitcode.com/GitHub_Trending/ru/ruff创作声明：本文部分内容由AI辅助生成（AIGC），仅供参考