同样是abc,文件工具算出的摘要与文本框结果不同,复制出来又看不出哪里多了东西。这时可以先看输入开头是否带BOM,而不是急着换算法或把结果大小写来回转换。

2026年11月17日,本文在文本哈希工具中测试abc、开头带U+FEFF的abc,以及把字符说明U+FEFF当成普通文字输入的情况。每组都保留了实际输入和对应UTF-8字节。

先用不带标记的abc建立基线

第一组输入三个ASCII字符abc,UTF-8字节为 61 62 63。本次SHA256结果以 ba7816bf 开头,是后面两组的对照基线。

不带BOM的abc作为基线,SHA256以ba7816bf开头;摘要对应当前输入的三个字节
不带BOM的abc作为基线,SHA256以ba7816bf开头;摘要对应当前输入的三个字节

排查时最好选定一个算法和一种输出形式贯穿比较。本篇看SHA256的十六进制结果,不拿MD5、Base64输出或其他摘要互相比。算法不同、输出表示不同,都会造成文本外观变化,却不一定表示输入改变。

开头多了三个UTF-8字节

第二组在abc前加入真正的U+FEFF。屏幕上正文仍像abc,但UTF-8字节变成 EF BB BF 61 62 63,本次SHA256改为以 1c28dc3f 开头。

开头带真实U+FEFF的abc得到不同SHA256;肉眼相同不能证明输入字节相同
开头带真实U+FEFF的abc得到不同SHA256;肉眼相同不能证明输入字节相同

差异来自输入增加了字节,不是哈希工具“识别到BOM就随机换结果”。哈希处理的是实际输入,隐藏字符也参与计算。文件读写或复制链路若保留、去除或重新添加了BOM,都可能让两端摘要不一致。

但不能仅靠两个摘要不同,就确定原因一定是BOM。换行类型、末尾空格、字符编码和文本规范化同样可能改变字节。应先确认文件开头,再逐项缩小差异;不要为了让摘要相同,把所有不可见字符一律删除。

字面写U+FEFF,并不等于那个字符

第三组直接输入 U+FEFFabc,本次得到第三个摘要。这里开头的U、加号和十六进制数字都是普通字符,不是编码指令。

字面文字U+FEFFabc是另一份输入,不能用它代替真正的不可见标记做对照
字面文字U+FEFFabc是另一份输入,不能用它代替真正的不可见标记做对照

同理,在文本框里输入六个字符 \uFEFF,不保证工具会把它解释成一个U+FEFF。需要区分“表示这个字符的说明文字”和“字符串中实际保存的字符”。本次真正的BOM样例使用了实际字符,并记录其UTF-8字节,不是凭显示文字模拟。

可以在本地用下面的公开样例检查编码关系:

const clean = new TextEncoder().encode('abc');
const marked = new TextEncoder().encode('\uFEFFabc');

这段代码里的转义写在JavaScript字符串字面量中,会形成实际字符;复制到普通输入框时,解释规则则要另看工具约定。

比较文件时,应统一检查对象

有些程序先把文件读成文本,解码时处理掉BOM,再计算字符串的摘要;另一些程序直接计算整份文件的原始字节。两者检查对象不同,不能要求结果必然一致。

如果目标是校验下载文件,优先对完整文件字节计算;如果协议约定对规范化后的文本签名,就按双方约定处理后再算。不要把一边的文件摘要和另一边的显示文本摘要当成同一项指标。

需要确认隐藏字符时,可以结合文本与Unicode互转查看对应表示,但最终仍应回到编码后的实际字节。交接记录里写清是否带BOM、使用什么编码、换行是否改变,以及摘要计算发生在哪一步,往往就能解释“看起来相同”的两份材料为何不同。