Linux下文件名长度限制

49次阅读

共计 2132 个字符,预计需要花费 6 分钟才能阅读完成。

Linux 下文件名长度限制

出现场景:在迭代中有一个需求是将 pdf 文件名修改为所有班级的名称集合,出现的班级过多导致的文件名过长在 linux 下无法创建文件和文件夹的情况

解决方式:经过查证,linux 中文件名最长为 255 字符,文件路径最大长度为 4096 字符。所以需要对班级名称进行截断,并且不仅仅是根据字符串长度截断,而是根据每一个字母或者汉字对应的字符来计算得到最后的文件名小于 255 个字符。

鉴于以上场景,于是进行稍微的深究,对字符编码相关的知识进行了一个深一步的学习

字符

简介:字符简单的来说就是我们日常生活中用到的一些字符,比如数字、汉字、标点符号等。专业的介绍可以参考百度百科)

字节

简介:计算机中的一个计量存储容量的单位,常见的计算机中一个字节代表八位的二进制数

编码

简介:其实 编码 就是将字符转为二进制的规则,因为我们知道计算机是通过 高电平 和 低电平 来分别代表 1 和 0,想让计算机读懂我们的字符,就需要将 二进制数 和我们的字符建立一个映射关系,这个过程就叫编码。其实每个人都可以定义自己的编码规则,但是这样就乱套了。所以一些组织就制定了统一的编码规则。也就出现了我们常见的 ASCII、unicode 等编码规则

字符集

ASCII(字符集):建立了 128 个字符对应的数字编号,仅支持英文字母、一些标点符号、以及一些不可显示的字符。

unicode (万国码 字符集):Unicode 只是一个用来映射字符和数字的标准。它对支持字符的数量没有限制,也不要求字符必须占两个、三个或者其它任意数量的字节。Unicode 并不涉及字符是怎么在字节中表示的,它仅仅指定了字符对应的数字。归根结底,unicode 就是把世界上所有的字符都和一个数字做对应,但是具体到这个数字在计算机中如何表示,他是不管的。

关于 Unicode 的其它误解包括:Unicode 支持的字符上限是 65536 个,Unicode 字符必须占两个字节,这些都不正确。

Unicode 字符是怎样被编码成内存中的字节这是另外的话题,它是被 UTF(Unicode Transformation Formats)定义的。

unicode 的问题:比如,汉字 的 Unicode 是十六进制数4E25,转换成二进制数足足有 15 位(100111000100101),也就是说,这个符号的表示至少需要 2 个字节。表示其他更大的符号,可能需要 3 个字节或者 4 个字节,甚至更多。

这里就有两个严重的问题,第一个问题是,如何才能区别 Unicode 和 ASCII?计算机怎么知道三个字节表示一个符号,而不是分别表示三个符号呢?第二个问题是,我们已经知道,英文字母只用一个字节表示就够了,如果 Unicode 统一规定,每个符号用三个或四个字节表示,那么每个英文字母前都必然有二到三个字节是0,这对于存储来说是极大的浪费,文本文件的大小会因此大出二三倍,这是无法接受的。于是出现了对 unicode 字符集的不同的编码方式

常见的编码规则

ASCII 码的编码规则:每个二进制位(bit)有 0 1 两个状态,因此八个二进制位就能够组成 256 种不同的状态,也就是 00000000 – 11111111,由于 ASCII 字符集定义了 128 个字符,八个二进制位能够表达 256 个状态,所以肯定是够用了,所以在 ASCII 码中一个字符只占一个字节(一个字节 === 8 bit)

UTF-8:是一种 unicode 的编码方案,在 UTF- 8 中,0-127 号的字符用 1 个字节来表示,使用和 US-ASCII 相同的编码。这意味着 1980 年代写的文档用 UTF- 8 打开一点问题都没有。只有 128 号及以上的字符才用 2 个,3 个或者 4 个字节来表示。因此,UTF- 8 被称作可变长度编码,它可以使用 1~4 个字节表示一个符号,根据不同的符号而变化字节长度。

UTF-16:另一个流行的可变长度编码方案是 UTF-16,它使用 2 个或者 4 个字节来存储字符。

javascript 中的字符编码

js 中用的编码方式不是 UTF-8、UTF-16。而是 UCS-2,具体原因是因为 javascript 诞生的时候,还没有 UTF-16,但是好在 UCS 的码点和 unicode 一致,所以他们是互相兼容的。两者的关系简单说,就是 UTF-16 取代了 UCS-2,或者说 UCS- 2 整合进了 UTF-16。所以,现在只有 UTF-16,没有 UCS-2。

总结:

  1. Unicode 是一个简单的标准,用来把字符映射到数字上。Unicode 协会的人会帮你处理所有幕后的问题,包括为新字符指定编码。
  2. Unicode 并不告诉你字符是怎么编码成字节的。这是被编码方案决定的,通过 UTF 来指定。
  3. 这个世界上从来没有纯文本这回事,如果你想读出一个字符串,你必须知道它的编码
  4. 字符集和编码是不同的,字符集是指定的数字和字符的映射,而编码则是将指定的字符对应的数字存储在计算机中的过程。
  5. 编码是很复杂的过程,其中涉及到的砖码,基本平面,辅助平面等概念在本文中都没有提到,具体的实现过程可以参考下面的阮一峰相关的资料。

参考资料:

  • 字符编码笔记:ASCII,Unicode 和 UTF-8 阮一峰
  • 学点编码知识又不会死:Unicode 的流言终结者和编码大揭秘
  • javascript 基础之字符集与编码
  • Unicode 与 JavaScript 详解 阮一峰
正文完
 0