算法 - Linux下的diff命令复杂度多少?

 Z-ji 发布于 2022-11-02 19:11

网上查了下diff的实现都是先求LCS,但是LCS复杂度我记的是$$O(N*M)$$的,我自己手动生成了100W个随机数字到两个文件里去,跑了下diff发现大约5s就出结果了,很好奇Linux下的diff是怎么实现?是优化了什么吗?

2 个回答
  • 你可以看一下linux源代码 应该就知道它怎么实现的了

    2022-11-04 20:32 回答
  • 你可以到 gnu 官网去下载一份 diffutils 的源码研究,里面包含 diffcmd 两个命令的实现。

    我粗略看过源码,因为 diffcmd 寻找差异都是以行为单位进行比对的,所以跟你想象的 LCS 算法是有区别的。

    算法里的核心思路之一是哈希,每一行内容都被哈希成一个数值并放入一个开链式的哈希表中,比对时是从哈希表中快速找出另一个文件中匹配相等的行。

    另外内部使用了 LCS 算法的变体,如果没有指定 --minimal,它查找到的结果是接近最优。官方文档里的复杂度介绍:

    Unless the --minimal option is used, diff uses a heuristic by Paul Eggert that limits the cost to O(N^1.5 log N) at the price of producing suboptimal output for large inputs with many differences.

    当差异非常小时,这里算法的复杂度接近O(N),并且N为行的数量。执行上,几乎是仅对两个文件扫描一遍的速度,因为从磁盘读文件的时间比往往计算多。

    2022-11-04 20:49 回答
撰写答案
今天,你开发时遇到什么问题呢?
立即提问
热门标签
PHP1.CN | 中国最专业的PHP中文社区 | PNG素材下载 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有