透彻理解Shift-And/Shift-Or 算法 字符串匹配/子串查找
Shift-And/Shift-Or 算法和KMP 算法一样,也是线性时间复杂度的字符串匹配算法,运行时间上甚至要比KMP 算法快得多。而理解上比KMP 算法更容易一些。Shift-And/Shift-Or 算法设计的非常巧妙,初次接触时同样“吓了一跳”。Shift-And 与 Shift-Or 算法的原理完全一样,区别仅在于Shift-Or 对Shift-And 做了一点儿改进。我们先说Shift-And 算法。
S 表示原字符串,T 表示目标串(模式串),我们要在S 中搜索T。
令 S = abcabcabdabba, T = abcabd
1,Shift-And 算法思想
Shift-And 算法的核心思想是利用掩码D 来记录模式串的前缀匹配情况。(瞧,shift 算法的核心也是前缀匹配)。Shift 算法大量应用了位运算。
D 是一个m 位的无符号整数:D (注意D 并不是一个数组,仅仅是一个整数,D 表示其最高位bit)。
数组索引i 控制S 串的扫描,当扫描的字符S 时,D 的第j 位D = 1 当且仅当T 是S 的一个后缀。
要使用Shift 算法,需要一个辅助表B。B 是一个字典,key 是问题域字符集中的每个字符,value 是一个n 位无符号整数,记录该字符在模式串T 的哪些位置出现。
例如,字符c 在T 处出现,那么B['c'] = 000100 (对于字符串,低位在左;对于B['c'],低位在右);同理,a 在T,T 处出现,B['a'] = 001001.
假设当前处理到S,需要对D 进行更新。由于D (0<j<n) 标识T 是否是S 的后缀,所以D=1 当且仅当更新前的D=1 并且S==T;D 是边界情况,D=1 当且仅当S==T。
所以,D = (D << 1 | 1) & B
显然,当D=1 时,表示T 是S 的后缀,此时找到一个T的完全匹配。
2,Shift-And 算法实现
Shift-And 匹配过程代码:
http://img3.douban.com/view/note/large/public/p10659670.jpg
由于位运算在计算机中可以并行进行,每次循环的执行是常数时间的,所以上面代码段的复杂度是 O(m)。
3,辅助表 B
上面没有提到如何得到辅助表B。很简单,只要获得模式串T 中每个字符出现的位置。
http://img5.douban.com/view/note/large/public/p10659698.jpg
显然,上述代码段的复杂度是 O(n)。Shift-And 算法的时间复杂度是O(m+n)。
实际上,shift 算法通常比KMP 算法的匹配速度要快,因为计算机位并行运算是非常高效的。
注意:数组B 的大小是由字符集决定的,如果字符来自ASCII 码,字符的数值范围是0~127,数组大小是128 即可;否则,可能需要更大的数组B,或者自己构建字符到整数索引之间的散列关系。
4,Shift-Or 算法
在Shift-And 中,对掩码D 的更新:D = (D << 1 | 1) & B
每次更新D 都需要额外进行D 移位后与"1" 的"或"运算。这是由于我们要保证当字符S 在T 处出现时,D 一定要等于1,而D 向左移位后最低位是0。
如果将Shift-And 中核心的“与” 运算改为“或” 运算,可以节省这一个附加的“或1” 运算。这正是Shift-Or 所改进的地方。
Shift-Or 与Shift-And 的唯一区别在于,在Shift-Or 中,“有效位” 是通过0(而不是1)来标识。
于是求解辅助表B 和更新掩码D 都会与Shift-And 有一些区别,详见代码。
Shift-And 完整代码:C++ 实现 Python 实现
Shift-Or 完整代码:C++ 实现 Python 实现
页:
[1]