字符串全家桶
abv3Rpkg
·
2025-01-04 17:08:06
·
个人记录
AC 自动机
解决多串匹配问题。具体地,所有查询串构成一棵 Trie 树,对于每一个节点维护 fail 指针,指向这个节点最长的在Trie树中出现的真后缀 。
暴力的构建方式是简单的。设 u 通过字符 c 指向 p (t(u,c)=p ),现要得出 fail(p) 。若 t(fail(u),c) 存在,fail(p) 设为 t(fail(u),c) 。否则查看 t(fail(fail(u)),c) ,t(fail(fail(fail(u))),c) ,直到找到一个存在的,或全部不存在,设为根节点。
但是这样看起来复杂度就不对。而且匹配也很难。考虑魔改 Trie 树成为字典图 :将一条 t(u,c) 定义为在状态 u 后添加一字符 c 后在原 Trie 树上到达的状态。
建字典图和 Fail 指针可以揉在一起做:若 t(u,c) 在 Trie 上存在,则 t(u,c) 照样连。否则 t(u,c)\leftarrow t(fail(u),c) 。无论如何 fail(t(u,c))\leftarrow t(fail(u),c) 。bfs 维护即可。
fail 指针显然同样构成一棵树,一个节点通过 fail 的到根链即为其所有重要的后缀 。而通过 Trie 的到根链是前缀,所以一个节点通过走这两棵树可以到达的节点就是其所有重要的子串。
SA
绷,半年前学的东西现在忘得一干二净了。
记 sa_i 表示字符串 S 中排名为 i 的后缀是哪个(记录其起始位置),rk_i 表示后缀 S[i,n] 的排名。核心思路是,如果我们有 S 所有长度为 w 的子串的大小顺序,通过一次双关键字排序即可得到所有长度为 2w 的子串大小顺序。操作直到 w>=n 即可。这里双关键字的值域是 n 所以可以用计数排序削掉一个 \log 。
下面逐行分析代码在干什么。(字符串以下标1开头)
int sa[N],rk[2*N],tmp[N],buc[N];
void Sort(int n,int w){
int ptr=0;
for(int i=n;i>n-w;i--) tmp[++ptr]=i;
for(int i=1;i<=n;i++) if(sa[i]-w>0) tmp[++ptr]=sa[i]-w;
for(int i=1;i<=n;i++) buc[i]=0;
for(int i=1;i<=n;i++) buc[rk[i]]++;
for(int i=1;i<=n;i++) buc[i]+=buc[i-1];
for(int i=n;i>=1;i--) sa[buc[rk[tmp[i]]]--]=tmp[i];
}
void SA(string s){
int n=s.length()-1;
for(int i=1;i<=n;i++) buc[s[i]]++,tmp[s[i]]=1;
for(int i=1;i<=256;i++) buc[i]+=buc[i-1],tmp[i]+=tmp[i-1];
for(int i=n;i>=1;i--) sa[buc[s[i]]--]=i,rk[i]=tmp[s[i]];
for(int w=1;w<=n;w*=2){
Sort(n,w);
int ptr=0;
for(int i=1;i<=n;i++){
if(rk[sa[i]]!=rk[sa[i-1]]||rk[sa[i]+w]!=rk[sa[i-1]+w]) ptr++;
tmp[sa[i]]=ptr;
}
for(int i=1;i<=n;i++) rk[i]=tmp[i];
if(ptr==n) break;
}
}
注:在代码中,对于在当前长度下相等的子串,其 rk[i] 相等(即 rk[i] 是在去重意义下 的),但 sa[i] 直接代表某个有序排列,两两不等 。对于两个相等的子串,其 sa[] 的大小关系没有保证。
SA() 的初始化部分:获得长度为 1 意义下的 sa[] 和 rk[]。
第二行 buc[s[i]]++,tmp[s[i]]=1;:buc[c] 记录 s[i]==c 的个数,tmp[c] 记录存不存在 s[i]==c。
第三行 buc[i]+=buc[i-1],tmp[i]+=tmp[i-1];:做前缀和,此时 buc[c] 记录 s[i]<=c 的数量,可以理解为所有 s[i]==c 的 i 在排列中构成一个“块”,buc[c] 是这个块的末尾。 tmp[c] 记录 c 的去重排名。
第四行 sa[buc[s[i]]--]=i,rk[i]=tmp[s[i]];:前半句找到 s[i] 所在的块,将 s[i] 放在这个块的末尾,然后将末尾前移,使同一块内的元素从后往前填满整个块。后半句就是记录 s[i] 的排名。
Sort(n,w):当前的 sa[] 和 rk[] 均是在长度为 w 意义下,将 sa[] 更新到 2w 意义下,没管 rk[]。
Sort 中,tmp[] 存储子串的临时顺序,和 sa[] 类似。第一轮中,tmp[] 存储 i 按照第二关键字 rk[i+w] 的顺序。
第二行 将 i+w>n 的 i 放在最开头。它们的 rk[i+w]=0。
第三行 if(sa[i]-w>0) tmp[++ptr]=sa[i]-w;:升序遍历 rk[i+w],挨个放入 tmp[] 中。升序的方式是依据 rk[sa[i]] 对于 i 升序。我们需要加入的第二关键字是 rk[w+1] ~ rk[n],我们只要这部分。
第五行 buc[rk[i]]++; 同 SA() 第三行,维护“块”的末尾,只不过关键字变成了 rk。
第六行倒序处理 sa[buc[rk[tmp[i]]]--]=tmp[i];:按照第二关键字(tmp[])降序的顺序,找到每个元素对应的“块”,从后往前填充。“块”的顺序保证第一关键字升序,遍历顺序保证块内第二关键字升序。
SA() 的倍增部分:根据 sa[] 更新出 rk[],临时放在 tmp[] 里。tmp[sa[i]] 应该是单调不降,相等当且仅当 sa[i-1] 和 sa[i] 的两个关键字都相等。这是简单的。
优化 if(ptr==n) break; 第一关键字互不相同,后面的没必要做了。
引理:$height_{rk_{i+1}}\geq height_{rk_i}-1$。简证一下。
记 $sa_{rk_{i+1}-1}=a,sa_{rk_i-1}=b$,那么上面的话翻译一下就是 $\operatorname{lcp}(S[a,n],S[i+1,n])\geq \operatorname{lcp}(S[b,n],S[i,n])-1$。$a'=b+1$ 时等号成立,而真正的 $a$ 只优不劣。
求两子串 $\operatorname{lcp}$:$\operatorname{lcp}(S[sa_i,n],S[sa_j,n])=\min_{k=i+1}^j(height_k)$。把后缀画成 $\mathrm {Trie}$ 看看就明白了。可以使用 ST 表 $O(1)$ 求右边的东西。
***
可能还有一个比较有意义的 trick 是:在字符串上每 $x$ 个位置放一个关键点,每一个长度为 $x$ 的子串会覆盖恰好一个关键点。
## exKMP
终究还是学了这个玩意。感觉这个东西用处真不大,之前需要用 exKMP 的题多少都可以用其他算法做。
记 $S[i]$ 表示 $S$ 的第 $i$ 位,$S[l,r]$ 表示 $S$ 的第 $l$ 位到第 $r$ 位组成的子串。下标以 $0$ 为起始。
记 $z_i$ 为 $|\operatorname{lcp}(S,S[i,n])|$,即 $S$ 和自己的后缀的 lcp 长度。**特别地**,$z_0=0$。~~这显然可以使用 SA 的 height 数组做到单 log 皆大欢喜~~
考虑像 manacher 一样递推求解。记当前找到的右端点最大且是 $S$ 前缀的子串为 $S[p,q]$。换句话说,设当前要计算 $z_i$,则已经有了 $z_0,z_1,\cdots z_{i-1}$。则 $q=\max_{j<i}(j+z_j-1)$,$p$ 为 $q$ 取到最值时对应的 $j$。
如果 $i\leq p$,其落在 $[p,q]$ 里。根据 $[p,q]$ 的性质,$S[0,l]=S[p,q]$,其中 $l=q-p+1$。设 $[0,l]$ 里 $i$ 对应的位置为 $j=i-p$。分讨 $j+z_j$ 有没有捅穿 $[0,l]$。
因为 $[0,l]$ 和 $[p,q]$ 是一样的,所以如果 $j+z_j$ 没捅穿 $[0,l]$,$i+z_i$ 也捅不穿 $[p,q]$,且 $z_i$ 应该正好是 $z_j$。
如果捅穿了,则 $z_i$ 至少是 $p-i+1$。暴力往后找就行。
$i> p$ 和捅穿了没本质区别。都是暴力找。
***
又给了一个 $T$,问对于 $S$ 的所有后缀,其和 $T$ 的 lcp。
可以照葫芦画瓢,记 $ext_i$ 为 $\operatorname{lcp}(T,S[i,n])$。$p,q$ 的定义简单地把上面的 $z$ 替换为 $ext$。
如果 $i\leq p$ 并且没捅穿,同样镜像一下就好,$ext_i=z_j$。
否则暴力找。
***
### [文字列が嫌い](https://www.luogu.com.cn/problem/AT_arc058_d)
记 $f_{i,j}$ 表示考虑前 $i$ 个串,现在拼成的串长度为 $j$ 最优的**字符串**。转移显然:$f_{i,j}\leftarrow f_{i-1,j},f_{i,j}\leftarrow f_{i,j-len_i}+s_i$。$+$ 是字符串拼接。
转移数 $O(nk)$,字符串比较 $O(k)$,这是 $O(nk^2)$ 的,考虑优化。
如果两个串 $f_{i,j_1},f_{i,j_2},\quad(j_1,j_2)$ 最终都可以拼到长度恰好为 $n$(即状态 $(i,j_1)$ 与 $(i,j_2)$ 均“合法”),考虑它们满足什么关系。
如果不管在 $f_{i,j_1}$ 的后面添加什么东西,其字典序都劣于 $f_{i,j_2}$,则 $f_{i,j_1}$ 是完全没用的。如果其不管添加什么东西字典序都更优,$f_{i,j_2}$ 是没用的。
换句话说,定义一个字符串 $S$ 强优于/强劣于另一个字符串 $T$ ,当且仅当存在某一位 $p$,$S[p]<T[p]$ / $S[p]<T[p]$,且 $\forall p'<p,S[p']=T[p']$。则对于某一个 $i$,其所有有用的 $f_{i,j}$ 分不出强优劣关系,即全部为某个串的前缀。
我们维护这个串,再维护每一个有用的 $j$,至少空间看起来能对。再看看现在怎么转移。
记 $i=k-1$ 的“某个串”为 $T$,$i=k$ 的“某个串”为 $T'$,初始 $=T$。从小到大枚举 $k-1$ 处理出来的所有有用的 $j$。
如果发现 $T[0,j-len_i]+S_i$ 强劣于 $T'$,什么都不做。
如果发现 $T[0,j-len_i]+S_i$ 强优于 $T'$,或者 $T'$ 是其前缀,转移并更新 $T'$。
如果发现 $T[0,j-len_i]+S_i$ 是 $T'$ 的前缀,转移但不更新 $T'$。
然后你需要做的就是比较两个字符串的优劣。换句话说就是你需要求 LCP。
考虑 $T'$ 一定是 $T$ 的前缀拼上一个 $S$,实际上你只需要求 $T$ 的后缀和 $S$ 的 LCP,与 $S$ 和自己的 $LCP$ 便可以 $O(1)$ 分讨完成优劣比较。显然这是 exKMP,然后你就可以 $O(nk)$ 了。
细节上还有处理一个状态是不是合法的,这个也可以 $O(nk)$。
## [SAM](https://www.luogu.com.cn/problem/P3804)
SAM 是一个接受给定串所有子串的最小 DFA。从形式上来说,是一个有唯一起点的 DAG,每一条转移边上标有字符,表示从当前状态后拼接特定字符后会到达哪里。
设原串为 $S$,对于一个 $S$ 的子串 $T$,$\operatorname{endpos}(T)$ 为字符串 $T$ 在 $S$ 中匹配到的所有位置的右端点的集合。例如,当 $S=\mathtt{abab}$ 时,$\operatorname{endpos}(\mathtt{ab})=\{2,4\}$。SAM 的节点和不同的 $\operatorname{endpos}$ 构成双射关系。
容易证明:
- $\operatorname{endpos}$ 相同的 $T$ 互为后缀,且长度恰为一个区间。
- 不同的 $\operatorname{endpos}$ 要么互相包含,要么无交。
- 所有的 $\operatorname{endpos}$ 的包含关系构成一棵树。
- 对于一个子串,不断删掉它的最前一个字符,$\operatorname{endpos}$ 在树上会不断跳父亲直到根。
对于 SAM 的一个节点 $p$,除了转移边我们还维护两个值(为方便叙述,下将 $p$ 对应的 $\operatorname{endpos}$ 集合也称为 $\operatorname{endpos}(p)$。
- $\operatorname{len}(p)$ 表示对于所有 $\operatorname{endpos}(T)$ 恰为 $\operatorname{endpos}(p)$ 的 $T$ 中,最长的长度。
- $\operatorname{link}(p)$ 表示所有 $\operatorname{endpos}(q)\supset\operatorname{endpos}(p)$ 的 $q$ 中,$|\operatorname{endpos}(q)|$ 最小的那个。即 $\operatorname{endpos}$ 构成的树上的父亲。
下给出增量构造 SAM 的做法,即给定 $S$ 的 SAM,构造 $S'=S+c$ 的 SAM。其中 $c$ 是一字符。记 SAM 上一条边为 $p\stackrel{c}{\longrightarrow} \delta(p,c)$,$S$ 本身在旧 SAM 上到达的位置为 $lst$。
1. $S'$ 必到达一个全新的节点,故直接新建节点 $p$ 表示 $S'$ 到达的节点,$\operatorname{len}(S')\gets\operatorname{len}(lst)+1$。
2. 若 $\delta(lst,c)$ 不存在,则 $lst$ 上的所有子串都没有后接过 $c$,直接将 $\delta(lst,c)$ 定为 $p$ 即可。然后处理 $S$ 的其它后缀后接 $c$ 的情况。具体地,直接让 $lst'\gets\operatorname{link}(lst)$,然后重复此步骤即可。
3. 现在我们不需要建新边了,而是用剩下的东西更新 $\operatorname{link}(p)$。设现在 $lst$ 为 $t$,$\delta(t,c)$ 为 $q$,分讨:
1. $t$ 不存在。之前都没有拼上一个 $c$ 的情况,直接 $\operatorname{link}(p)\gets root$ 即可。
2. $t$ 存在,且 $\operatorname{len}(t)+1=\operatorname{len}(q)$。此时,$q$ 上的子串恰好就是 $t$ 上的所有子串拼上一个 $c$,直接用 $q$ 更新,$\operatorname{link}(p)\gets q$ 即可。
3. $t$ 存在,且 $\operatorname{len}(t)+1<\operatorname{len}(q)$。此时 $q$ 维护的子串中有一些过于长,并不是 $S'$ 的后缀。我们需要分裂出去一些。
设 $q'$ 为分裂出去的节点。它应该分走长度 $q$ 中长度较小的部分。即,$\operatorname{len}(q')\gets \operatorname{len}(t)+1$,$\operatorname{link}(q')\gets \operatorname{link}(q)$,然后 $\operatorname{link}(q)\gets q'$。这样便分出来了恰好是 $S'$ 的后缀的部分,直接让 $\operatorname{link}(p)\gets q'$ 即可。
原先的一些连边也需要修改。$\delta(t,c),\delta(\operatorname{link}(t),c),\delta(\operatorname{link}^2(t),c),\dotsc$ 均需要改为 $q'$。
4. 最后 $lst\gets p$ 即可。