learn-tech/专栏/动态规划面试宝典/09子序列问题:详解重要的一大类动态规划问题.md
2024-10-16 06:37:41 +08:00

317 lines
18 KiB
Markdown
Raw Blame History

This file contains ambiguous Unicode characters

This file contains Unicode characters that might be confused with other characters. If you think that this is intentional, you can safely ignore this warning. Use the Escape button to reveal them.

因收到Google相关通知网站将会择期关闭。相关通知内容
09 子序列问题:详解重要的一大类动态规划问题
你好,我是卢誉声。
我们曾在上一课中提到,有两类重要的动态规划问题需要掌握,其中一个是子数组问题,另一个是子序列问题。今天,我们将深入讲解动态规划中的另一个经典问题,即子序列问题。
相较于子数组问题而言,子序列问题要更复杂一些,这是由子序列的特性决定的。不过有一点比较类似,那就是我们仍然需要小心定义备忘录结构和其对应值的含义。
你应该注意到了,我们把子数组问题和子序列问题放在一块儿讲,这意味着它们之间是有联系的。因此,在开始今天的课程前,我提出这样一个问题:子数组和子序列问题在求解时有什么异同呢?
接下来就让我们带着这个问题,开始今天的学习之旅吧。
什么是子序列问题?
类似的,我们要明确一下什么是动态规划中的子序列问题。首先,相较于子数组问题而言,子序列问题要更复杂一些。这是因为,子数组问题是连续的,而子序列问题是不连续的。比如说字符串 “I wanna keep a giraffe in my backyard” 的一种子序列就可以是 “Igbackd”。
因此,你可以看到,子序列不再要求答案是一个连续的串。即便用穷举的思路求解问题,我们都不一定知道该从何下手解决。特别的,当涉及到两个数组或字符串作为输入的情况时,如果没有处理经验,真的不容易想到解法。
其次一个字符串的子序列是由原字符串在不改变字符的相对顺序的情况下删除某些字符也可以不删除任何字符后组成的新字符串。举个例子“ace” 是 “abcde” 的子序列,但是 “aec” 就不是 “abcde” 的子序列。
再次,如果一个问题涉及以下特征,那么它大概率需要使用动态规划来进行求解:
题目涉及子序列;
问题符合动归典型特征,特别是求“最”优解问题(最大值和最小值);
题目的答案是题设数组的子序列,或者来源于子序列。
其实,一旦技术面试问题涉及子序列,你都几乎不需要考虑动态规划以外的解法了。为什么这么说呢?你考虑一下,一个数组或字符串子序列的组合数肯定是指数级别的,如果想依赖纯粹的穷举来进行求解,从时间复杂度上看,几乎没有求解的可能性。
所以啊我们虽然说动态规划中的子序列问题是经典动归问题但它不同于0-1背包这种经典问题事实上它并不好解决。不过我们都学到这了你应该坚信再难的动归问题都应该有模板可以应对。
没错,今天就让我们用两个经典的案例,来找出解决子序列问题的思路。
最长回文子序列
如果问题含有最长子序列这样的提法,那么它一定是动态规划问题。现在,先让我们一起来看一看最长“回文”子序列问题的描述。
问题:给定一个字符串 s ,找到其中最长的回文子序列,并返回该序列的长度。可以假设 s 的最大长度为 1000。
示例1
输入:"asssasms"
输出5
解释:一个可能的最长回文子序列为 "sssss",另一种可能的答案是 "asssa"。
示例2
输入:"abba"
输出4
解释:有三个子序列满足题设要求:"aa"、"bb" 和 "abba",因此答案为 4。
算法问题分析
还记得在解决回文子串时给出的那个简单例子么?我们当时有提到过 “子数组问题的特征是答案也必须是连续的”。显然,子序列问题的特征发生了变化,它的答案可以是连续的,也可以是不连续的。
我现在输入的字符串是 “abca”那么 “aca” 是原问题的答案吗在子数组问题中不是但现在“aca” 是原问题的答案了。
我在前面曾提到过涉及子序列的问题基本上全部都是动态规划问题。那么这个问题符合动态规划问题的特征吗?我们来看一下:
重叠子问题:在穷举的过程中肯定存在重复计算的问题。这是因为各种排列组合间肯定存在重叠子问题的情况;
无后效性:对不是最长的回文子序列来说,它一定被包含在更长的回文子序列中。而更长的回文子序列不会包含在较短的回文子序列中,依赖是单向的;
最优子结构:对整个字符串,其最长的回文子序列肯定包含了更短长度字符串中的回文子序列,因此子问题可以递归求解。
既然是动归问题,接下来我们看看该如何写出状态转移方程吧。
写出状态转移方程
首先,我们先来确定初始化状态。从问题的示例就可以看出(当然也很容易想到),单个字符一定是它自己的回文。
接着,再来确定状态参数。跟回文子串问题类似,我们需要确定子序列的位置:一个是起始位置,另一个是结束位置。在算法的执行过程中,起始和结束位置是变化的,因此它们是状态参数。
既然有两个状态,我们用二维数组来定义备忘录。设 \(DP\[i\]\[j\]\),其对应的值是字符串 \(i…j\) 中最长回文子序列的长度。你可能会问,为何要这样设计备忘录的定义呢?我们曾在讲解子数组问题时讨论了 “备忘录定义对编写代码的影响”,这里的影响其实并不直接是代码,主要影响的是状态转移方程的设计(因为有了状态转移方程,才能编写代码嘛)。
现在让我们回到动态规划问题的本质问题上来。动态规划是数学归纳法的一种很好的体现,即如何从已知的答案推导出未知的部分。回到最长回文子序列问题上来,如果知道了 \(s\[i+1 … j-1\]\) 中最长回文子序列的长度(即 \(DP\[i+1\]\[j-1\]\)),我们能通过它推导出 \(s\[i … j\]\) 中最长回文子序列的长度(即 \(DP\[i\]\[j\]\))吗?
根据以上决策示意图,我们显然可以通过 \(DP\[i+1\]\[j-1\]\) 求出 \(DP\[i\]\[j\]\)。这是因为状态转移是连续的,我们可以通过向左移动一位或向右移动一位,得到更大规模子问题的答案。
那么让状态转移的决策是什么呢?其实这里的决策跟回文子串问题类似,当前子问题的答案就是通过前面的子问题 当前的决策推导出来的。
而当前的决策就是:计算出向子问题的两边分别扩充一个元素后得到的答案。你可以参考示意图来更好地理解这个状态转移过程。
一切就绪了,现在就可以给出回文子串问题的状态转移方程了。我们仍然把字符串当作数组来访问,并考虑当 \(s\[i\] == s\[j\]\) 和 \(s\[i\] != s\[j\]\) 两种情况进行讨论:
如果 \(s\[i\] == s\[j\]\)(示意图是相等的),那么 \(DP\[i\]\[j\] = 2 + DP\[i+1\]\[j-1\]\)
如果 \(s\[i\] != s\[j\]\),就意味着 \(s\[i\]\) 和 \(s\[j\]\) 是不可能同时出现在 \(s\[i … j\]\) 的最⻓回文子序列中的。这时我们该怎么做?这里需要进一步作出决策。
既然 \(s\[i\] != s\[j\]\),我们可以考虑把 \(s\[i\]\) 和 \(s\[j\]\) 分别放入 \(s\[i+1 … j-1\]\) 中试试这样就会产生两个子状态其中状态A\(s\[i … j-1\]\)状态B\(s\[i+1 … j\]\)。接着,再看看哪个子串产生的回文子序列更⻓,即 max(状态A, 状态B)。
这个过程可以用以上示意图进行描述。在示意图中状态A\(DP\[0\]\[4\] = 5\)状态B\(DP\[1\]\[5\] = 4\)。因此,这里通过决策后得到的状态应该是 max(状态A, 状态B) = 5。
\[DP(i, j)=\\left\\{\\begin{array}{c}-
2 + DP\[i+1\]\[j-1\],\\ s\[i\]==s\[j\]\\\\\\-
max(DP\[i+1\]\[j\], DP\[i\]\[j-1\]),\\ s\[i\] \\ne s\[j\]-
\\end{array}\\right.\]
编写代码进行求解
所有先决条件都解决了,现在我们来看一下如何用动归来求解此问题,我直接给出代码。
Java 实现:
int getLongestPalindromeSubseq(String s) {
int n = s.length(); if (0 == n) return 0;
int[][] dp = new int[n][n];
for (int[] row : dp) { Arrays.fill(row, 0); }
for (int i = 0; i < n; i++) dp[i][i] = 1; // 初始化状态
for (int i = n-1; i >= 0; i--) {
for (int j = i+1; j < n; j++) {
if (s.charAt(i)==s.charAt(j)) {
dp[i][j] = 2 + dp[i+1][j-1];
} else {
dp[i][j] = Math.max(dp[i+1][j], dp[i][j-1]); // 作出进一步决策
}
}
}
return dp[0][n-1]; // 输出答案
}
C++ 实现
int GetLongestPalindromeSubseq(string s) {
int n = static_cast<int>(s.size());
if (0 == n) return 0;
int dp[n][n]; memset(dp, 0, sizeof(dp));
for (int i = 0; i < n; i++) dp[i][i] = 1; // 初始化状态
for (int i = n-1; i >= 0; i--) {
for (int j = i+1; j < n; j++) {
if (s[i]==s[j]) {
dp[i][j] = 2 + dp[i+1][j-1];
} else {
dp[i][j] = max(dp[i+1][j], dp[i][j-1]); // 作出进一步决策
}
}
}
return dp[0][n-1]; // 输出答案
}
在代码实现中我们先进行了初始化状态的操作将备忘录初始化为全 0 编程习惯)。此外单个字符一定是它自己的回文因此备忘录中的对角线都是 1
除此之外你有没有发现这里对字符串迭代的顺序作了特别处理没错这是刻意为之的为什么我们需要这样迭代字符串呢这就涉及到了动态规划的计算方向问题了
这是我们第一次在专栏中提出计算方向的概念这是彻底理解动态规划问题的重中之重如果你仔细阅读了之前课程中的状态转移图你就会发现我曾多次在图中用红色的箭头标出状态转移的方向
事实上那就是计算方向了只不过对于我们之前遇到的问题来说都是从左上到右下进行计算的
对于回文子序列问题来说根据备忘录的定义由于我们最终需要的答案存放在 \(DP\[0\]\[n-1\]\)因此需要从最右下角反向推导\(DP\[i\]\[j\]\) 需要的是其左侧 \(DP\[i\]\[j-1\]\)左下角 \(DP\[i+1\]\[j-1\]\) 以及正下方 \(DP\[i+1\]\[j\]\) 的值来满足上述状态转移方程
按照图片所展示的\(DP\[0\]\[7\]\) 是根据 \(DP\[0\]\[6\]\)\(DP\[1\]\[6\]\) \(DP\[1\]\[7\]\) 推导出来的
当前子问题的计算需要依赖于哪些更小的子问题推导出来呢寻找这个线索你应该能够找出备忘录上的计算方向
如果你还没有完全理解计算方向这个问题也不需要担心在后续的课程中我们还会遇到这个问题而且还有专题去彻底讲清楚计算方向这个概念
最长公共子序列
刚才我们有提到过当涉及到两个数组或字符串作为输入的情况时问题会变得比较复杂而最长公共子序列Longest Common SubsequenceLCS问题就需要从两个字符串中寻找公共子序列让我们来看看这个问题的描述
问题给定两个字符串 \(text1\) \(text2\)返回这两个字符串的最长公共子序列的长度若这两个字符串没有公共子序列则返回 0其中
1 text1.length 1000
1 text2.length 1000
输入的字符串只含有小写英文字符
示例1
输入text1 = "abcde", text2 = "ade"
输出3
解释最长公共子序列是 "ade"它的长度为 3
示例2:
输入text1 = "abc", text2 = "def"
输出0
解释显然两个字符串没有公共子序列返回 0
算法问题分析
一般来说在处理多个字符串的动态规划问题时如果用数组作为备忘录的基本数据结构那么它的维度则跟字符串的个数是线性相关的即有几个字符串待解决我们就创建几维的数组当然也有例外有些问题可能是将多个字符串进行合并然后达到降维的目的
一个数组或字符串子序列的组合数肯定是指数级别的如果想依赖纯粹的穷举来进行求解从时间复杂度上看几乎没有求解的可能性因此我们几乎可以武断地判断该问题需使用动态规划来进行求解
你可以根据我们多次提到的判断方法来判断该问题是否满足重叠子问题无后效性和最优子结构这几个特征然后再接着往下看
在这个问题中我们需要创建一个二维数组作为我们的备忘录来存储中间计算的状态既然已经确定了是二维数组那么我们该如何理解备忘录的定义呢
由于这个问题较为复杂需要一些技巧因此我在这里先给出备忘录的定义解完题目之后我们再倒回来理解为何要这样设计
写出状态转移方程
现在我直接给出最长公共子序列问题的备忘录定义\(DP\[i\]\[j\]\) 表示的是 \(text1\[0 i\]\) \(text2\[0 j\]\) 的最长公共子序列的长度
如果我们以示例 1 中的输入作为例子就可以画出备忘录
其中红色箭头展示了状态转移的计算方向从图中可以得知\(DP\[2\]\[4\] = 2\),其含义是 ad”( \(text2\[0 2\]\) abcd”( \(text1\[0 4\]\)的最长公共子序列的长度\(DP\[3\]\[5\] = 3\) ade”( \(text2\[0 3\]\) abcde”( \(text1\[0 5\]\)的最长公共子序列的长度即原问题的答案
通过上图的展示你可能会产生一个疑问那就是为何要设计一个空字符作为计算开始的位置这其实是初始化状态的一部分当两个字符的其中一个为空串或同时为空串时原问题的答案肯定是 0显然一个字符串与空串的公共子序列肯定是空的与此同时这样的设计还能让真正的字符串迭代拥有能够推导计算的初始化值
接着我们再来看状态参数根据前面的描述我们用变量 \(i\) 和变量 \(j\) 描述了整个问题的求解空间备忘录是基于二维数组构建的因此我们的状态参数就是变量 \(i\) 和变量 \(j\)
最后我们该如何决策状态的转移对于 \(text1\) \(text2\) 这两个字符串中的每个字符 \(text1\[i\]\) \(text2\[j\]\)其实只有两种选择
\(text1\[i-1\] == text2\[j-1\]\)即当前遍历的两个字符在最长公共子序列中此时 \(DP\[i\]\[j\] = 1 + DP\[i-1\]\[j-1\]\)
\(text1\[i-1\] != text2\[j-1\]\)即当前遍历的两个字符至少有一个不在最长公共子序列中仿照最长回文子序列的处理方法由于两个字符至少有一个不在因此我们需要丢弃一个因此在不等的情况下需要进一步作出决策
由于我们要求的是最长公共子序列因此哪个子问题的答案比较长就留下谁\(max(DP\[i-1\]\[j\]\), \(DP\[i\]\[j-1\]\))。通过以上线索我们得出了求解该问题的状态转移方程
\[DP(i, j)=\\left\\{\\begin{array}{c}-
dp\[i\]\[j\] = 1 + dp\[i-1\]\[j-1\],\\ text1\[i\]==text2\[j\]\\\\\\-
max(dp\[i-1\]\[j\], dp\[i\]\[j-1\]),\\ text1\[i\] \\ne text2\[j\]-
\\end{array}\\right.\]
编写代码进行求解
我直接给出状态转移方程对应的求解代码
Java 实现
int getLongestCommonSubsequence(String text1, String text2) {
int m = text1.length(), n = text2.length();
int[][] dp = new int[m + 1][n + 1];
for (int[] row: dp) { Arrays.fill(row, 0); }
for (int j = 1; j <= n; j++) {
for (int i = 1; i <= m; i++) {
if (text2.charAt(j - 1) == text1.charAt(i - 1)) {
dp[i][j] = dp[i - 1][j - 1] + 1;
} else {
dp[i][j] = Math.max(dp[i - 1][j], dp[i][j - 1]);
}
}
}
return dp[m][n];
}
C++ 实现
int GetLongestCommonSubsequence(string text1, string text2) {
int m = text1.size(), n = text2.size();
int dp[m+1][n+1]; memset(dp, 0, sizeof(dp)); // 多一行一列为了 i, j=1 时有 base value
for (int j = 1; j <= n; j++) {
for (int i = 1; i <= m; i++) {
if (text2[j-1]==text1[i-1]) {
dp[i][j] = dp[i-1][j-1] + 1;
} else {
dp[i][j] = max(dp[i-1][j], dp[i][j-1]);
}
}
}
return dp[m][n];
}
在代码中我们先进行了初始化状态的操作将备忘录初始化为全 0 编程习惯)。
接着我们分别遍历两个字符串外层循环遍历第一个字符串 1 开始到 n第一个字符串长度为止内层循环遍历第二个字符串 1 开始到 m第二个字符串长度为止
每次先比较一下两个字符串的当前字符
如果当前字符相同那么说明当前遍历的两个字符均在最长公共子序列中因此需要将当前序列长度加 1由于之前的序列长度在 \(dp\[i-1\]\[j-1\]\)因此结果是 \(dp\[i-1\]\[j-1\] + 1\)
如果当前字符不同我们需要从之前的序列中选取一个最大的也就是从 \(dp\[i-1\]\[j\]\) \(dp\[i\]\[j-1\]\) 中取最大值
求解结束后原问题的答案存储在 \(dp\[m\]\[n\]\)
课程总结
动态规划领域中所谓子序列问题就是从给定字符序列中随意地不一定连续去掉若干个字符可能一个也不去掉后所形成的字符序列而对子数组问题则是从给定的序列中提取连续的序列
所以子序列问题往往比子数组问题要复杂一些因为求解的子问题可能不是连续的字符串但是对于动态规划来说处理问题的思路往往是不变的其实只是换一种思路去寻找子问题罢了
从我们分析的两个问题中基本可以看出子序列问题的处理模板在子序列问题中由于暴力求解的代价更高因此动态规划带来的价值也就更高对于全面总结的处理子序列问题的动归套路我会在下一个模块中进行讲解
课后思考
对于这一课讲解的最长公共子序列问题我们对最直接的解决方案进行了讲解但实际上代码还可以作出进一步优化请你思考一下如何优化这个方案的时间复杂度和空间复杂度并给出改进后的算法代码
欢迎留言和我分享你的想法我们一同交流