动态规划法及其优化

article/2025/9/29 21:35:10

在很多问题中,动态规划算法是我们的最优选择,比起递归算法,动态规划算法的时间复杂度和空间复杂度都更加优越,可以处理的数据规模更大。但是,动态优化算法的时间复杂度为O(N*V),也就是说,当需要处理的数据规模较大时,使用动态规划算法也存在超时的可能性,因此,我们需要在动态规划的基础上做出优化。

动态规划的优化方法包括:

1. 使用空间换时间:将中间结果缓存在数组中,避免重复计算。

2. 无后效性:假设问题可以分解为若干子问题,某些子问题的解可以不受其他子问题的解的影响,则可以去掉一些不必要的计算。

3. 剪枝:在搜索的过程中,利用一些条件限制最优解的范围,过滤掉不需要搜索的部分,提高性能。

4. 动态规划与贪心算法:当问题可以用贪心算法解决时,应优先使用贪心算法,它的时间复杂度要小于动态规划算法。

5. 构建最优解:利用最优子结构可以减少搜索的规模,进而提高搜索效率。

样例展示

下面用一个具体的样例记录以下动态优化的过程:

题目描述:

代码段:

# 解决0-1背包问题
def knapsack(N, V, w, v):# 初始化动态规划表dp_table = [[0 for j in range(V + 1)] for i in range(N + 1)]# 使用动态规划求解for i in range(1, N + 1):for j in range(1, V + 1):# 如果第i件物品的重量大于背包容量j,则不装入背包# 由于weight和value数组下标都是从0开始,故注意第i个物品的重量为w[i-1],价值为v[i-1]if w[i - 1] > j:dp_table[i][j] = dp_table[i - 1][j]else:dp_table[i][j] = max(dp_table[i - 1][j], dp_table[i - 1][j - w[i - 1]] + v[i - 1])# 返回最大价值return dp_table[N][V]if __name__ == '__main__':#N:表示题目中物品的总类别#count:表明题目中所有物品的总数量N, V = map(int, input().split())w = []v = []count = 0for i in range(N):wi, vi, si = map(int, input().split())count += si# 物品数量可以大于1,因此循环si次将其加入物品for _ in range(si):w.append(wi)v.append(vi)print(knapsack(count, V, w, v))

这段代码在题目规定的时间内完成数据的计算,得到正确的结果。

题目升级:

显然,和上面的题目相比,题干没有任何的变化,只是处理数据的规模变大了,而在处理该规模的数据时,上面的代码显示超时,也就是说,上述动态规划算法需要优化。

优化方法:

  1. 空间复杂度优化

# 解决0-1背包问题
def knapsack(N, V, w, v):#对原始方法进行优化#原始方法使用的是二维数组#当物品数量和背包容量较大时,空间复杂度和时间复杂度为O(N*M),很容易就会导致运行超时#这意味着我们可以从动态规划表上去优化这个问题#根据背包容量声明意味数组db = [0 for i in range (V+1)]#for循环for i in range(N):#内层for循环为递减循环,且不会遍历到w[i]-1for j in range(V,w[i]-1,-1):db[j] = max(db[j],db[j-w[i]]+v[i])return db[V]if __name__ == '__main__':#N:表示题目中物品的总类别#count:表明题目中所有物品的总数量N, V = map(int, input().split())w = []v = []count = 0for i in range(N):wi, vi, si = map(int, input().split())count += si# 物品数量可以大于1,因此循环si次将其加入物品for _ in range(si):w.append(wi)v.append(vi)print(knapsack(count, V, w, v))

上述代码将状态转移表由二维数组转换为一维数组,降低了代码对空间复杂度的要求,但是不难看出,虽然设置了一定的循环条件,代码的时间复杂度仍然是O(N*M),也就是,运行该题目仍然会超时。问题并没有解决。

两段代码均只能通过13组数据,因此,还需要在运行时间上进行优化。

  1. 时间复杂度优化

如何能够降低时间复杂度,我首先想到的是剪纸,通过一定的条件限制,比如二分法,将时间复杂度降维O(NlogM)。

# 解决0-1背包问题
#利用二分法来减少时间复杂度
#首先的前提是输入的物品重量要有序排列,不然二分法进行剪枝没有意义#1.读取输入数据,需要对物品重量排序,但是又要保证质量与价值之间的对应关系,用一定的数据结构存储最佳
#2.对物品依照质量进行排序
#3.采用二分法实现时间复杂度的降低,编写Knapsack函数#这种优化时间复杂度的方法确实存在,但是在该问题中,如果需要用到每一次考察物品之后背包的状态,那么这种选择性
#更新状态的方式必然是错误的,因为没有记录每一步更新之后的所有可能状态 ,导致再下一步的状态再不完全的基础上
#获得错误的下一转移状态,最终只会得到一个错误的输出
def knapsack(N, V, w, v):#使用单维数组优化db = [0 for i in range (V+1)]#for循环for i in range(N):# 使用二分搜索算法优化left, right = 0, Vwhile left <= right:mid = (left + right) // 2if mid < w[i]:left = mid + 1else:right = mid - 1db[mid] = max(db[mid],db[mid-w[i]]+v[i])print(db)return db[V]if __name__ == '__main__':#N:表示题目中物品的总类别#count:表明题目中所有物品的总数量N, V = map(int, input().split())w = []v = []count = 0for i in range(N):wi, vi, si = map(int, input().split())count += si# 物品数量可以大于1,因此循环si次将其加入物品for _ in range(si):w.append(wi)v.append(vi)print(knapsack(count, V, w, v))

代码运行结果:

通过运行结果可以看出,这种方法错误。


标记+递归法代码:

def knapsack(N, V, w, v):#使用二进制优化的方法#因为是0-1背包,每个物品只能选择一次#所以每个物品都可以看做一个二进制数#声明变量maxval存储最大价值maxval = 0 #声明变量mask存储选择的物品mask = 0 #for循环#i为index,主要用于定位数组for i in range(N):#使用按位与运算符&if (mask & (1 << i)) == 0:#使用按位或运算符|if V >= w[i]:maxval = max(maxval, v[i] + knapsack(N, V - w[i], w, v))mask |= (1 << i)return maxvalif __name__ == '__main__':#N:表示题目中物品的总类别#count:表明题目中所有物品的总数量N, V = map(int, input().split())w = []v = []count = 0for i in range(N):wi, vi, si = map(int, input().split())count += si# 物品数量可以大于1,因此循环si次将其加入物品for _ in range(si):w.append(wi)v.append(vi)print(knapsack(count, V, w, v))

这段代码表面上看上去和普通的递归法极为相似,但是实际上却有很大的不同。

普通递归法代码:

#读取物品的数量以及背包的最大容量
N,V = map(int,input().split())#建立数组存储物品的重量及价值
w=[0]
v=[0]for i in range(N):w_i,v_i = map(int,input().split())w.append(w_i)v.append(v_i)def knapsack(n,cap):#设置递归结束条件if n == 0:return 0#当物品的重量大于背包容量时if w[n] > cap:return knapsack(n-1,cap)return max(knapsack(n-1,cap),knapsack(n-1,cap-w[n])+v[n])print(knapsack(N,V))

不同之处的分析:

普通递归法:在没有if条件语句的限制下,递归的搜索空间为。加上if语句,可以减少部分分枝,但是当背包容量较大时,if语句所起的限制作用有限,时间复杂度趋近于O()

标记+递归:二进制机制用于标记每个物品状态,放入或者未放入背包。这种情况下,递归的搜索空间被缩小为n!。时间复杂度大大减小。

实质上,这两种算法的区别就是深度优先遍历和广度优先遍历的区别。

但是,标记+递归的时间复杂度还是过高,无法通过题目要求。


二进制+动态规划:

#读取第一行输入,n为输入行数(不是物品总数),w为背包容量
n, m = map(int, input().split())#v物品重量,w表示价值
v, w = [], []#统计物品数量
cnt = 0for i in range(1, n + 1):#读取输入数据a, b, s = map(int, input().split())k = 1#将同样的物品按照2的指数关系合并成一个更大的物品,主要用于减少物品的数量#关于我自己的理解为什么可以直接将多个小的物品合成一个大的物品放入存储队列#我开始的疑惑是假设这样一个情景,存在一个极大的物品,将其放入背包后,还剩一点空间可以放入部分小物品#但是由于在物品存入队列时,我们直接将小物品合成了大的物品放入,万一存在一种尴尬情况,即可以放入单个小#物品,但是不能放入较大的物品,那岂不是达不到价值最优#实际上,我假设的这种情况是不存在的,因为在合成物品时,合成的物品是由小到大合并的,所以当有n个小物品时#合成的顺序一定是a,2a,4a,8a...,这些合成后的小物品通过各种方式的组合,可以表示a~na之间的任何一个总质量while k <= s:cnt += 1v.append(a*k)w.append(b*k)s -= kk *= 2if s > 0:cnt += 1v.append(a * s)w.append(b * s)n = cnt#一维数组表示状态转移表
f = [0] * (m + 1)
#n经过处理之后,存储队列中总的物品数量
for i in range(1, n + 1):#m 背包总容量for j in range(m, v[i - 1] - 1, -1):f[j] = max(f[j], f[j - v[i - 1]] + w[i - 1])print(f[m])

该方法通过测试。

总结:对算法进行优化时,需要综合考虑时间和空间复杂度。


http://chatgpt.dhexx.cn/article/1GndGN7d.shtml

相关文章

算法设计与分析之动态规划法

文章目录 前言一、动态规划法概述二、动态规划法设计思想三、动态规划法的基本要素四、动态规划算法的设计步骤五、动态规划法与分治法六、动态规划法与贪心法七、动态规划法示例总结 前言 大家好&#xff0c;我是一只勤勤恳恳的程序猿。本篇文章小猿将跟您分享算法设计与分析中…

算法-动态规划法

动态规划是在20世纪50年代由美国数学家贝尔曼为研究最优控制问题而提出的&#xff0c;当该方法在应用数学中的价值被大家认同以后&#xff0c;在计算机学界&#xff0c;动态规划法成为一种通用的算法设计技术用来求解多阶段决策最优化问题。 所以&#xff0c;同学们&#xff0…

动态规划算法

一 动态规划算法 动态规划(Dynamic Programming)算法的核心思想是&#xff1a;将大问题划分为小问题进行解决&#xff0c;从而一步步获取最优解的处理算法。 动态规划算法与分治算法类似。其基本思想也是将待求解问题分解成若干个子问题&#xff0c;先求解子问题&#xff0c;…

经典中的经典算法:动态规划(详细解释,从入门到实践,逐步讲解)

动态规划的重要性就不多说,直接进入正题 首先,我们看一下官方定义:定义: 动态规划算法是通过拆分问题&#xff0c;定义问题状态和状态之间的关系&#xff0c;使得问题能够以递推&#xff08;或者说分治&#xff09;的方式去解决。 动态规划算法的基本思想与分治法类似&#xf…

目标检测中的多尺度特征结合方式

目录 简述 解构物体检测各个阶段 FPN的演进 1&#xff09;无融合 2&#xff09;自上而下单向融合 a&#xff09;Faster/Master/Cascade RCNN中的FPN b&#xff09;RetinaNet中的FPN c&#xff09;Yolov3中的FPN 3&#xff09;简单双向融合 4&#xff09;复杂的双向融…

总结-CNN中的目标多尺度处理

Fly-AI竞赛服务平台 flyai.com 在开始学习之前推荐大家可以多在 FlyAI竞赛服务平台多参加训练和竞赛&#xff0c;以此来提升自己的能力。FlyAI是为AI开发者提供数据竞赛并支持GPU离线训练的一站式服务平台。每周免费提供项目开源算法样例&#xff0c;支持算法能力变现以及快…

【MFEN:轻量级多尺度特征提取:SR网络】

MFEN: Lightweight multi-scale feature extraction super-resolution network in embedded system &#xff08;MFEN&#xff1a;嵌入式轻量级多尺度特征提取超分辨率网络&#xff09; 深度卷积神经网络&#xff08;CNN&#xff09;在超分辨率&#xff08;SR&#xff09;方面…

深度学习笔记---多尺度网络结构归类总结

目录 1.什么是图像金字塔 1.1 高斯金字塔 ( Gaussian pyramid): 1.2 拉普拉斯金字塔&#xff08;Laplacian pyramid&#xff09; 1.3 DOG金字塔 2. 多尺度网络&#xff08;MTCNN&#xff09; 2.1 多尺度输入网络 2.2 多尺度特征融合网络 2.2.1 并行多分支网络 2.2.2 串行…

【边缘注意:深度多尺度特征】

Learning a Deep Multi-Scale Feature Ensemble and an Edge-Attention Guidance for Image Fusion &#xff08;学习深度多尺度特征集成和图像融合的边缘注意指南&#xff09; 在本文中&#xff0c;我们提出了一种用于红外和可见光图像融合的深度网络&#xff0c;该网络将具…

多尺度特征的提取

1、图像金字塔 将图片进行不同尺度的缩放&#xff0c;得到图像金字塔&#xff0c;然后对每层图片提取不同尺度的特征&#xff0c;得到特征图。一幅图像的金字塔是一系列以金字塔形状排列的分辨率逐步降低&#xff0c;且来源于同一张原始图的图像集合。其通过梯次向下采样获得&…

MSRN(多尺度超分辨率重建)

目前的研究倾向于使用更深层次的卷积神经网络来提高性能。然而,盲目增加网络深度不能有效改善网络。更糟糕的是,随着网络深度的增加,训练过程中出现了更多的问题,需要更多的训练技巧。在本文中,我们提出了一种新颖的多尺度残差网络 (MSRN) 来充分利用图像特征,该网络优于…

【multi_scale】多尺度训练——目标检测训练trick

文章目录 1 多尺度训练的介绍2 代码解析3 感谢链接 1 多尺度训练的介绍 多尺度训练对全卷积网络有效&#xff0c;在训练时&#xff0c;每隔一定的 iterations&#xff0c;在一定尺寸范围内&#xff0c;随机选取一种 img_size 进行训练。通过对不同尺度的图像进行训练&#xff…

“多尺度”目标检测问题

一、“多尺度”目标检测问题简介 在目标检测任务中,被测目标的大小经常是不固定的,自动驾驶相关检测任务可能要同时检测大卡车与小狗;工业质检相关检测任务可能要同时检测布料的大面积撕裂与小穿孔;医疗病灶检测任务可能要同时检测大小不一的病灶。在被测物体尺度相差极大…

图像多尺度技术

1197 多尺度图像技术也叫做多分辨率技术&#xff08;MRA&#xff09;&#xff0c;指对图像采用多尺度的表达&#xff0c;并且在不同尺度下分别进行处理。这样做的理由是很多情况下在一种尺度中不容易看清的或者获取的特性在另外的某种尺度下就很容易发现或者是提取。所以多尺度…

目标检测中多尺度:特征金字塔FPN_Feature Pyramid Networks for Object Detection

原始内容来源于&#xff1a; https://blog.csdn.net/cdknight_happy/article/details/100528127 https://blog.csdn.net/WZZ18191171661/article/details/79494534 包含理解&#xff01; 参考文献&#xff1a;https://arxiv.org/abs/1612.03144 代码实现&#xff1a;http://ww…

MViTv2 多尺度视觉Transformer

虽然VIT&#xff08;vision transformer&#xff09;模型提出后&#xff0c;Transformer在CV领域一路攻城拔寨&#xff0c;不断刷新由自己创下的记录&#xff0c;但VIT文章中所说明的视觉领域transformer很大程度上受transformer模型平方复杂度的限制而在大尺度图像上表现不佳的…

综述:目标检测中的多尺度检测方法

传统卷积网络通常采用从上到下的单行结构。对于大物体而言&#xff0c;其语义信息将出现在较深的特征图中&#xff1b;而对于小物体&#xff0c;其语义信息出现在较浅的特征图中&#xff0c;随着网络的加深&#xff0c;其细节信息可能会完全消失。 多尺度检测也是当今物体检测领…

【笔记】多尺度方法

1.定义 2.常用架构 2.1多尺度输入网络 2.2 多尺度特征融合网络 (1) 并行多分支结构 (2) 串行多分支结构 2.3 多尺度特征预测融合 2.4 多尺度特征和预测融合 3.具体方法 3.1 SNIP 3.2 SNIPER&#xff08;SNIP的改进&#xff09; 3.3 SSD 3.4 TridentNet&#xff08;…

多尺度多目标检测之金字塔

在日常学习工作中&#xff0c;经常会碰到一个概念&#xff0c;那就是金字塔&#xff08;pyramid&#xff09;&#xff0c;本文就该概念进行一定的阐述&#xff0c;具体如下&#xff1a; &#xff08;1&#xff09;图像金字塔 图像金字塔结构&#xff0c;即对图像进行一定比例…

多尺度结构元素形态学边缘检测算法的研究-含Matlab代码

目录 一、引言二、数学形态学理论概述三、实验验证四、参考文献五、Matlab代码获取 一、引言 使用数字图像处理技术来解决计算机视觉、人工智能、生物遥感器视觉等领域所涉及到的图像问题时&#xff0c;最重要、最关键的一步是提取出图像中最有效、最有用的特征信息。而图像边…