文章/答案/技术大牛

发布

社区首页 >问答首页 >如何在使用Q-Learning时使用theano计算神经网络的梯度

问如何在使用Q-Learning时使用theano计算神经网络的梯度
EN

Stack Overflow用户

提问于 2016-04-01 20:09:03

回答 1查看 126关注 0票数 0

我正在尝试使用一个标准的全连接神经网络作为Q-Learning中动作值的基础。我使用http://deeplearning.net/tutorial/mlp.html#mlp作为参考，特别是这一行：

gparams = [T.grad(cost, param) for param in classifier.params]

我想使用Q-Learning策略控制方法(如http://webdocs.cs.ualberta.ca/~sutton/book/ebook/node65.html中所述)计算与最后一个操作相关联的输出单元的误差，并将其他输出误差设置为零。

如何使用Theano的grad函数将误差反向传播到神经网络的其余部分？

neural-network

theano

reinforcement-learning

向量数据库

传统知识库搭建耗时费力？腾讯云向量数据库 + Dify混合检索，轻松实现高效知识管理与精准问答！

回答 1

Stack Overflow用户

发布于 2016-04-09 13:24:18

神经网络只是Q函数参数化的一种可能方式。在这种情况下执行梯度下降的方式在Sutton和Barto的这本书的section中进行了解释。只需将神经网络的权重视为参数的向量。

票数 0

页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持

原文链接：

https://stackoverflow.com/questions/36365013

复制

jquery 列表可拖动排序 sortable

html javascript jquery http

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd"> <html xmlns="http://www.w3.org/1999/xhtml"> <head> <meta http-equiv="Content-Type" content="text/html; charset=utf-8" /> <title>jQuery UI Sortable</title> <style type="text/css"> #myList{ width: 80px; background: #EEE; padding: 5px; list-style: none; } #myList a{ text-decoration: none; color: #0077B0; } #myList a:hover{ text-decoration: underline; } #myList .qlink{ font-size: 12px; color: #666; margin-left: 10px; } </style> </head> <body> <ul id="myList"> <li><a href="#">心情</a></li> <li> <a href="#">相册</a> <a href="#" class="qlink">上传</a> </li> <li> <a href="#">日志</a> <a href="#" class="qlink">发表</a> </li> <li><a href="#">投票</a></li> <li><a href="#">分享</a></li> <li><a href="#">群组</a></li> </ul>

用户5760343

2019/10/10

2.5K0

jquery 列表可拖动排序，并把排序发送给后台

html javascript jquery http

<!DOCTYPE html PUBLIC "-//W3C//DTD XHTML 1.0 Transitional//EN" "http://www.w3.org/TR/xhtml1/DTD/xhtml1-transitional.dtd">

用户5760343

2019/10/10

1.5K0

Python 面试题目—列表元素排序

python sort 排序

Python题目：对列表[37,41.12,35,22,98,16,7,45,31]进行排序。

MySQL轻松学

2019/09/06

5490

jQuery 元素操作

jquery 编程算法

jQuery 元素操作主要讲的是用jQuery方法，操作标签的遍历、创建、添加、删除等操作。

星辰_大海

2020/10/09

2.7K0

jquery 元素尺寸

border height padding width

从上面的示例可以看到，使用width()和height()分别可以获取元素div的width和height的值。

Devops海洋的渔夫

2019/06/02

1.7K0

jQuery 元素操作

jquery 编程算法

jQuery 元素操作主要讲的是用jQuery方法，操作标签的遍历、创建、添加、删除等操作。

梨涡浅笑

2022/05/08

2K0

jQuery 元素操作

jquery 编程算法

jQuery 元素操作主要讲的是用jQuery方法，操作标签的遍历、创建、添加、删除等操作。

清出于兰

2020/10/26

1.4K0

20 - 如果列表元素是对象，该如何进行排序

python

1. 如果列表元素是对象，对这样的列表排序有哪些方法？ class MyClass: def __init__(self): self.value = 0 ''' def __gt__(self, other): return self.value > other.value ''' def __lt__(self, other): return self.value > other.v

ruochen

2021/05/23

1.2K0

python中对列表元素大小排序（冒泡排序法，选择排序法和插入排序法）—排序算法

编程算法 python

排序(Sorting) 是计算机程序设计中的一种重要操作，它的功能是将一个数据元素（或记录）的任意序列，重新排列成一个关键字有序的序列。本文主要讲述python中经常用的三种排序算法，选择排序法，冒泡排序法和插入排序法及其区别。通过对列表里的元素大小排序进行阐述。

zeruns

2020/03/23

1.8K0

列表元素分组

有这样一种场景，有三个列表a、b、c。我们想要把每一个列表中的第一个元素取出来分为一组，第二元素取出来分为一组、第三个元素取出来分为一组，以此类推。该怎么做呢？你可以自己想一想，再来看下面的实现过程。

TalkPython

2019/05/24

1.1K0

jquery 筛选元素 (2)

jquery

.add() 　　创建一个新的对象，元素添加到匹配的元素集合中。　　.add(selector) 　　　　selector 一个字符串表示的选择器表达式。找到更多的元素添加到匹配的元素集合。　　　　　　$("p").add("div") 　　.add(html) 　　　　html 　　　　　　HTML片段添加到匹配的元素集合中。　　　　　　　　$('li').add('<p id="new"> new paragraph</p>') 　　.add(elements

用户1197315

2018/01/19

1.3K0

jQuery - 添加元素

jquery html javascript

jQuery append() 方法在被选元素的结尾插入内容（仍然在该元素的内部）。

陈不成i

2021/07/22

2.7K0

jQuery操作DOM元素

编程算法 jquery html

作为一个后端程序员，也是要和前端页面打交道的。最常见的场景莫过DOM元素操作和前端页面使用AJAX向服务器发送请求。实现上述两个功能当然可以使用原生js来完成，但在实际开发过程中很少这样做，通常会使用一些别人封装好的js库来辅助我们的工作，jQuery就是这些辅助库中的一员。

雪飞鸿

2018/09/05

2.8K0

jquery 筛选元素 (3)

jquery

.addBack() 　　添加堆栈中元素集合到当前集合中，一个选择性的过滤选择器。　　.addBack([selector]) 　　　　selector 　　　　一个字符串，其中包括一个选择器表达式，匹配当前元素集合，不包括在内的元素。　　　　<ul> 　　　　　　<li>list item 1</li> 　　　　　　<li>list item 2</li> 　　　　　　<li class="third-i

用户1197315

2018/01/19

1.5K0

JQuery生成图片列表

工作网络

1 <!DOCTYPE html> 2 <html> 3 <head> 4 <title>生成图片列表</title> 5 <style type="text/css"> 6 *{ margin: 0px; padding: 0px; } 7 .bpp4{ width: 700px; height: 280px; padding-left: 10px; padding-bottom: 10px; border: 1px solid #333333

彼岸舞

2020/09/30

8K0

jQuery 选取元素概要

其他

注意：对于 jQuery 自定义的选择器，为了性能，先用 CSS 定义的选择器选，再从结果集中筛选时用 jQuery 自定义的选择器。如：

前端GoGoGo

2018/08/24

1.4K0

python中列表排序，字典排序，列表中的字典排序

serverless

key= lambda dict1:dict1[0] #dict1[0]表示按键，dict1[1]表示按值。

用户8346838

2021/03/10

9.7K0

jquery 筛选元素(1)

其他

.eq() 　　减少匹配元素的集合为指定的索引的那一个元素。　　.eq(index) 　　　　index一个整数，指示元素的位置，以0为基数。　　$("li").eq(2).css('background-color', 'red') 　　　　//选择第三个元素将其将其背景变成红色。　　.eq(-index) 　　　　-index 一个整数，指示元素的位置，从集合中的最后一个元素开始倒数。　　$("li").eq(-2).css('background-color'

用户1197315

2018/01/19

1.4K0

数列的重新排序

class sort 排序

x2<-c("jimmy","nicker","damon","sophie","tony")

用户10325558

2023/02/03

4980

Python 列表排序

python 微信编程算法

本文最先发布在： https://www.itcoder.tech/posts/python-list-sort/

雪梦科技

2020/06/05

1.8K0

相似问题

使用鼠标jquery重新排序列表元素

使用jQuery重新排序元素

重新排序列表元素

jQuery -拖放列表重新排序

如何重新排序下拉列表(jquery)

活动推荐

媒体处理专属优惠，福利大放送！

添加站长进交流群

领取专属 10元无门槛券

AI混元助手 在线答疑

关注 腾讯云开发者公众号

洞察 腾讯核心技术

剖析业界实践案例