针对强化学习在连续状态连续动作空间中的维度灾难问题,利用BP神经网络算法作为值函数逼近策略,设计了自动驾驶仪。并引入动作池机制,有效避免飞行仿真中危险动作的发生。首先,建立了TD强化学习算法框架;然后根据经验将舵机动作合理分割为若干组,在不同的飞行状态时,调取不同组中的动作;其次,构建了BP神经网络,通过飞行过程中的立即奖赏,更新网络的值函数映射;最后,通过数字仿真验证了强化学习自动驾驶仪的性能,仿真结果表明,该算法具有良好的动态和稳态性能。
上传时间: 2013-11-09
上传用户:刘江林1420
根据现今的交通系统中驾驶员不能获取塞车状况的实时信息的情况,设计出了基于ZigBee无线组网城市交通中的塞车状况的自动预警系统。本系统可以为某一时刻正在或将要出行车辆和出行人员提供实时的路况信息,从而自动分流出行车辆与人员,减轻了车辆过于拥挤的现状并极大地缓解了交通道路的压力。
上传时间: 2013-11-09
上传用户:wentianyou
为了提高中小型制造企业的刀具管理水平,对刀具的自动识别与追踪技术进行了研究,最终确定Data Matrix二维码用于刀具的自动识别与追踪技术。实际应用表明,该技术优化了刀具资源管理过程,诸如减少刀具的加工准备时间等,加强了企业底层资源信息的采集与处理能力,降低了企业用刀成本,最终提高了企业生产率和综合竞争力。
上传时间: 2013-12-20
上传用户:huaidan
由于近些年来智能电网的大力发展需求出现了各种自动抄表系统的应用方案,但各有不足之处未能真正在我国广泛采用。为了实现智能电网自动抄表系统的真正应用,设计了一种易于实现的、网络开销小并低功耗的无线网络,它采用ARM和MCU作为自动抄表系统的无线集中器硬件平台,并搭配Sub-GHz的射频收发模块,集中器与节点设备之间采用自定义协议的自动组网形式, 可实现50个节点自动灵活组网,而且网络开销小只占用4 k存储空间。整个系统具有实用性和应用性强的特点。
上传时间: 2013-10-17
上传用户:fqscfqj
机器人制作入门资料 小车是怎么来控制的?为什么小车判断出障碍物后可以自动的绕开? 理论:控制工程——处理自动控制系统各种工程实现问题的综合性工程技术。包括对自动控制系统提出要求(即规定指标)、进行设计、构造、运行、分析、检验等过程。它是在电气工程和机械工程的基础上发展起来的。 闭环控制:闭环控制有反馈环节,通过反馈系统是系统的精确度提高,响应时间缩短,适合于对系统的响应时间,稳定性要求高的系统。 开环控制:开环控制没有反馈环节,系统的稳定性不高,响应时间相对来说很长,精确度不高,使用于对系统稳定性精确度要求不高的简单的系统。
标签: 机器人
上传时间: 2013-11-10
上传用户:wendy15
各种智能小车设计资料
上传时间: 2013-11-10
上传用户:truth12
为了提高学生的数字电子技术综合实践能力,设计交通信号灯自动控制数字电子技术实验电路。选用D触发器和555定时器作为主要器件,利用组合逻辑电路、时序逻辑电路和555定时器等方面的数字电路理论,将扭环形计数器应用到十字路口交通信号灯自动控制电路中,并利用Multisim作为设计工具进行仿真。
上传时间: 2013-11-16
上传用户:ouyangmark
红外遥控小车的制作。
上传时间: 2014-01-25
上传用户:Aidane
生态农业智能温室大棚自动监控系统设计方案
上传时间: 2013-11-02
上传用户:ls530720646
摘要:基于ATmega128单片机的智能小车控制系统。通过光电编码器实现对小车速度的测量并将速度值进行bang—bang+PID运算.产生控制直流电机转速的PWM电压信号,实现对车速的快速调整和精确控制。小车控制系统还配有避障和灰度传感器。用于检测障碍物和地面灰度,实现小车避障和寻迹功能。
上传时间: 2013-10-29
上传用户:清风冷雨