
报告主题: Adaptive Dynamic Programming - A New Tool for Intelligent Control
讲座嘉宾:Professor Derong Liu Institute of Automation, Chinese Academy of Sciences
讲座时间:2009年12月15日上午9:45
讲座地点:信控学院学术报告厅D328
欢迎广大师生参加!
报告摘要:
Adaptive Dynamic Programming (ADP) has received increasing attention recently. ADP scheme is a design that approximates dynamic programming in the general case, i.e., approximates optimal control over time in noisy, nonlinear environments. There are many engineering problems in practice which can be formulated as cost maximization or minimization problems. Dynamic programming is a very useful tool in solving these problems. However, it is often computationally untenable to run dynamic programming due to the backward numerical process required for its solutions. Over the years, progress has been made to provide approximate solutions to dynamic programming. The idea is to approximate dynamic programming solutions by using neural networks to approximate the cost function. The methodology is a very useful tool for building intelligent agents/controllers in almost any environment. This talk will review the theoretical development of ADP. Details about the training of the neural networks used in the present design
will also be presented. The pole balancing (inverted pendulum) problem will be used as the benchmark in this presentation to show the applicability of ADP.
derong.liu@ia.ac.cn
嘉宾简介:
刘德荣于1982年从华东工学院毕业并获学士学位,于1987年从中国科学院自动化研究所毕业并获硕士学位,于1994年从美国圣母大学(University of Notre Dame)毕业并获电机工程博士学位。从1993年至1995年,在美国通用汽车公司研究开发中心工作。从1995年至1999年,在斯蒂文斯理工学院电机与计算机工程系任助教授。从1999年开始,在伊利诺依大学芝加哥分校电机与计算机工程系工作,先后任该校助教授、终身职副教授、终身职正教授。2008年,入选中国科学院“百人计划”在自动化研究所任研究员并于2009年入选“千人计划”。1990年,在圣母大学读书期间,获该校麦克尔-博克奖学金。1997年,在斯蒂文斯理工学院任教期间,获该校哈维-戴维斯杰出教学奖。1999年,获得了美国国家科学基金会教授早期事业发展奖。2005年,因在非线性动态系统和递归神经网络方面作出的贡献被选为IEEE Fellow。2006年,在伊利诺依大学任教期间,获该校大学学者奖。2008年,获得中国国家自然科学基金委“海外杰出青年基金”。现任Automatica的编委、IEEE神经网络汇刊编委、IEEE电路与系统杂志编委。于2006-2008年担任IEEE计算智能学会的理事。从2010年1月起,担任IEEE神经网络汇刊的主编(Editor-in-Chief)。目前已出版了9本书、发表了60多篇杂志文章和120多篇会议文章,主要从事智能控制理论及应用、人工神经网络、模糊系统、生物信息学、电力系统运行与控制、无线通讯与无线网络方面的研究工作。
|