English
邮箱
联系我们
网站地图
邮箱
旧版回顾



利来国际游戏平台:沈阳市文化宫艺术惠民活动安排

文章来源:利来国际游戏平台    发布时间:2018年07月23日 13:47  【字号:      】

利来国际游戏平台

三人默默坐了一会儿,明微忽然开口:“先生。”

宁休应了声。

“我把这件事从头理了一遍,觉得关键还在长公主身上。如果他不是皇帝的私生子,为什么长公主要留下那样的遗言?强行给儿子戴绿帽,哪有这种事?先生既然已经着手查了,多留心这方面,可好?”

宁休道:“既然要查,当然各方面都要查清。”

明微颔首,又看向杨殊:“别的事,目前一筹莫展。有件事,你还是可以帮忙的。”

解放日报·上观新闻记者了解到,光大体育基金已经确定将全资收购上海男篮,成为上海男篮的新东家。而签约仪式上,代表投资方签约的正是来自光大资本的总经理、光大体育总裁兼首席合伙人范南。

能追剧听音乐的智能音箱,化身时尚博主的私人助理

我常常处于极端状态,有时候宅家一整天,坐在电脑面前写稿,有时候跟打仗一样,一大早就要洗头化妆,带一堆衣服鞋子出门拍摄。

明微喃喃:“原来如此……”

“我曾问过师父,为什么要给他改面相和八字。”

“为什么?”

宁休摇了摇头:“师父没有回答,只说,他既然动了手,这因果纠缠是扯不断了。日后要是出了问题,他不在了我得来收拾。”

他停顿了一下,继续道:“没两个月,我们离开了云京,直到八年后,师父外出云游,在此住了大约半年。等他回去,我便多了个名义上的小师弟。他很少在我面前提起小师弟,不过,每回长公主来信,他就会拿着一副八字排盘,一遍一遍地排。”

掌院长老又看向明微:“这位姑娘,你呢?”

明微半低着头,轻声答道:“小女并未观测到什么妖星,只发现了两点。”她顿了一下,说道,“有一片阴云即将遮住紫微垣,数年后大齐可能会有一场灾劫,时间大约是五到十年后。另外,西北方有杀星起,恐边陲不安。”

掌院长老没说什么,皇帝却抬头看向她,目中隐有异色。

就在不久前,北部各胡发生内乱,互相杀伐。他也是刚刚收到的秘密奏报,消息还没传出去。这姑娘,居然有点真本事?那她说的阴云遮住紫微垣,又会预示着什么……

皇帝只觉得,后面那点与自己得知的消息对应。两位长老听明微的话,却十分震惊。

本论文研究者认为解决该问题的关键在于通信,这可以增强策略间的协调。MARL 中有一些学习通信的方法,包括 DIAL [3]、CommNet [23]、BiCNet [18] 和 master-slave [7]。然而,现有方法所采用的智能体之间共享的信息或是预定义的通信架构是有问题的。当存在大量智能体时,智能体很难从全局共享的信息中区分出有助于协同决策的有价值的信息,因此通信几乎毫无帮助甚至可能危及协同学习。此外,在实际应用中,由于接收大量信息需要大量的带宽从而引起长时间的延迟和高计算复杂度,因此所有智能体之间彼此的通信是十分昂贵的。像 master-slave [7] 这样的预定义通信架构可能有所帮助,但是它们限定特定智能体之间的通信,因而限制了潜在的合作可能性。

学界|北京大学提出注意力通信模型ATOC,助力多智能体协作

为了解决这些困难,本论文提出了一种名为 ATOC 的注意力通信模型,使智能体在大型 MARL 的部分可观测分布式环境下学习高效的通信。受视觉注意力循环模型的启发,研究者设计了一种注意力单元,它可以接收编码局部观测结果和某个智能体的行动意图,并决定该智能体是否要与其他智能体进行通信并在可观测区域内合作。如果智能体选择合作,则称其为发起者,它会为了协调策略选择协作者来组成一个通信组。通信组进行动态变化,仅在必要时保持不变。研究者利用双向 LSTM 单元作为信道来连接通信组内的所有智能体。LSTM 单元将内部状态(即编码局部观测结果和行动意图)作为输入并返回指导智能体进行协调策略的指令。与 CommNet 和 BiCNet 分别计算内部状态的算术平均值和加权平均值不同,LSTM 单元有选择地输出用于协作决策的重要信息,这使得智能体能够在动态通信环境中学习协调策略。

研究者将 ATOC 实现为端到端训练的 actor-critic 模型的扩展。在测试阶段,所有智能体共享策略网络、注意力单元和信道,因此 ATOC 在大量智能体的情况下具备很好的扩展性。研究者在三个场景中通过实验展示了 ATOC 的成功,分别对应于局部奖励、共享全局奖励和竞争性奖励下的智能体协作。与现有的方法相比,ATOC 智能体被证明能够开发出更协调复杂的策略,并具备更好的可扩展性(即在测试阶段添加更多智能体)。据研究者所知,这是注意力通信首次成功地应用于 MARL。

图 1:ATOC 架构。

图 2:实验场景图示:协作导航(左)、协作推球(中)、捕食者-猎物(右)。




(责任编辑:吴佳莉)

附件:

专题推荐

相关新闻


© 1996 - 2017 中国科学院 版权所有 京ICP备05002857号  京公网安备110402500047号 

网站地图    地址:北京市三里河路52号 邮编:100864