English
邮箱
联系我们
网站地图
邮箱
旧版回顾



www99lilaicom:深圳首个减灾救灾网站上线

文章来源:www99lilaicom    发布时间:2018年07月21日 05:55  【字号:      】

www99lilaicom “我交了800元押金说好的拍个全家福,照片还没取到手,这个婚纱店就关门走人了,要追讨押金也是被‘踢皮球’,不知道该怎么办?”1月21日,琼海的黄女士拨打南国都市报琼海记者站新闻热线18889995552反映,有多名消费者与黄女士遭遇同样事,涉及资金10多万元。

南国都市报记者 陈康 文/图

优惠套路


小男孩走失不知父母电话

交警寻到老师助其回家

2日晚21时许,在琼山区花卉大世界转盘处,一名身着蓝色上衣的小男孩独自在路边号啕大哭,他的哭声引来了正在此处执勤的海口公安交警违法处理大队民警梁妙、协警许儒山。

随后,执法人员对两小盒过期的合桃酥进行查扣,并立案调查处理。“事后,我让超市店长多次与对方对接。”李杨说,对方表示“5000元分文不少,若超过3天还要加500元才能撤诉。”

对于这样的要求,超市予以拒绝。

超市“赔偿”4500元后

“科技永辉”走到了哪一步

去年底,腾讯入股永辉超市5%、永辉云创15%的股权,超级物种、永辉生活这两个新业态店,正是永辉要抓住年轻人的业态,资本层面和目标客群的“连接”,或许表明,在永辉这块“试验田”一定是腾讯要大力扶持、有所产出的标杆。

永辉云计算联合创始人、CTO胡鲁辉在2018腾讯云+未来峰会的智慧零售分论坛上透露,永辉跟腾讯的合作相当的紧密,从技术面也好、服务面也好,几乎每个层面都跟腾讯有着相当紧密的合作。

1999年,他决定到外地开店,首站选在了西安,因为西安那边有人愿意和海底捞合作。

百亿海底捞的最大危机是什么?| 独家

但是,刚到西安的头几个月,海底捞接连亏损,最后还是服务救了它。

张勇回忆说:“眼看就要把我们之前辛苦积攒下来的老本赔个精光,危急关头,我果断要求合伙人撤资,委托我派过去的得力助手杨小丽全权负责,重拾海底捞的核心理念——服务高于一切!短短两个月内,西安海底捞店居然奇迹般地扭亏为盈。”

本论文研究者认为解决该问题的关键在于通信,这可以增强策略间的协调。MARL 中有一些学习通信的方法,包括 DIAL [3]、CommNet [23]、BiCNet [18] 和 master-slave [7]。然而,现有方法所采用的智能体之间共享的信息或是预定义的通信架构是有问题的。当存在大量智能体时,智能体很难从全局共享的信息中区分出有助于协同决策的有价值的信息,因此通信几乎毫无帮助甚至可能危及协同学习。此外,在实际应用中,由于接收大量信息需要大量的带宽从而引起长时间的延迟和高计算复杂度,因此所有智能体之间彼此的通信是十分昂贵的。像 master-slave [7] 这样的预定义通信架构可能有所帮助,但是它们限定特定智能体之间的通信,因而限制了潜在的合作可能性。

学界|北京大学提出注意力通信模型ATOC,助力多智能体协作

为了解决这些困难,本论文提出了一种名为 ATOC 的注意力通信模型,使智能体在大型 MARL 的部分可观测分布式环境下学习高效的通信。受视觉注意力循环模型的启发,研究者设计了一种注意力单元,它可以接收编码局部观测结果和某个智能体的行动意图,并决定该智能体是否要与其他智能体进行通信并在可观测区域内合作。如果智能体选择合作,则称其为发起者,它会为了协调策略选择协作者来组成一个通信组。通信组进行动态变化,仅在必要时保持不变。研究者利用双向 LSTM 单元作为信道来连接通信组内的所有智能体。LSTM 单元将内部状态(即编码局部观测结果和行动意图)作为输入并返回指导智能体进行协调策略的指令。与 CommNet 和 BiCNet 分别计算内部状态的算术平均值和加权平均值不同,LSTM 单元有选择地输出用于协作决策的重要信息,这使得智能体能够在动态通信环境中学习协调策略。

研究者将 ATOC 实现为端到端训练的 actor-critic 模型的扩展。在测试阶段,所有智能体共享策略网络、注意力单元和信道,因此 ATOC 在大量智能体的情况下具备很好的扩展性。研究者在三个场景中通过实验展示了 ATOC 的成功,分别对应于局部奖励、共享全局奖励和竞争性奖励下的智能体协作。与现有的方法相比,ATOC 智能体被证明能够开发出更协调复杂的策略,并具备更好的可扩展性(即在测试阶段添加更多智能体)。据研究者所知,这是注意力通信首次成功地应用于 MARL。

图 1:ATOC 架构。

图 2:实验场景图示:协作导航(左)、协作推球(中)、捕食者-猎物(右)。




(责任编辑:阎宽)

附件:

专题推荐

相关新闻


© 1996 - 2017 中国科学院 版权所有 京ICP备05002857号  京公网安备110402500047号 

网站地图    地址:北京市三里河路52号 邮编:100864