海沧| 樟树| 宜阳| 阜平| 金湖| 杞县| 方城| 醴陵| 广饶| 保亭| 德江| 万载| 阳高| 达县| 琼中| 咸宁| 辛集| 武功| 锦屏| 兴文| 鸡东| 蕉岭| 鲁甸| 黔江| 南康| 楚州| 英德| 溧水| 通海| 冷水江| 宁河| 兴山| 文县| 石狮| 临县| 安西| 竹溪| 介休| 盈江| 调兵山| 大连| 闽清| 临西| 鄂温克族自治旗| 白玉| 两当| 玉龙| 承德县| 长乐| 敦化| 赤水| 白朗| 同仁| 兰州| 安陆| 墨玉| 雅安| 富阳| 旌德| 监利| 呼玛| 玉门| 柯坪| 晋江| 湘潭市| 成都| 江苏| 零陵| 碾子山| 定日| 东川| 新宁| 神农架林区| 舒兰| 宜秀| 沧县| 庐江| 揭阳| 吉木萨尔| 沧州| 新化| 陕西| 房县| 剑川| 宁蒗| 讷河| 邛崃| 怀仁| 兴业| 隆昌| 南乐| 阎良| 化州| 晋州| 永登| 盐田| 武隆| 永宁| 剑川| 阿合奇| 中牟| 通城| 海口| 清原| 瑞丽| 丹凤| 北辰| 姚安| 灯塔| 临武| 金州| 台南县| 龙门| 黎城| 疏勒| 阿拉善右旗| 恩施| 榆树| 连江| 乌鲁木齐| 宜春| 澄迈| 古县| 都匀| 云梦| 凤城| 镶黄旗| 巴林右旗| 奉新| 陕西| 瑞金| 郫县| 林芝镇| 泽州| 青川| 常宁| 牙克石| 金湖| 青州| 榆树| 赤壁| 城固| 察哈尔右翼前旗| 勐腊| 安多| 连州| 青铜峡| 甘棠镇| 榆中| 铁力| 泾川| 达孜| 天水| 鄯善| 天祝| 广宗| 黄岛| 梅里斯| 和县| 会理| 大荔| 益阳| 平阳| 安康| 漯河| 新安| 崇阳| 潞西| 凭祥| 博野| 阿克陶| 怀化| 新沂| 湟中| 武隆| 宝山| 即墨| 遂昌| 台前| 嘉峪关| 临沭| 敦煌| 浦江| 溆浦| 慈溪| 峨眉山| 泉州| 靖安| 方正| 共和| 新建| 韩城| 湾里| 凌海| 平昌| 任县| 乾安| 武功| 鄂州| 周口| 木里| 台州| 治多| 涿鹿| 华山| 岢岚| 漳平| 永春| 从江| 山阴| 玛多| 抚松| 榆社| 巴彦| 浙江| 彝良| 武山| 岢岚| 兴安| 建始| 麦积| 徐州| 阿拉善左旗| 霍山| 内黄| 洛南| 中山| 秦安| 黄陵| 大余| 武宁| 清水| 西沙岛| 辉南| 佳县| 阜南| 延庆| 海丰| 英吉沙| 万山| 株洲县| 水城| 穆棱| 井研| 珲春| 扎兰屯| 拉萨| 陵县| 温县| 阿克塞| 奈曼旗| 西吉| 包头| 孟村| 福清| 若尔盖| 临江| 武当山| 佳木斯| 永泰| 达县| 新津| 陈巴尔虎旗| 嘉兴|

彩票软件被针对:

2018-11-19 11:29 来源:国 华新闻网

  彩票软件被针对:

  国内媒体在报道霍金提交姓名商标注册申请时,对于提交的机构名称大都还停留在“英国专利局(UKPO)”,所以可能想当然地认为其提交的是专利申请,殊不知该局在2007年4月时,正式更名为英国知识产权局(UKIPO),在专利和外观设计管理职能的基础上,并入了商标等申请的受理和审批职能。新时代,肩负为人类谋和平与发展的历史使命,关键是在人类命运共同体思想的指引下,既坚持立足自身,又推动人类发展。

”“创新是发展的第一动力,对于品牌同样如此。经审查,商标局于2013年11月21日作出撤销诉争商标注册的决定。

  虽然霍金被困在轮椅上50多年,却是精骛八极,心游万仞,思维的光芒始终在科学的天空中领航。该体系基于中国版权保护中心和清华大学文化创意发展研究院文化产业区域研究成果,针对城市、区域在寻求文化特色发展路径中的定位、发展、实施困境而提出的体系性咨询服务方案,使学术智库和服务机构的更多成果快速应用于地方建设。

  (张梦然)(责编:王小艳、王珩)  目前,国内部分手机软件下载平台已经制定了针对手机购买网游、音乐、视频等虚拟文化产品的“绿色护盾”。

坚持“以人民为中心”这个根本思想,为“人民的美好生活”不懈奋斗,我们就能让全体中国人民和中华儿女在实现中华民族伟大复兴的历史进程中共享幸福和荣光。

  (作者:朱磊,中央直属机关党校培训部副主任)

  报告说,中国的两家技术公司——华为技术有限公司和中兴通讯股份有限公司分别以4024项专利申请和2965项专利申请成为2017年最大的国际专利申请人,紧随其后的是美国英特尔公司和日本的三菱电机公司,分别拥有2637项和2521专利申请。首先要使先锋队觉悟,下定决心,不怕牺牲,排除万难,去争取胜利。

  (薛晓霞)(责编:龚霏菲、王珩)

  司法公正不容侵犯记者在采访中了解到,在知识产权诉讼中,有当事人抱着侥幸心理,提供伪证或虚假陈述,试图为自己争取非法权益或者逃避法律惩罚,殊不知这种行为已触犯相关法律规定,最终会被追究责任。此前,在腾讯AILab(人工智能实验室)第二届学术论坛上,腾讯发布其在人工智能方面的三大战略方向:打造通用AI(人工智能)之路;成立机器人实验室;聚焦“AI+医疗”战略,探索落地场景……从连续两次写入政府工作报告,到业内积极部署推进智能产业,“人工智能”无疑已经成为当下热门话题。

  2015年1月21日,商评委作出撤销复审决定,认为蓝山公司提交的证据或为自行制作或无其他证据佐证,不足以证明诉争商标在指定期间的使用。

  ”小米公司能够获得今天出众的品牌认知、认可度,最重要的因素之一就是“不惜代价做好产品,集中精力提升‘中国制造’的全球品牌声誉和影响力。

  2017年11月,引证商标经核准转让予四川省宜宾君子酒业有限公司。”广西柳州市市长吴炜说,2017年引导社会固定资产在工业机器人方面投资亿元,为企业降低成本30%,节约人工40%,提高效率30%。

  

  彩票软件被针对:

 
责编:
设为书签 Ctrl+D将本页面保存为书签,全面了解最新资讯,方便快捷。 您也可下载桌面快捷方式。点击下载 | 新浪首页 | 新浪导航

谷歌AI为达目的,把自己的身体改造成了这样……

2018-11-19 14:04:04    创事记 微博 作者: 量子位   
△ 今天的主角,可能是AI界的橡胶果实了△ 今天的主角,可能是AI界的橡胶果实了
“人工智能技术的飞速发展,让城市变得更聪明”,罗家均深有感触,“收垃圾、预约家庭医生、掌握区内交通状况、远程控制智能家电……生态城的居民通过网站和手机APP,足不出户便可享受30项社区智慧生活服务;智慧网厅、智慧大厅也实现了互联网和电子政府的融合。

  欢迎关注“创事记”的微信订阅号:sinachuangshiji

  文/强化栗

  来源:量子位(QbitAI)

  强化学习AI打游戏,早就不稀奇了。

  智能体在虚拟世界里死去活来,慢慢了解怎样的策略能让自己活得更长,得到更多的奖励。

  但AI可能不知道,游戏打不好,也可能是智能体的身体结构有问题。

  如果可以一边学策略,一边改身材,或许能成就更伟大的强化学习AI。

  于是,来自谷歌大脑的David Ha,为自家AI制定了双管齐下的特殊训练计划:

  智能体不断调整自己的身材,比如腿的长度,找到最适合当前任务的结构;同时进行策略训练。

△身材修炼前 (左) vs 身材修炼后 (右):速度明显不一样△身材修炼前 (左) vs 身材修炼后 (右):速度明显不一样

  你看,智能体把腿跑细了,速度也快了许多。

  除此之外,还可以培养越野能力。

  在沟壑纵横的旅途中,原始身材的智能体时常翻车。

△ 改造前,翻车日常△ 改造前,翻车日常

  但炼成优雅身型之后,翻车事件几乎不存在了,策略训练时间也缩减到原来的30%。

  身材科学了,策略也就好学了。

  那么,是怎样的婀娜身段,能在降低时间成本的同时提升性能?再看一会儿你就知道了。

  秀外慧中,有何密方?

  从前的智能体,形状结构大都是固定的,只关注策略训练。可是,系统预先设定的身材,通常都不是 (针对特定任务) 最理想的结构。

  因此,如同上文所说,策略要学,身材优化也要一起学。

  这样一来,只用策略网络的权重参数 (Weight Parameters) 来训练就不够了,环境也要参数化。

  身体结构特征,比如大腿或小腿的长度、宽度、质量、朝向等等,都是这环境的组成部分。

  这里的权重参数w,把策略网络参数和环境参数向量结合起来,便可以同时培养身材和技巧。

  随着权重w的不断更新,智能体会越来越强。

  身材改造有没有用?只要和仅学策略、不改结构的智能体比一场,如果奖励分有提升,就表示AI找到了更适合这个环境的身型。

  注意,为了修炼AI的冒险精神,研究人员把高难度动作的奖励扩大,引导智能体挑战自我。

  身材改造,疗效甚好

  比赛场地分两大块,一是基于Bullet物理引擎的机器人模拟库Roboschool,二是基于Box2D物理引擎的OpenAI Gym。

  两类环境都经过了参数化,AI可以学着调整里面的参数。

  解锁高分姿势

  首先,来到足球场 (RoboschoolAnt-v1) ,这里的智能体Ant是只四脚怪,每条腿分三截,由两个关节控制。腿是留给AI调节的,球状身躯是不可调节的。

△ 三截腿,最内侧的一截比较不明显△ 三截腿,最内侧的一截比较不明显

  任务很简单,跑得越远越好。

  经过训练 (上图右) ,智能体最明显的变化是腿部更加细长了,且四条腿长短不一,打破了对称性。身材改变之后,步频也加快了许多,长腿怪更早穿过了棕色跑道。

  看一下奖励分:在100次测试里,原始结构的得分是3447 ± 251,而新结构的得分为5789 ± 479,疗效显著。

△ 左为原始,右为身材训练后 (红线代表激光雷达)△ 左为原始,右为身材训练后 (红线代表激光雷达)

  然后,进入绿地场景 (BipedalWalker-v2,基于Box2D,属于Gym) 。这里的智能体是两足的,在“激光雷达”的指引下往前走。

  任务是在规定时间内,穿越一片和平的地形 (这是简单版,充满障碍物的复杂版见下文) 。用分数来看,100次Rollout超过300分就算任务成功。

  原始身材获得了347分,优化后的身材则有359分。

  两边任务都成功了,但改造过结构的智能体除了瘦腿之外,两腿四截的长度都有变化,给了AI弹跳前进的新姿势。动作看上去更加轻松,分数也高过从前。

  好身材,能加速策略学习

  上文绿地的硬核版 (BipedalWalkerHardcore-v2) 在此:路途崎岖,千山万壑,一不小心就会堕入深渊。

  David Ha要在此证明,强健的身材能为智能体的策略学习带来加成,而不只是“两门功课同步学”那样粗暴的合体。

  与之前的全面瘦腿不同,这次智能体的后腿,进化出了厚实的小腿,且长度和沟壑的宽度相近。

△ 红线代表激光雷达△ 红线代表激光雷达

  这样一来,在跨越鸿沟的时候,后腿就能架起一座桥,保护智能体平稳通过,不翻车。

  与此同时,前腿承担了“危险探测器”的责任,侦查前方有怎样的障碍物,作为“激光雷达”的辅助,可以给后腿的下一步动作提供依据。

  重点是,在这副新身材诞生的过程中,AI已学会了通关策略,耗时仅12小时。对比一下,不做身材优化的原始训练方法,用时长达40小时 (前馈策略网络,96个GPU) 。

  这就是说,优雅的结构加速了智能体的学习过程。

△ 加入身材优化(橙色) ,训练效率明显提升,约1000代达成目标△ 加入身材优化(橙色) ,训练效率明显提升,约1000代达成目标

  脑洞,并非从天而降

  第一,David Ha如何能预感到,改善智能体的结构就可以提升训练效率?

  他说,是从大自然得到了启发。

△ 错误示范△ 错误示范

  有些动物在脑死亡之后,依然可以蹦跳,依然可以游泳。

  也就是说,生物体的许多行为,并不依赖大脑。

  有种叫做体验认知 (Embodied Cognition) 的理论认为,认知的许多特征,都不是大脑独自决定:生物体的方方面面,如运动系统、感知系统、生物体与环境的相互作用等等,都会对认知产生影响。

  比如,运动员在长期训练的过程中,除了身体得到锻炼,某些特定的心理素质也会随之生成。

  David Ha觉得,这样的现象在AI身上也有可能发生:对躯体进行训练,从而影响认知。

  第二,通过训练来改变智能体结构的想法,也是来源于自然。

△ 火烈鸟本不是红色,吃了小鱼小虾之类的食物,羽毛才变红△ 火烈鸟本不是红色,吃了小鱼小虾之类的食物,羽毛才变红

  中学生物告诉我们,表现型是基因型与环境共同作用的结果。

  那么,各式各样的虚拟场景,也会让更适应环境的智能体结构脱颖而出。这样,AI便可以借助环境的选择,炼成更加精湛的技能。

  缘,妙不可言。

  论文传送门:

  https://designrl.github.io/

文章关键词: 网络文化

分享到:
保存   |   打印   |   关闭
拾万镇 烟袋斜街 鲁藤村 本溪路 上尧村
枫丹白露城 王洛东街村 后峡地区 蔡坨村 山河