使用iSim2Real这种方式，在模拟环境下可以让数年的实时训练在几分钟或几小时内完成。 谷歌iSim2Real项目乒乓球机器人与人类训练。本文图片来源：谷歌 似乎现存的每一种桌上运动中，人工智能都立于不败之地。乒乓球竞技中，谷歌AI同样难逢敌手。10月18日，谷歌公布其正在研究的乒乓球机器人项目，在与人类对打时一回合可接球340次。目前，谷歌强调这只是人类与AI的合作，并非击败人类，但以AI成长的速度，它将很快成为专业选手。 机器人学习目前已经被广泛应用于现实世界，并可以完成精密的手部、腿部动作。但在动态且高速的人机互动中，机器人学习并不常见。谷歌选择开发乒乓球机器人，正是为了探索这类情况下人工智能的可能性。 解决先有鸡还是先有蛋 在这个名为iSim2Real的项目中，谷歌的乒乓球机器人在模拟环境中不断学习，并将学习成果运用于现实世界，最终可以在一个与人类的乒乓球接发回合中，接球超过三百次。它还能把球送回不同的区域，虽然不能精确到数字上，但已经足够精确到让机器人规划策略，来控制乒乓球的最终目的地。 00：10 视频加载中。。。 乒乓球机器人可以在一个回合中接球超过三百次。视频来源：谷歌（00：10） 谷歌之所以选择乒乓球运动，是因为机器人可以与快节奏以及相对不可预测的人类行为进行交互，同时乒乓球的规则相对于篮球、板球等运动也较为简单直接。机器人完成乒乓球动作时，既要求速度又要求精度，这对学习算法提出了很高的要求。同时，这类运动具有固定的、可预测的环境，使其成为研究人机交互和强化学习问题的理想测试平台。这些特性使得谷歌开发了iSim2Real项目。 iSim2Real也不仅仅是关于乒乓球机器人，更是一种人工智能创造过程的方式，在这个过程中，机器学习模型被教会在虚拟环境或模拟中做什么，然后再应用这些知识，目标是尽可能长时间地与人类进行接球回合而不失误。在现实世界中直接与人类玩家进行训练既繁琐又耗时，当需要数年的试验和错误才能建立一个工作模型时，使用iSim2Real这种方式显得十分有效，它在模拟环境下可以让数年的实时训练在几分钟或几小时内完成。 这种方式听起来简单高效，但在模拟中机器人并不是万能的。人类的活动具有一定的不可预测性，并不容易模拟，需要先有人类的行为模型作为支撑。而人类的行为模型，又需要与机器人互动获得。这就陷入了一个是先有鸡还是先有蛋的死循环。 iSim2Real解决这一鸡和蛋问题的方法，是使用一个简单的人类行为模型作为近似起点，并让机器人在模拟训练和现实训练之间交替学习。在每次迭代中，都会细化人类行为模型和策略。在机器人接近人类行为的过程中，初期的不理想是可以接受的，因为机器人也只是刚刚开始学习，之后每一场比赛都会收集更多真实的人类数据，提高准确性，让AI学到更多。 iSim2Real的训练方法。 GoalsEye：通过自我监督来自主练习 除了iSim2Real这种模拟与现实交替进行的方法，研究人员也在探索只使用现实的数据学习的方法，即GoalsEye项目。 一开始，模仿学习（IL）为研究人员提供了一种简单而稳定的思路，但它需要人类行为进行演示，并且机器人的技术无法超过演示者的水平。同时，当演示者拥有在高速环境下精确接球的能力时，收集其数据具有一定挑战性，而且在刚开始时可能非常低效。因此研究人员尝试了一种结合最近行为进行重复的方法，从一个小的、结构薄弱的、非目标数据集开始，不断学习精确定位目标的策略。 这种方法使得在训练的过程中，机器人的自主学习能力显得至关重要。研究人员设置了一个强调精度的乒乓球任务，要求机器人将球返回到桌子上的任意目标位置。机器人可以通过自我监督来实现自主练习。例如，机器人可以设置随机目标，击中左后角或将球从右侧过网，并尝试使用当前掌握的策略来实现这些目标，从而不断改进。所有尝试都会记录并添加到不断扩展的数据集中。这种自主练习是反复进行的，机器人通过不断的设置随机目标并尝试目标，从而扩展训练数据，调整策略。 GoalsEye策略旨在实现直径20厘米的目标（左）。人类玩家瞄准同一个目标（右）。 GoalsEye的训练方法。 其效果也是显而易见的，在进行最初的2480次人类行为演示后，机器人只在9的情况下能准确地达到距离目标30厘米以内的目标。然而，当机器人又自主练习了大约13500次后，达到目标的准确率上升到43。同时，演示数量的提升提高了后续自我练习的效率，这说明，计算时间、成本等因素后，演示可以适当替换自我练习，从而更高效的进行训练。 在这两个使用机器人乒乓球研究平台的互补项目中，iSim2Real可以在模拟与现实中交替学习策略，而GoalsEye则证明，从现实世界的非结构化数据中学习，结合自我训练，对于在精确且动态的要求中学习目标条件策略是有效的。 参考资料： https：ai。googleblog。com202210tabletennisresearchplatformfor。html
刚刚，奇瑞紧急澄清12月5日上午，据媒体报道称，富豪王来春兄妹实际控制的立讯成为奇瑞汽车第一大股东。12月5日午间，奇瑞汽车紧急发布声明称，部分媒体关于奇瑞汽车股份有限公司股东及股份变化的……加密货币行业的冬天越来越冷失业频发有观点说比特币明年跌至50加密货币的冬天并没有解除封冻，而是越来越冷了。这是一位加密货币交易所首席执行官的观点，他在过去两天里裁掉了30的员工，这种趋势在行业内已经弥漫了许多个月，并因FTX的倒闭而加剧……脂肪肝患者饮食原则6条建议每天都要做，肝脏才能轻松点肝脏被称为五脏之首，如果肝脏功能出现了问题，很有可能会牵扯到其他器官的健康状况，甚至也可能会增加患并发症的风险。可是现实生活中人们对于肝脏并不是特别的了解，比如易受到肾脏……新架构突破能效边界，NV为玩家及创作者打造多款强动力笔记本电凭借最大的代际飞跃、DLSS3和第五代MaxQ技术，GeForceRTX40系列笔记本电脑实现全新发烧级PC性能表现【NVIDIACES硬件新闻】今天，NVIDIA发布G……肩关节疼痛怎么办？古籍早记载肩外俞穴有着舒筋止痛的神奇功效冬日生活打卡季古人治疗肩关节疼痛肩关节疼痛是从古至今都是非常常见而且折磨人的疾病。根据相关记载，一代大诗人陆游就一直遭受肩关节疾患的困扰。那么古人有没什么好的办法去……苏州天脉业绩连升对赌上市押宝低毛利均温板能否成功中国经济网编者按：苏州天脉导热科技股份有限公司（以下简称苏州天脉）将于2023年1月19日首发上会，保荐人（主承销商）为安信证券股份有限公司，保荐代表人为孙海旺、郑云洁。……男子，一动就结束不持久，中医健脾益肾治之病例：男，27岁病史及现在症：无法进行房事，一动就结束，不能持久，腰部疼腿酸，黑眼圈重，皮肤较粗糙，精神萎靡，没有精力，肚子胀，健忘失眠严重，舌淡红，齿痕舌苔薄白，脉象细……油价调整消息今天10月12日，加油站调价后，9295号汽油售油价调整又进入了周期，截至目前国内成品油价格调整计价周期开始运行，而承接前段时间内的油价连续上涨，汽柴油价格预计上调幅度处于一个较高的位置，预计汽柴油价格上调0。33元升，虽然……1块5一斤，却经常被扔掉，建议入秋后，中老年人多吃，对身体好今天给大家说说叶酸。叶酸，和黄体酮一样，是和孕期结合最多的药用名词。但就像不是只有孕期才可以补充黄体酮，也不是只有孕期才会需要叶酸。事实上，叶酸的本质是一种维生素。体内缺乏叶酸……一口酥排骨搭配软糯年糕，好吃脱骨精致美食系列哈喽友友们我是毛豆，今天分享一款排骨的做法、这个系列最近颇受大家好评，今天开启第六天的美食、老规矩上图：食材准备篇：预备上两斤排骨第一步：起锅烧油……尽享假日时光！元旦假期各地多彩活动深受游客青睐来源：央视新闻客户端元旦假期，全国多地都推出了丰富多彩的活动，让市民和游客感受到浓浓的节日氛围。江苏南京：打酱油品美食年货大集迎客来在南京市溧水永寿坊文化商业……一个文艺爱好者，注定不会太过快乐吧！船长《文艺爱好者》一个文艺爱好者，注定不会太过快乐吧！心里有爱，有善良，骨子里住着孩子般的纯真，但也往往多愁善感。容易感知美好，也更容易体……