东京工业大学做了一个能预测对象0.5秒后动作的系统

Tips:点击图片进入下一页



http://www.gcores.com/articles/108941

东京工业大学做了一个能预测对象0.5秒后动作的系统
Future Pose,Future Time!

2019-04-23 11:36:21


帝王组_日天

东京工业大学的研究组制作了一款名为“FuturePose”的系统,该系统可实时预判侦测对象0.5秒后的动作。据组内人员介绍,FuturePose 是为了格斗项目的深度训练开发的。


FuturePose 的基础原理是用相机实时记录下对象的运动,并推测未来动作的系统。

首先用 RGB 图像推测对象 2D 关节的位置,然后把对象 2D 关节的位置输入至利用长短期记忆网络,从时间上分析其特征,从而预测对象 2D 关节未来所处的位置。为了得到更加准确的结果,在样型式别方面采用了光流法,并使用晶格光流来降低计算成本。最后把预测的 2D 关节位置可视化,构筑成 3D 骨架模型。用户可通过 VR 显示设备体验。

研究组成员也进行了实验。实验时所配戴的 VR 设备为 HTC Vive,让佩戴者躲避对方的拳脚动作。预测的 3D 骨骼影像和现实中对方的影像可同时显示。30fps 的视频可以提前15帧预测出对方0.5秒后的动作。实验结果是未使用 FuturePose 人员做出回避动作的平均反应时间为0.62秒,使用 FuturePose 系统成员的反应时间为0.42或0.41秒。


虽然东京工业大学制作 FuturePose 的初衷是为了格斗训练,但他们也希望通过不断完善这项技术,让 FuturePose 可以应用于其他竞技体育或娱乐项目中。

FuturePose 的论文已发表至 IEEE XPlore(英文),感兴趣的朋友可以了解一下。

http://ieeexplore.ieee.org/abstract/document/8658594



http://www.weibo.com/1998412373/HqWmyDiAl
http://n.miaopai.com/media/LVP24-hwFz1oSZV2cWxDwzqW15WijUaU


网友评论:
绯红之王!
海贼王世界线?
就是你了!绯红之王的部分能力
绯红之王!削除这段时间吧!
预测未来
训练归训练,人类肉眼不太可能发展出通过观察关节和肌肉的微动作里预测的机能吧。。。
格斗机器人前置
你的下一句话是“绯红之王!”
危 --> 跳
危 --> 踩

很需要这系统告诉我这个
找个拳击运动员和篮球运动员试试
这玩意和一般的motion prediction有啥区别…

— from Google Pixel 3, Android 9 of Next Goose v2.1.2
应用在仿生机器人高速运动保持平衡上可能更好。
刃牙里的绝对反应时间被打破了!
那按这理论,玩只狼不天天都在预测1秒后的事

  -
绯红之王能预测未来10秒动作,这个系统还差得远
zero什么也没有告诉我

泥潭怎么一个W的表情都没有
明明是鲁路修里俾斯麦的能力
0.5秒是为了人看.

换成一个AI, 对战一个人类.根本预测都不用.开着240帧速率扫描动作变化判断你要打哪里.
人家一秒可以计算上亿次.你一帧里面要干啥看得清清楚楚,都是慢动作.
看标题以为是那个大脑早于意识做出决定
用在足球运动上,过人都是假动作

啥叫一般的motion prediction.你说视频插帧通过比较两帧差异计算中间帧的视频处理么?你想想完全是两码事.一个是根据前后参考补中间,一个是补未来.
见闻色,

为什么不能?格斗里早都总结人出拳出脚的先兆是啥了,何况0.5秒,在格斗里这都富裕的跟什么一样了。

中国乒乓球队我觉得练的就是这些技能
没啥新意的东西,一看果然是rnn做的....这么说吧,rnn几年前就能写字了,这个和写字没有任何区别,写字是你的手在动,这个是你人在动。。。
倒放?
怎么感觉就是谷歌做了很多的那个动作预测的那个换了一个应用场景

其实体育运动里早就有类似的了,比如网球,预判除了靠研究对手习惯线路,很重要的一点就是靠对手的动作,由此也衍生出假动作这么一个东西
toei future time!
弄两个套一起训练是不是就能赶上绯红之王了
没啥新意,只能说外务省经费真是足。。。。
日本人又造假了
对此表示怀疑。训练库里只是跳来跳去的动作还是各种动作都有?现在给出的验证只是相同的动作,参考意义不大。

这个我理解,我的意思人眼能不能达到比较微观,比如肌肉纤维的观察水平,还是对整体的动作趋势做出判断。
视频末尾是不是咬人猫啊?

  -
想起SAO剧场版里那个预测对手动作的AR装置
这玩意值得当新闻吗…………

全自动人类行动轨迹预测机关枪系统
重点是人的智能能做得到的预判反应,现在让ai也能做到了(虽然只有0.5秒)
这个和以前通过大量录像带总结对手规律和对策差不多啊。不过省了很多时间

那让一个ai预测另一个ai预测的结果,岂不是可以预测一秒了

这个我觉得是生物学的内容了
ZERO SYSTEM雏形
石头剪刀布必胜机?
把预测结果再输入预测系统。。。“你会死在7分钟后!”
体育运动里影响最大的应该是棒球投手了

0系统的脑波增幅能预测未来?
不是提高拍骆驼反应时间的么
megalo box指日可待
俗话就是,看你撅屁股就知道你要拉什么屎。
个人觉得这还是蛮有用的。尤其是对于云VR,由于系统延迟不可避免,因此用这样的计算技术弥补一定的时间差。
我个人的判断是能做到双向0.2s,但是比较精准地获取运动神经的数据,就可以很好地减轻延迟和眩晕感。不论是远程还是本地VR。

补一下,不止vr,多种其他操作都会用到这个,比如云驾驶、远程手术等。能够提前个百十毫秒已经非常管用了。

一搜一大堆啊…cvpr之类的会少不了这种东西吧
比如:
http://github.com/una-dinosauria/human-motion-prediction/blob/master/README.md

— from Google Pixel 3, Android 9 of Next Goose v2.1.2
我在往前走路的时候突然在0.5秒内把裤子脱了它能预测出来吗
如果用激光打人的话,能不能精准确定脑干位置啊。或者觉得有两个点都是可能的落点,就一次发两道激光。
随便弄个舞蹈估计它就预测不出来了
半藏挂
石头剪子布试试?

这个还真有
年初李飞飞的组不是出了个类似的,那个好像是观测3.2秒,预测随后的4.8秒,不知道效果咋样

猜拳必胜的机械手几年前也是日本人做出来的
如果这两人突然往前跳也能预测出来吗
我就想预测2秒后我的抽卡结果
《前路迢迢》
炼金术士

在0.5秒内把裤子脱了,请

----发送自 App for Android.
草,会运用在格斗技上面吗?用在拳击上是不是无敌了?
我想起特德姜的一篇小说



大概就是未来发明了一个玩具,上面的灯会在你按下按钮前5秒钟亮(大概这个意思)。玩具上写着一句话“自由意志的假象”(老实说现在感觉可能没有这句话)

—— 来自 HUAWEI MHA-AL00, Android 8.0.0上的 v2.1.2

职业拳手应该都会吧,虽然面对其他职业拳手未必能有0.5秒,但碾压普通人

如那些录躲路人拳视频的家伙们
人类,你已经败了
老板,你在干什么,老板
卡二能几秒来着来自: iPhone客户端
终结者!
我以为是预测出你对象的行为
拳击里面早就把对手的身体动作与自己的攻击闪避动作形成条件反射了,所以才有欺骗抖动虚晃。这系统最好提高到2秒,但是从原理看来不太可能了

东京工业大学做了一个能预测对象0.5秒后动作的系统
我tm差点就信了
这不就是看前摇吗,分身斧躲技能啥的……

—— 来自 OnePlus ONEPLUS A5010, Android 9上的 v2.1.2
看见“长短期记忆”这五个字就不高兴看下去了,套模型做拟合然后预测时间序列的套路..至少在数学层面上没啥意思
不过把“动作”进行抽象的方式好像挺好玩的。看他演示应该是只考虑具有“屈”“伸”两种状态的关节,腰部颈部这种能任意活动的估计预测不了。这么一看可能运算量也不算太大?(还没看论文以上瞎猜的..

动捕方面和可视化方面就不了解了,肯定很贵..

总结:有钱真好啊,科研内容都这么好玩!比我们天天啃论文啃论文啃论文好玩多了!给我搞个这套玩具我保证论文进度贼快

  -

理论上应该可以,往前跳和左右侧跳的前摇动作还是有差别的,虽然肉眼可能不能瞬间分辨,但是机器分析能够精确到帧的话就会很容易。
炼丹最大的好处和最大的坏处都是只要是个人有点像数据就能差不多拟合出个什么来。
可以做进钢大木
预测在原理上不是很复杂,像那种能打乒乓球的机器人基本都要预测轨迹,这个相当于把球换成人,不过这个系统看起来有点好玩啊
反复橫挑也需要预测?