小丸工具箱官方网站
用视频记录生活已经成了现代人们生活的一种常态小丸工具箱转换视频有点卡,直接用手机录下慢动作也是现在很多手机必备的一个功能小丸工具箱转换视频有点卡,但当小丸工具箱转换视频有点卡我们用最低的速度播放视频、回味美好时,会发现视频的流畅性十分尴尬,严重的卡顿差点让人以为这是在看PPT。然而NVIDIA——英伟达公司最近研发出的一款AI系统,完美地解决了这个问题。
会“脑补”的AI
这款由Nvidia携手马萨诸塞州大学和加利福尼亚大学共同研究完成的AI系统,可以将原来60帧/秒的视频提升到480帧/秒,看起来像用高速摄像机以更高的帧速率拍摄的,这下可省了不少相机和后期的钱了。
有人说,小丸工具箱转换视频有点卡我的手机就可以录制慢动作视频啊,为什么还要用AI?
首先,你的手机可没你想象的那么强大。由于高帧率需要庞大的缓存和数据写入系统,像手机这样的普通设备很难支撑,所以用它们来长时间纪录并不实际(不信你用自己的手机录下慢动作视频看内存有多大)。
其次,如果对已经录制的视频进行慢速回放,创建流畅的慢动作视频则需要短时间捕捉多帧画面,如果所录的帧数不够,那么最终的慢动作视频看起来会很不流畅。要知道,这种专业的高速摄像机是非常昂贵的,因此大多数人会选择用软件试图填充帧数,但是这样就会造成画面的移动不那么自然。
而英伟达的这款AI就能完美地解决这种问题,它可以将任何视频转换为慢动作视频,同时也不会让慢放的视频看上去那么不自然。
下列对比图中的第一张图都是对原视频慢放8倍后的效果,可以看到有明显的卡顿。第二张图则都是用英伟达的AI转换后的视频,播放速度480帧/秒,画面流畅并且没有卡顿。
展开全文
旋转时,帧数少的画面中头发似乎是定在了空中。
这款AI在体育赛事中的应用将十分广泛。
左图中的气球破裂后,水和球一起直接落入泳池里,在右图中却可以清晰地看到水以球体呈现的瞬间。
AI最重要的特点就是具有自我学习的能力,比如阿法狗就是。在研发这款AI时,研究人员们借助 Nvidia Tesla V100 GPU 和 cuDNN 加速的 PyTorch 深度学习框架,用 11000 段 240 fps 视频对这套系统进行了训练,最终让它可以填补慢动作视频中缺失的帧。
也就是说,研究人员们让它对着一万一千段视频不断学习,以确定不同视频中物体在框架和帧间的移动位置,进而可以“脑补”出原本缺失的那一帧画面,让视频在极低的速度播放时依旧流畅、自然。其实,也就是基于人工智能技术,在两帧画面之间,自动生成补充上“缺失”的画面帧,让慢动作重播得以实现。
网穿球体的瞬间被“脑补”出来。
Deepfake实现AI换脸
视频真假难辨或引发信息危机
除了可以将缺帧的空白视频补全,AI还能给视频中的人换脸。看得出来图片中的都是谁么?
有川普的发型,也有已经在复联3中挂机下场的洛基。可小丸工具箱转换视频有点卡他们为什么都长着尼古拉斯凯奇的脸?这可不是简单的ps,是一款名为Deepfake的AI完成的换脸视频中的截图。
比如,你看得出来这位是希拉里还是川普么?
你的神奇女侠此刻正躺在白色的床单上,场景看上去似乎不那么纯洁?
其实deepfakes的算法不算高深复杂。它基于TensorFlow和Keras等开源软件,通过在Google、YouTube等网站收集大量图像素材,训练系统的深度学习网络。经过大量的训练之后,系统会将图像变成训练对象的样子。大致分为以下几部:
把这些想得简单点,其实就和我们用来自拍的faceu激萌相机是一个道理,只不过素材模型都是可以自己选定的,用你的照片、你身边人的照片都可以。但这也成了deepfakes被称为“黑科技”并且火速封杀的原因:想想吧,如果它真的和大数据关联上了,那指不定会有谁用你的脸通过视频骗取亲友钱财,甚至在某个夜深人静的时刻,你打开电脑,却发现小电影中的人长着和你一样的脸,想想也是够刺激的,不是么?
点击以下文字文字,查看更多精彩内容: