不只是换脸 应用3D+VR你还能换上立体表情
本篇文章1629字,读完约4分钟
这是由氪36发起的早间专栏“早起看早”。我们将在国内外筛选出许多高质量、有趣的早期项目与您分享。早起几分钟,看看国内外互联网行业正在发生什么~
为科技提供的是实时视频中的三维贴纸和实时背景替换效果。
文|宗弟
不久前,在氪36报道的htc vive x虚拟现实加速器第二批计划清单中,我们提到了凯威科技是一家初创公司。
作为一家提供人脸技术消费产品解决方案的公司,凯威科技主要提供三种功能:基于摄像头的捕捉和跟踪技术、3D图像建模和视觉效果。
一般来说,目前主流的人脸识别和跟踪方案需要依靠传感器和深度相机等硬件设备,成本高,门槛高,不适合移动终端。凯威科技提出的解决方案是依靠手机摄像头在手机端实现人脸识别和跟踪。
凯威科技首席执行官杨彤告诉36,这种解决方案之所以有效,主要是因为其基础在于两个方面:第一,人脸捕获可以依靠一种新的图像算法反过来计算特征点信息,通过计算人脸表情值和位置信息数据,然后对特征点信息进行修正,从而达到基于特征点提取的人脸变化识别和捕获的效果;另一点是,目前移动终端上的摄像头可以获得三原色的信息,并且还可以保证一定的分辨率,这样就可以准确的识别人脸的关键点,从而可以在移动终端上使用该技术。
图为3d贴纸技术的展示图
杨彤表示,与竞争产品相比,目前基于技术的解决方案功耗更低,内存占用更少,因此在延时和流畅度方面有一定优势,尤其是在低端安卓机型上。
此外,凯威科技不仅可以提供2d贴纸,还可以借助平面信息生成3d效果,如3d贴纸和3d面部表情。杨彤认为,这是与竞争产品相比的最大优势,即二维关键点转化为三维人头模型的技术(该技术已获得相关专利授权)。杨彤告诉《36氪》,与2d关键点对2d模型和3d关键点对3d模型这两种主流技术相比,凯威科技可以在保证较小的模型包和信息量的同时,实现更具立体感的效果。
首席运营官杨宽举了一个例子。“我们现在可以实现的是,当用户使用它时,它不再是市场上的纸质标签,而是一个更加耦合的三维标签。用户的面部特征;另外,我们可以实现实时背景替换效果。杨宽表示,考虑到3d模型的功能,未来将制作一款类似贴纸工具的3d模型制作工具,对3d设计师开放。
目前,技术的商业模式类似于市场上同类玩家的商业模式。首先,它有一个简短的视频应用程序,在C端呈现人脸3d ar效果,还会有一些增值服务;另一方面,他是2b的技术服务提供商,并向外界许可sdk(销售数据尚未披露)。目前,kiwiface手机和虚拟现实的sdk被直播、pepper直播、直播、短视频和虚拟现实服务提供商采用。
凯威科技3d面部表情技术
对于未来的业务发展,杨彤的想法是打造一个3d模型商城(类似于微信表情商城,想打造一个收集和发布3d模型资源的平台),比如通过制作课件切入vr教育市场,通过开放3d模型切入vr社交和直播市场,通过与广告商合作进行定制化的vr/ar品牌广告营销。
在团队方面,创始人兼首席执行官杨彤毕业于加州大学伯克利分校,主修数学和计算机科学。他曾是微软、领英和fitbit的高级工程师和项目经理,拥有三项个人专利;杨宽,联合创始人兼首席运营官,拥有加州大学伯克利分校金融工程硕士学位。他曾是穆迪的风险分析顾问和定量研究员,也是伯克利利安健全的创始人。其他团队成员有相关的技术背景,如华为、推特和unity。
凯维科技此前已经从李涛风险投资公司、政府产业基金和其他天使投资者那里获得了数百万美元的天使投资。正在寻求下一轮融资。
事实上,根据Kr的说法。36、虽然巨人vr目前的卡位优势明显,但一级市场的投资者普遍认为巨人VR尚未实现技术上的完全垄断,在垂直细分方向上仍有一定的市场空。然而,要将市场与虚拟现实技术区分开来,还应该满足几个条件。例如,技术创新的方向应该是能够改变大多数人的生活并解决急需需求的技术;其次,支持这一方向存在技术障碍;最后,这项技术应该是可行的,并在短时间内商业化,这样资本就可以看到出路。
标题:不只是换脸 应用3D+VR你还能换上立体表情
地址:http://www.f3wl.com/fsxw/8805.html
免责声明:佛山日报致力于打造最全面最及时的佛山新闻网,部分内容来自于网络,不为其真实性负责,只为传播网络信息为目的,非商业用途,如有异议请及时联系btr2031@163.com,佛山日报的作者将予以删除。