2020春节假期虚拟现实,AR、VR资讯汇总
Source:
2022
May. 20
与索尼合作,Hawkeye发布光场捕捉系统Meridian
Hawkeye Systems日前发布了一款全新的光场捕捉系统Meridian,并旨在推动沉浸式内容创作和电影制作的进一步发展。这家公司表示,Meridian代表了内容的圣杯:摄影六自由度。
Meridian实际尚是来自于Hawkeye Systems的未来子公司Radiant Images(于2019年签署收购协议),并且是受到了索尼电子的委托。它能够捕捉实况六自由度素材,允许用户在其中移动并环顾四周,同时保持实况摄影的观感。
团队指出,屏幕一直都是将观众与眼前画面分割开来得“第四堵墙”。借助Meridian,电影制作人将能够去除这堵墙,并在不影响图像质量的情况下将观众带到VR环境。
Radiant Images联合创始人Michael Mansouri表示:“沉浸式捕捉技术创新的重点在于超越VR,并允许观众能够在故事中走动。与索尼的合作使我们能够探索新的可能性,并实现这种具有前瞻性的解决方案。借助的Meridian,内容创作者可以实现真正具有影响力的成果。”
当浏览光场体三维内容时,用户可以通过完整的六自由度感受逼真的虚拟临场感,可以实现前后左右的移动或头部的环顾四周。尽管开发时是以索尼RX0作为参考,但Meridian捕获系统提供跨硬件支持,这意味着它支持各种合适的电影摄影机。
Meridian系统由安装在每个模块化面板内的24个同步等距索尼RXO摄像头组成。所述面板能够捕获穿过其区域的各种角度光线。它同时能够充当虚拟世界的“窗户”,支持各种堆叠布置并容纳任何尺寸的镜头,从而创建所需的沉浸式环境和支持用户打破第四堵墙。
韩国超感人纪录片采用虚拟现实技术使已故孩子与母亲重聚
Munhwa Broadcasting Corporation是一家韩国电视广播网络,近日,这家广播公司推出了特别纪录片I Met You的片段,这是一段利用VR讲述已故孩子与母亲重聚的故事。
本周,韩国电视广播网络Munhwa Broadcasting Corporation发布了特别纪录片I Met You的片段,展示了该公司如何利用VR和触觉反馈技术让Jang Ji-sung和她7岁的女儿Nayeon团聚,Nayeon在2016年因罕见的无法治愈的疾病而去世。
Jang Ji-sung身处于大型绿屏工作室的中心,戴着HTC Vive Pro头戴式头显以及一副装有Vive Trackers的触觉手套。在VR中,母亲Jang Ji-sung与Nayeon 3D化身面对面站立。当数字模型出现时,Jang伸出手拥抱她的孩子时立即哭泣起来。这是一个足以感动人的场景,这要归功于VR所创建的逼真的动作。
据《Aju Business Daily》报道,制作团队开发了8个月的时间,将Nayeon的图像和声音结合VR。他们甚至利用儿童模型通过运动捕捉来捕获更多逼真的动作和手势。
Jang Ji-sung在她的博客中写道:“我希望很多人在看完节目后会记得Nayeon。这样做的目的是为了安慰像我这样失去了孩子或者失去了兄弟或父母的人。”
VR利用各种沉浸式硬件的强大功能,使一个悲痛的母亲的梦想成为现实。由此可见VR的应用场景很广泛,随着这项技术的深入,未来将出现在更多的领域。
5G 4K VR H5 动漫……新技术配齐,闪电新闻开启山东两会报道
随着山东省“担当作为、狠抓落实”工作动员大会的召开,“抓落实”各项举措振奋人心。在即将召开的山东省十三届人大二次会议和省政协十二届二次会议上,政府工作报告将如何谋划新一年工作,参会的代表和委员们又将如何谈落实?
今天开始,山东广播电视台闪电新闻正式开启两会报道,5G、4K、VR、H5等新技术手段将全面应用。移动优先、融字当先,“全员”做“全息”,“全程”获“全效”,将力争为广大用户提供快速、权威、丰富的两会报道。
移动优先,“全员”做“全息”
1月25日,习近平总书记在中共中央政治局第十二次集体学习时,深刻诠释了“全媒体”的概念:“全媒体不断发展,出现了全程媒体、全息媒体、全员媒体、全效媒体”。
要突出全媒体,移动端要优先。为了做到“四全”媒体,2月11日,闪电新闻进行了一次特别升级,其中重要的一项更新便是突出上线了“两会”频道,突出全程报道、全息呈现、全员上阵、全效覆盖。
两会期间,山东广播电视台旗下广播频率、电视频道等都将以闪电新闻客户端为主阵地,坚持移动优先战略,所有上会记者以闪电新闻为首发平台,创新移动新闻产品,打造移动传播矩阵,加快“主力军”进“主阵地”的步伐。
新技术的大规模应用,是今年两会报道的一大亮点。闪电新闻新版本的另一大更新,则是上线了VR直播功能。在今年山东两会上,闪电新闻也将首次运用的“5G+4K”技术,与山东广电视觉科技有限公司、山东移动5G、华为合作,提供现场VR直播。即使不到现场,滑动手机屏幕就可以身临其境感受大会盛况。
12日上午,闪电新闻推出的省两会首个H5作品《新春问省长——“担当作为、狠抓落实”网络问政观察员征集》上线,在这个“我有问题问省长”的交互作品中,网友们可以通过省长的卡通形象向省长提问。
会议报道上,鲜活多元的融合产品H5、图解、动漫、访谈、评论样样配齐,通过系列融媒报道手段和方式,闪电新闻客户端力图生产一批“现象级”融合传播精品,打造“两会”融媒报道新体验。
多屏融合,“全程”获“全效”
以移动端“小屏”为龙头,电视屏、电脑屏、户外大屏多屏融合,是今年山东广播电视台两会报道的一大突出亮点。
12日中午,闪电新闻记者崔真真进行的5G移动直播“山东省政协十二届二次会议委员‘刷卡’报到”在闪电新闻客户端和山东电视公共频道《新闻午班车》并机直播,拉开了两会报道的序幕。
通过“先小屏后大屏,多屏融合”的理念,实现移动端与传统端多屏互动,通过“全息”表达方式,提高“全效”传播能力。
闪电新闻客户端与山东卫视《山东新闻联播》同时开设“担当作为抓落实”、“我从一线来”专栏,突出短视频传播力,以“抓落实”为主线,围绕真抓实干这个主题,展示山东改革发展取得的新进展、新成效。
设在山东广播电视台融媒体“中央厨房”的VIP演播室,两会期间也将“不关门”,全程为代表、委员们敞开大门,在这里录制的品牌栏目《两会大家谈》除了在山东广电大小屏、多栏目播出外,还将通过人民日报全国党媒平台、新华社客户端、央视新闻+、今日头条、腾讯新闻等平台同步推送,做大“全效”影响力。
山东人民广播电台则将广播访谈“做客山东台”与闪电新闻并机直播,让广播节目能听、能看,通过手机端传递“好声音”,围绕新旧动能转换重大工程、打造乡村振兴齐鲁样板等主题展开报道。
动漫作品是广播电视机构的专长,以语言通俗、画面精美受到广大用户欢迎。两会期间,电视齐鲁频道联合闪电新闻客户端推出“追梦2019”、“两会@你”专栏,以动漫短视频的形式,以主人公“小梦”为主角,对政府工作报告进行梳理和解读。
此外,广播经济频道开设“两会进行时”,电视农科频道“两会群众眼”,电视生活频道推出“帮办”跑两会、“数据看两会”、“两会关键词”等节目,聚焦两会动态。
给VR行业送钱?电信计划2020年实现300万部VR终端
中国通信运营商电信于1月15日在北京举行了“中国电信2020年终端生态合作推进会”,并在大会上宣布,计划在2020年实现“6000万部5G终端,300万部VR终端,4000万部智慧家庭终端,2000万部物联网模组”的终端发展目标。
据报道,在VR业务上,中国电信联合定制了20多款VR终端,将建设VR娱乐个人信息系统。另外,中国电信号百公司还与韩国应用商合作,提供VR沉浸式体验和切片、分发能力保障。
目前我们不确定中国电信所说的终端设备包括哪些,但显然会是以核心终端VR头显为主。如果中国电信计划采购的VR终端是以PC VR、一体式VR、眼镜式VR为主,这对国内VR厂商来说会是一个非常好的消息。但所说终端如果主要以Cardboard类盒子为主,这就有点在浪费财物资源了。
值得一提的是,对于都是创业公司的VR头显厂商而言,量产计划上更是小心翼翼,如果滞留大量库存可能就要面临破产。而映维网估计2019年中国市场的VR终端头显销量不到100万部,所以面对电信300万部VR终端的目标,可能会出现市场产能严重不足,而这个需求量还不包括移动和联通。所以,中国电信会提前预付款给头显厂商,以打消他们的担忧确保能放心开动生产吗?
当然,如果是Cardboard类盒子需求,300万目标就如晒晒水,毕竟曾经达到了年近1亿的销量。
“云端”助力!黑龙江推出在线展览、VR全景游
为打赢新型冠状病毒感染肺炎疫情防控战役,黑龙江省各文旅部门相继采取闭馆措施,多项原定在春节期间推出的文化展览临时取消。为了丰富广大人民群众在疫情防控期间精神文化生活,省内部分景点和博物馆、图书馆、美术馆等公共场所依托互联网、新媒体和虚拟现实表现手段,满足各界公众的需求,将公共文化服务触角延伸到千家万户,“云看展”“云体验”成为群众文化生活的新选择。
黑龙江省博物馆360度全景游
记者从黑龙江省博物馆了解到,为防止人员聚集场所产生交叉感染和疫情扩散,保证广大观众和一线员工的身体健康和生命安全,黑龙江省博物馆从1月24日起暂时闭馆。为了更好的满足全国各地群众的精神文化生活,省博物馆在公众号推出360度“全景游”,集纳了文物总店、于志学美术馆、白山黑水海东青、冰版画艺术展览、消逝的恐龙国王等近30个展览,身临其境的犹如自己走到省博物馆里,吸引不少网民关注和转发。
省美术馆推出典藏经典市民“云看展”
黑龙江省美术馆在线展览
“为方便观众回顾,我们有些展览在撤展后就会进行线上展览。自疫情以来,市民们减少出门,但这些在线展览的浏览量明显上升。”省美术馆傅宇说,如黑龙江省美术馆典藏作品欣赏——萧红,配有《呼兰河传》木版连环画,我们在配上清晰的图片的同时,也进行了简单的讲解,展浏览量截至目前达到千余次,线上看展时间更灵活,随时拿起手机就可以看。
齐齐哈尔市推出“VR鹤城”
齐齐哈尔市推出“VR游鹤城”,让全国市民足不出户也可赏鹤城。“VR鹤城”可以让市民切身体验视觉享受,线上游览鹤城美景。“VR鹤城”目前有扎龙国际级自然保护区、龙沙动植物园、奥悦水世界等,还将陆续推出更多景点。“我们身处网络时代,今年春节的‘云端’属性更加凸显,网络让信息更加公开,新媒体方式也让更多的人感到更加便捷。”齐齐哈尔市有关工作人员说。
Verizon 5G挑战赛获奖名单:涉及AR\VR\AI公司
早在2019年CES期间,美国运营商Verizon宣布了一项5G挑战赛,旨在扩展5G创新应用,找到适合低延迟、高带宽的场景。今天,Verizon宣布了结果,是来自AR、VR、AI领域的初创公司,他们分别别获得100万美元、50万美元、25万美元奖金。
Ario公司获得100万美元奖金,其旨在通过5G网络提高网速来改善图像识别综合性能。
Garou获得50万美元奖金,这是一个以3D模型为基础的VR平台,旨在通过5G网络实现实时访问,且支持多人共享。
LexSet获得25万美元奖金,这是一个计算机视觉AI系统,其通过特殊算法将整个逼真的3D场景解析为边界和蒙版、法线贴图、深度图等,让计算机系统更清晰的了解图像含义。
从算法到应用:滴滴端到端语音AI技术实践
滴滴正在尝试推出司机智能助手,为司机提供语音提供服务。目前,部分地区的司机可以通过与APP语音交互方式方便快捷地实现信息查询、接受订单、取消订单等,无需手动操作手机,积极响应了部分地区对驾驶过程中使用手机的限制政策和司机的安全诉求。
滴滴的智能客服系统,能利用语音识别、NLP、知识图谱等技术辅助人工客服,提高人工客服处理问题的效率,并减少人工客服在重复、简单问题上的处理量。比如在用户进线的时候,会请用户通过语音先描述他的问题,智能系统可以自动识别并且基于信息去预测用户大概的需求并为人工客服提供一些决策信息,等电话流转至人工客服,人工客服一接起来的时候,他已经能大概知道用户的问题从而能帮助用户更好地解决;智能系统还会自动化地生成工单摘要,帮助人工客服提高效率。不仅如此,智能系统还可以学习人工客服的处理方式,从而使机器越来越接近人的复杂决策水平。
语音识别 ( Automatic Speech Recognition, ASR ) 技术是智能语音交互领域中发展最快,同时是语音相关任务中最有挑战也是技术之一,所以今天重点围绕语音识别进行介绍。
本文主要包括以下几个部分:
① 语音识别的基本概念
② 语音识别深度学习方法
③ 基于attention的语音识别相关方法
④ 语音识别相关的任务
史上一次超大规模AI抗疫
即使是平时对人工智能技术没有多少兴趣的人,在这段特殊时期也会注意到 AI 这个字母组合。
2 月 4 日,工信部发布了《充分发挥人工智能赋能效用协力抗击新型冠状病毒感染的肺炎疫情倡议书》,其中号召尽快利用 AI 技术补齐疫情管控技术短板,充分挖掘 AI 技术在新型冠状病毒感染肺炎诊疗以及疫情防控的应用场景。
这可能是历史上第一篇将 AI 技术与抗击疫情结合在一起的政府倡议;这场在中国发生的新型冠状肺炎全面阻击,也因时空关系的特殊,成为了人类首次将 AI 技术应用到大规模公共卫生事件。
此时此刻,实验室、医院、公共交通枢纽、社区中,各种各样的 AI 技术与产品正在各司其职,与疫情展开全力赛跑。我们来统计一下,疫情之下 AI 技术都已经发挥了哪些作用;这些作用带给 AI 行业、医疗行业,乃至社会各界的启示又都有哪些。
客观来说,AI 技术在抗疫中仅仅担任辅助。但或许我们在疫情结束时会问这样一个问题:经历了这次考验之后,我们是否可以并且应该更大力发展公共卫生与医学科研领域的智能化进程?
如果答案为是的话,我们应该如何在教训与经验中找到未来?
疫情的底色从来都只有残酷一种,但人类也往往能够从残酷中找寻出路。现代医学史普遍认为,1918 年的西班牙大流感,促使人类完成了现代公共卫生防护体系的建设。那么从 AI 在抗疫战场上的表现,我们或许可以开始思考更多。
苹果AI技术新突破:Siri可识别热门单词和多语种说话者
说话者识别和语音触发检测
在论文的第一部分,苹果研究人员提出了一种训练好的AI模型,可同时执行自动语音识别和说话者识别的任务。正如研究人员在论文摘要中所解释的那样,基于语音个人助手识别的指令通常以触发短语(例如,“嘿,Siri”)为前缀,检测该触发短语涉及两个步骤:首先,AI需要判断输入音频中的语音内容是否与触发短语的语音内容相匹配(语音触发检测);其次,AI还需判断说话者的语音与注册用户或用户的语音是否匹配(说话者识别)。
这两个任务通常被分开来看,但是论文的合著者认为,对说话者的了解可能有助于判断声音信号中的语音内容,反之亦然,这有助于对这两种属性进行评估。
研究人员设计了三套能够学习语音和说话者信息的模型,并对一组数据集进行训练,这组数据集包含1.6万多小时的带注释的样本,其中5000小时的音频带有语音标签(其余的仅带有说话者标签)。
此外,实验还邀请了100多位说话者使用智能扬声器设备在一系列声学设置中为语料库贡献声音,包括安静的房间、来自房间内电视或厨房设备的外部噪音,以及用录音机大声播放音乐。同时,来自电视和广播的2000个小时不包含触发短语的连续音频记录也被添加进来,以此来测量“误报”率。
经过测试,这类模型展示出了学习语音和说话者信息的能力,且在同等数量参数条件下,每个任务的精准性与基线模型相差无几。实际上,在提出的三个模型中,其中一个在“多个”设置中的表现优于说话者识别基线,在执行与本文不相关的任务时比基线提高了7.6%。
研究人员写道:“这些结果有个有趣的特征——训练模型时使用的是不相交的数据集,即每个音频样本要么具有语音标签,要么具有说话者标签,每个音频样本不会同时具有两个标签。通过对结果的观察,研究人员提出了一种灵活的设计,可以通过连接不同任务的训练数据去训练多个相关任务的模型,而不是为每个训练样本获取多个标签。从实际的角度来看,这样做能实现两个任务之间的计算共享,从而节省设备上的内存、缩短计算时间或等待时间,并能节省消耗的电量/电池。”
浙江移动为25家医院新建5G基站 为温州“火神山”医院开通5G VR远程会诊
面对新型冠状病毒感染肺炎疫情的严峻形势,浙江移动迅速启动应急通信保障机制。除了全力保障医院等重点区域的通信畅通,还火速为新增5G通信需求的全省25家医院紧急建设开通了38个5G基站,全力保障5G远程医疗、远程会议等信息化手段应用,并为刚刚建成的温州“火神山”医院开通了5G VR远程诊疗应用。
据悉,自疫情发生以来,浙江移动已投入网络保障人员13171人次,尤其是对全省95家定点医院以及逾6000点保障小区进行重点监控保障,全力确保网络畅通、平台稳定和网络信息安全。在此基础上,浙江移动还全力提供防疫工作相关的信息化应用服务,包括开通全省卫健系统视联网平台,提升疫情防控调度指挥效率;为多家医院建立开通远程医疗系统和远程会诊平台,尤其是5G VR远程治诊疗系统;推出“5G热力成像测温系统”实现非接触式自动精准测温等。针对包括温州附属二院(瓯江口院区),温州第六人民医院(瓯海警校)、湖州中心医院、湖州第一人民医院、金华市中心医院等在内的全省38家新增5G网络需求医院,浙江移动迅速启动紧急响应机制,调集应急施工队伍,全力保证开通5G基站。
“我们一般都是接到任务以后,连夜启动勘查设计,基本要保证当天就完成建设开通和测试验证,从而为疫情保障提供有效支撑。”浙江移动一线工作人员表示。
1月27日,浙江移动接到通知,温州版的“火神山”医院——温州医科大学附属第二医院瓯江口院区正在加足马力建设,希望给予通信网络保障和信息化支撑。为此,浙江移动省市县三级联动,组建定点保障党员先锋队,打通应急立项审批流程,实行现场多专业联合办公,仅仅一天就快速完成了院区移动无线信号覆盖以及宽带专线开通。
2月4日该医院已于交付使用,现场不仅实现了4G覆盖率99.8%,也很好地覆盖了5G网络。浙江移动在温州市5G远程诊疗平台的基础上,为医院开通了5G VR 360度全方位高清远程诊疗的应用,帮助专家和医护人员实时观察隔离病区内的患者,有效减少医疗团队与病患的直接接触。
图说:浙江移动组建党员先锋队,于一天内快速完成温州版的“火神山”医院——温州医科大学附属第二医院瓯江口院区移动无线信号覆盖以及宽带专线开通。
培训类VR预计将以61.8%的复合年增长率增长
虽然说现在VR的市场还不算太大,但是目前的发展速度还是很快的。去年VR市场的价值为115.2亿美元,有专家预计到2025年将达到879.7亿美元。
VR市场在2019年的价值为115.2亿美元,预计到2025年将达到879.7亿美元,2019年B2C VR软件的年度销售额首次突破10亿美元大关。
具有6DOF的无线VR头显Oculus Quest的需求很大,以至于全球都在短缺。优质的内容和更便宜的价格、更易于使用的硬件是B2C市场的推动力,另外企业级VR也极大地推动了VR的普及。
IAG和沃尔玛等公司进行了大量VR案例研究,并取得了骄人的成绩。虚拟现实已经成为危险工作环境的首选技术,壳牌,雪佛龙和埃克森美孚等许多能源公司都将虚拟现实看作是培训更多员工进行风险,远程和罕见操作环境的解决方案。
在未来三年中,培训类VR预计将以61.8%的复合年增长率增长,并且预计到2023年将成为VR B2B支出最大的使用案例。Oculus已发布其手部追踪测试版,该版本在某种程度上消除了对控制器的需求。Tesla Suit,BeBop和许多其他公司宣布发布了触觉手套,可在VR中提供模拟的触感和触感。
新的商业模式与VR新产品息息相关,随着市场的增长,那些业务模式能满足客户需求的公司也将获得更多机会。
如今,物联网传感器已出现在许多新的“智能”产品中,高速宽带日益普及,并很快通过移动5G普及。Google和Amazon正面向企业提供AI和云计算,而改进的移动处理器正在增加硬件的能力,同时降低成本。
沉浸式VR动画《Gloomy Eyes》荣获VR水晶奖
HTC与法国VR製作公司Atlas V共同出品、联合製作的沉浸式VR动画《Gloomy Eyes》(暂名:咕鲁米的眼睛)首部曲《The Encounter》6月中在素有「动画界奥斯卡」之称的法国安锡国际动画影展竞赛单元中获得最高荣誉「VR水晶奖」殊荣,近日再宣布由金曲歌王萧敬腾配音!
《Gloomy Eyes》国际版由柯林法洛(Colin Farrell)配音,华语版HTC则邀请萧敬腾担纲诠释!萧敬腾近期将进录音室说故事,片中扮演一位墓园的守墓人角色,对于初次挑战VR声音演出,老萧跃跃欲试,更卖关子说:「已做好准备了,请大家拭目以待!」
《Gloomy Eyes》运用游戏引擎即时运算,搭配HTC VIVE 6自由度、全方位自由移动功能,观众可以在动画中随意走动,犹如漫游在动画的世界中。
动画描述一名总是和群体格格不入的小男孩Gloomy,因为偷了村长的东西,不得不逃入森林躲避赏金猎人,在过程中与小女孩Nena意外展开一段纯纯的爱。
今年迈入第43届的法国安锡国际动画影展上週在法国安锡盛大举行,它与威尼斯影展同于2017年设立VR竞赛奖项,这次《Gloomy Eyes》首部曲《The Encounter》从来自30个国家、90部参赛VR动画片中入围竞赛单元,最后在入围的9部VR动画作品中脱颖而出获得最高荣誉「VR水晶奖」。
HTC VIVE ORIGINALS总经理暨《Gloomy Eyes》联合製片人刘思铭在得知作品获得安锡国际动画影展最高荣誉肯定说:「一个好故事的最终目标就是走向全世界,我们正致力于整合华人与欧美影视资源,为全球观众带来更多元沉浸式的作品体验。」
《Gloomy Eyes》目前正受邀于上海国际电影节展映,同时下週也将移师青岛VR国际影像周,于6月24至27日进行4天展映。
青瞳视觉编译(如版权问题,请及时联系青瞳进行删除,给您带来的不便请谅解)