Quest最新面追技术:可追踪舌头动作;我国发布AVS VR音频团体标准

发布时间:54 阅读次数:54

  •瑞立视入选《元宇宙创新示范100强案例》,荣获“年度最佳元宇宙创新场景应用奖”

  得益于该公司最新版本的OpenXR面部跟踪技术,Meta Quest Pro现在已经可以支持对舌部动作的追踪。有国外媒体评论,这可能是2024年彻底改变VR的技术。通过最新的面部追踪功能,用户可以让自己的虚拟化身更好地表达情绪。

  此前,HTC制作了一款面部追踪器配件,可将嘴巴和舌头的运动与化身同步,并且与许多VR头显兼容。当然,如果可以避免的话,用户还是更喜欢不增加更多的重量和额外的费用。借助Github上korejan的新ALXR模块,用户现在可以在兼容的PCVR应用程序和VRChat等游戏中用舌头表达情感。

  据报道,该扩展通过名为VDX的应用程序与Meta的AirLink和虚拟桌面配合使用。用户可以将舌头跟踪扩展安装为ALXR的本地模块,如果使用ALVR流,则可以将其安装为远程模块。但是,安装此扩展不会为用户的虚拟化身添加舌头,也无法帮助VRChat的Quest版本化身添加。此外,很少有游戏和应用程序支持面部跟踪。只有当用户已经在PC上的VRChat或其他社交VR应用程序中使用面部或身体跟踪时,才有必要进行安装。

  据“新一代人工智能联盟”公众号消息,日前,中关村视听产业技术创新联盟批准发布《信息技术 虚拟现实内容表达 音频》(标准号 T / AI 125-2023)团体标准。

  起草单位包括:清华大学、北京理工大学、中国电子技术标准化研究院、北京字跳网络技术有限公司、赛因芯微(北京)电子科技有限公司、北京全景声信息科技有限公司、清华大学天津电子信息研究院、北京大学、咪咕文化科技有限公司、腾讯科技(深圳)有限公司、北京爱奇艺科技有限公司、小米通讯技术有限公司、全景声(北京)智能科技有限公司、华为技术有限公司、中国传媒大学。

  AVS VR音频标准描述了虚拟现实音频表达所需要的元数据、渲染器及面向传输的数据流方式,支持3DoF和6DoF等虚拟现实场景下所需要的技术功能,涉及基于声道、对象、场景三类信号的采集制作和渲染回放等相关技术描述。AVS VR音频标准中采纳的所有技术均依据VR音频测试方案进行了第三方测试验证和实际系统中的系统验证。

  ISOCELL Vizion 63D是一款用于测量深度和距离的 3D ToF 传感器,能以极高的精度和清晰度测量深度和距离。而ISOCELL Vizion 931是一款全局快门传感器,可以在不变形(不产生果冻效应)的情况下,拍摄快速移动的物体。目前,这两款传感器正在向全球OEM厂商提供样品。

  三星下一代传感器开发团队执行副总Haechang Lee表示:“三星ISOCELL Vizion 63D和ISOCELL Vizion 931采用先进的传感器技术设计,对于促进机器人和扩展现实(XR)等未来高科技应用的机器视觉至关重要。凭借我们在技术创新方面的丰富历史,我们致力于推动快速扩张的图像传感器市场向前发展。”

  近日,美国专利商标局正式授予苹果一项与未来智能眼镜相关的专利。更具体地说,该专利涵盖了新型变形传感器的使用,以确保呈现给用户的AR视觉效果在跌落事件、天气剧烈变化等情况下保持正确对齐。

  在苹果的专利背景中,他们指出,头戴式设备等电子设备的外壳被配置为佩戴在用户的头上。在使用头戴式设备期间,存在设备中的部件可能有由于外壳变形而错位的风险。例如,显示组件可能变得未对准,这可能对用户满意地观看图像的能力产生不利影响。

  这项专利之前从未公开过,该专利涉及一种头戴式设备,该设备可能具有头戴式支撑结构,可配置为佩戴在用户头上。头戴式设备的头戴式支撑结构可包括形成一副眼镜的镜桥和镜腿,也可包括形成护目镜或其他头戴式设备结构的外壳壁和其他外壳结构。专利中提及的传感器电路(如应变计电路)可测量由于外壳结构变形导致的指向矢量偏差。设备中的控制电路可使用传感器测量值来补偿指向矢量相对于彼此的方向变化。

  在一个示例配置中,该专利应用下,头戴式支持结构的配置使左右眼框的图像即使在头戴式支持结构的侧面部分变形的情况下也能令人满意地相互对齐。

  Meta CTO:Meta对AI和元宇宙的长期押注在2023年取得重大进展

  近日,Meta首席技术官Andrew Bosworth发布了关于Meta最近一年的年终总结。其表示,Meta对未来技术的两项长期押注——人工智能和元宇宙2023年取得了重大进展,更重要的是,它们开始互相结合。该公司在2023年取得的进展意味着生成式人工智能正在进入世界上最受欢迎的应用程序的核心,而混合现实已成为大众市场头显的核心。此外,Ray-Ban Meta智能眼镜将首次让AI从我们的视角看世界。

  Andrew Bosworth在总结中强调了AI大模型的重要性。据其称,Llama和Llama 2受到了开发者社区的欢迎,下载量超过1亿次,并且在迭代过程中来自世界各地的组织不断改进。

  Andrew Bosworth认为,今年,Meta在两个最大的长期技术——AI和元宇宙上的押注在今年得到了结合,并取得了一定成就,这非常有力地提醒我们保持对未来技术的健康投资的重要性。它让我们对未来十年需要实现的创新有了更清晰的认识。

  Wearable Devices Ltd.是一家专注于人工智能驱动的非接触式传感可穿戴设备技术成长型公司,近日,该公司宣布其最近向美国专利商标局提交了一项专利申请,涉及用于增强现实和虚拟现实突破性非接触式捏合缩放技术。这一发展标志着AR/VR时代的扩展和丰富,为数字交互树立了新标准。

  据了解,创新的基于手势的控制系统允许用户通过自然的手部和手腕运动与AR和VR环境进行交互,从而增强整体用户体验。这种非接触式技术不仅简化了交互,而且使其更加直观,反映了日常智能手机使用中常见的操作。

  可穿戴设备公司首席执行官Asher Dahan表示:“我们的非接触式控制技术不仅仅是一项进步,更是AR/VR行业的一次变革。我们正在为用户和开发人员等开辟新的可能性,使这些技术更加实用比以往任何时候都更易于访问、更具吸引力和多功能性。这只是我们通过创新和用户友好的解决方案丰富数字时代的旅程的开始。”

  Virtualware是虚拟现实解决方案的先驱,近日通过其首席执行官Unai Extremo发表了一封公开信,来纪念其成立20周年。在公开信中,该公司公布了2024-2026年战略计划,强调在虚拟现实领域的创新和全球扩张。

  据了解,该战略计划侧重于四个关键支柱:扩张并专注于 VIROO、卓越的VRaaS产品和服务、社会影响和可持续性、吸引顶尖人才。

  Virtualware首席执行官在声明中表示对该战略计划“为沉浸式技术行业树立新标准”的潜力充满信心。该计划预计将推动显着的有机增长,并使Virtualware处于VR和AR技术进步的前沿。据悉,该公司正在通过寻找可兼容的公司进行潜在的合并或收购,积极探索无机增长的机会。这种方法旨在扩大公司的影响力,增强其技术能力,并加速快速发展的虚拟和增强现实市场的增长。Virtualware的领导团队将继续致力于寻找符合其创新愿景的协同合作伙伴关系,并为公司在全球市场的持续成功和扩张做出贡献。

  美容零售商Beautyque NYC于2020 年作为第一家3D虚拟美容店首次亮相,近日,该公司正在测试美容领域的一项新技术创新:一款虚拟现实应用程序,让用户沉浸在虚拟美容店中,并与他们互动并购买产品。

  具体而言,Beautyque Verse将VR技术与美容购物相结合,用户将能够在3D环境中探索、互动和购买产品,并与其他购物者互动。详细的产品展示增强了产品探索体验。接下来,超过20款产品还将具备AR试穿功能。“BeautyQoach Amara”人工智能将在此过程中引导用户浏览商店,并根据聊天互动提供量身定制的产品推荐。

  联合创始人Sonia Khemiri表示:“Beautyque Verse 代表了我们将科技与美容购物相融合的信心。在这个平台上,沉浸式体验和社区参与将共同塑造美容零售的未来,而我们的愿望是深思熟虑地扩展我们的产品,并在此过程中为不断发展的美容技术做出有意义的贡献。”

  日前,百度在线网络技术(北京)有限公司申请的“数字人生成方法和装置”专利公布。摘要显示,该实施方式生成的数字人能够被赋予不同人格,使其能够像人类一样表达自己的意识和情感,更自然地与人类进行交流和互动。

  该专利方法的一具体实施方式包括:首先获取人格对话语料集和预先训练的语言模型;然后利用人格对话语料集对语言模型进行训练,得到人格对话模型。最后对人格对话模型对应的形象进行三维建模,得到人格对话模型对应的数字人。通过该方式生成的数字人,能够达到此专利摘要中所描述的功能。

  与IP型数字人不同,AI数字人在商业、金融、直播、媒体、教育等领域交互所需的“专业素质”更强。现在,AI技术迅速迭代,对虚拟数字人产业也将带来强大赋能,AI+虚拟数字人行业市场规模有望快速增长,迈向工具化、系统化、低成本新阶段。

  瑞立视入选《元宇宙创新示范100强案例》,荣获“年度最佳元宇宙创新场景应用奖”

  近日,在深圳市福田区科技创新局的指导下、由中国移动通信联合会主办、IEEE数字化转型联合会、深圳广电数字科技有限公司联合主办的数智中国科技周·2023全球元宇宙大会深圳站隆重召开。深圳市瑞立视多媒体科技有限公司应邀出席,创始人&CEO许秋子发表《针对高职高校的元宇宙虚拟数字人应用探索》主题分享,对元宇宙快速发展下虚拟数字人领域的发展以及未来可能性进行了探讨。

  据了解,瑞立视长期专注于XR+教育领域,在数字媒体艺术专业人才培养方面拥有一整套比较完善的建设和落地方案。凭借行业领先的技术创新能力、创新应用场景、市场影响力及产品质量与服务等优势,瑞立视成功获得了大会“年度最佳元宇宙创新场景应用奖”,这是对瑞立视综合实力的充分认可和肯定。此外,在实战方面,瑞立视具备丰富的项目落地经验,相关应用案例也入选了《元宇宙创新示范100强案例集》。

  12月20日,利亚德旗下虚拟动点正式发布了AI新成果——Lydia动作大模型。

  据VRAR星球记者现场报道,Lydia动作大模型的1.0阶段将具有“信号捕捉设备联动微软、云化部署、增量训练、渲染引擎联动”等功能,可在虚拟现实、游戏、人体工程研究、模拟训练、生物力学、具象机械等多领域进行落地应用。据悉,Lydia动作大模型定位于专业能力大模型,其专业动作数据源来自OptiTrack动捕数据、无标记点数据、公开视频文件截取,而算力资源则来自于自建与云合作。

  2023年,虚拟动点在“空间计算”时代浪潮的引领下,开启了AI新征程,并通过定期举办“成果发布日活动,与社会各界分享新技术、新产品、新服务。此次“成果发布日”以“智变加速 焕新未来”为主题,向到访者展示了Lydia动作大模型在科技快速发展的今日,即将为行业发展带来的新的价值。