计算机模型旨在将电影脚本转换为动画
卡内基梅隆大学的研究人员开发了一种计算机模型,可以将描述物理运动的文本直接转换为简单的计算机生成动画,这是有朝一日直接从脚本生成电影的第一步。
科学家在使计算机理解自然语言以及生成一系列物理姿势以创建逼真的动画方面取得了巨大的飞跃。然而,这些能力可能存在于不同的世界中,因为缺少自然语言和物理姿势之间的联系。
语言技术研究所(LTI)的副教授Louis-Philippe Morency和LTI博士的Chaitanya Ahuja 学生,正在努力使用他们称之为联合语言 - 姿势或JL2P的神经结构将这些世界聚集在一起。JL2P模型可以将句子和物理运动联合嵌入,因此它可以学习语言与动作,手势和动作的关系。
“我认为我们处于这项研究的早期阶段,但从建模,人工智能和理论的角度来看,这是一个非常激动人心的时刻,”Morency说。“现在,我们正在谈论动画虚拟角色。最终,语言和手势之间的这种联系可以应用于机器人;我们或许可以简单地告诉个人助理机器人我们想要它做什么。
“我们最终也可以采用其他方式 - 使用语言和动画之间的这种联系,这样计算机就可以描述视频中发生的事情,”他补充道。
Ahuja将于9月19日在加拿大魁北克市举行的3-D Vision国际会议上展示JL2P。
为了创建JL2P,Ahuja使用了一种课程学习方法,侧重于模型首先学习简短的序列 - “一个人向前走” - 然后更长,更难的序列 - “一个人向前走,然后转身再往前走,“或”一个人跑步时跳过障碍物。“
动词和副词描述动作的动作和速度/加速度,而名词和形容词描述位置和方向。Ahuja说,最终目标是通过同时或按顺序发生多种动作来制作复杂序列的动画。
目前,动画是贴图。
更多的事情是,许多事情同时发生,即使是在简单的序列中,Morency解释说。
“ 身体部位之间的同步是非常重要的,”Morency说。“每当你移动你的腿时,你也会移动你的手臂,你的躯干和你的头部。身体动画需要协调这些不同的组件,同时实现复杂的动作。在这个复杂的动画环境中引入语言叙述既是具有挑战性和令人兴奋。这是一条更好地理解言语和手势的道路。“
免责声明:本文由用户上传,与本网站立场无关。财经信息仅供读者参考,并不构成投资建议。投资者据此操作,风险自担。 如有侵权请联系删除!
-
最近收到一位患者的留言,说自己这几天总感觉肛门有下坠胀感,特别难受,上网一查,好多信息都指向癌症,这可...浏览全文>>
-
腹痛、腹泻总反复!可能是小肠、大肠在抗议。基于症状特征区分小肠疾病与大肠疾病的具体差异分析:一、核心症状...浏览全文>>
-
近日,中国中医药信息学会肛肠分会·肿瘤分会·治未病分会·河北名医学会肛肠分会·盆底与便秘分会·河北省中...浏览全文>>
-
安徽蚌埠的长安启源E07作为一款备受关注的新能源车型,其价格和配置一直是消费者热议的话题。如果你正考虑入手...浏览全文>>
-
近年来,随着新能源汽车市场的快速发展,插电式混合动力车型逐渐成为消费者关注的焦点。生活家PHEV作为一款备...浏览全文>>
-
在2025款生活家PHEV车型正式上市之前,提前了解相关费用明细对于购车者来说至关重要。这款插电式混合动力车型...浏览全文>>
-
大众途昂作为一款中大型SUV,凭借其宽敞的空间和强劲的动力配置,在市场上一直拥有不错的口碑。对于计划购买20...浏览全文>>
-
阜阳地区的长安启源Q05 2025款车型凭借其时尚的外观设计和丰富的配置,吸引了众多消费者的关注。这款车型作为...浏览全文>>
-
阜阳揽巡作为一款备受关注的中型SUV,凭借其豪华的配置和超值的价格吸引了众多消费者的目光。这款车不仅在外观...浏览全文>>
-
淮南长安启源A07自上市以来便凭借其卓越的性能和亲民的价格赢得了众多消费者的青睐。作为2025款的新车型,它在...浏览全文>>