华科大开发多模态AI工具 直击视频“穿帮”痛点

蔡新元介绍电影版《新江汉揽胜图》的穿帮迭代过程。
“10分钟,华科数千年,大开这就是发多武汉!”5月中旬,模态华中科技大学视频号发布《新江汉揽胜图》电影版,工具这则10分钟的直击长视频浓缩江城千年史诗,壮阔恢宏。视频制作它需要投入多少人力?痛点花费多少工时?回答可能令人惊讶——初剪版由华中科技大学设计学院6人学生团队在48小时内完成。
这一“效率奇迹”源于一款企业级多模态AI创意生产平台——“爱乌”。穿帮日前,华科华中科技大学光影交互服务技术文旅部重点实验室主任蔡新元向湖北日报全媒记者们展示了“爱乌”的大开神奇魔力。凭借这款自主研发的发多AI平台,设计师不出办公室,模态即可将脑海中的工具创意变成画面清楚、观感舒服的视频作品。
针对视频生成模型痛点研发控制系统
AI视频并不是一件新鲜事。DataEye数据显示,今年1月,国内AI漫剧上线数量创下新高,平均每天有470多部新剧上线;截至2月末,在播AI剧/漫剧总数已达12.78万部,是2025年的两倍。
行业一边迎来爆发式增长,一边在制作痛点上反复磋磨——“文生图”要“抽卡”,后台算力产出数百张图片,满足使用要求的仅为个位数;“图生视频”缺乏一致性,稍微长一些的视频,人物、布景全走样,“穿帮”频现;高峰时段算力争抢,生成时间长,设计师“披星戴月”,只为“错峰打工”,节约等候时间。
痛点因何而生?“视频生成模型好比一台充满能量的发动机,当我想把它变成一辆好车,让它在我所希望的路线上奔跑,就需要有好的减震轮胎、导航系统等,得给它一些‘控制’。”蔡新元比方道,缺乏有效控制,视频生成模型“自由发挥”,用户就会遭遇使用困境。
光影交互服务技术文旅部重点实验室拥有跨学科优势,针对行业痛点,团队着手“爱乌”的研发,把人工智能、机器学习等领域的新技术应用到研发设计上,赋予其“控制系统”。如在业内普遍面临的“抽卡”难题上,团队通过结构化提示词框架,将自然语言的提示词转化为计算机能理解的结构性语言,避免提示词污染与理解偏差,进而控制生成的边界;引入全链路控制系统应对“穿帮”,保障长视频角色、场景、调性的一致性,促进镜头的自然衔接;“小样本自主学习模型”技术则是通过上传少量样本,引导“爱乌”自主联网搜寻,构建知识库,有效避免海量样本“投喂”,大幅降低算力花费与样本依赖。
蔡新元介绍,“爱乌”的研发目标是辅助设计师生成15分钟到120分钟的电影级长视频。AI的应用也加速了研发进程,“爱乌”的代码有三分之一由AI编写完成,研发仅历时半年。
“爱乌”让创意创作更高效、更普惠
当前,人工智能已迈入规模化、普惠化、产业化的全新阶段。AI不再是科技巨头与专业实验室的专属工具,而是深度融入创意、设计、影视、教育、制造等各行各业,成为重构生产方式、提升创作效率、释放创新活力的底层动力。
对于AI,创意设计师常常一边使用一边畏惧,得益于AI技术带来的便利,也惧怕AI最终成为取代自己的工具与对手,让多年积累的专业能力失去价值。
“2030年短视频行业市场规模将有望达万亿元。AI不仅能够解决创意生成的质量和内容问题,更重要的是,在下一阶段,它会真正成为吸纳就业的主力军。”蔡新元表示,作为高校研发团队,必须正视技术引发的创作理念和创作实践的变革,不仅要“用AI”,也要“造AI”,要引入更好的技术,开发更好用的AI平台。
今年春节期间,蔡新元在“爱乌”上花费3小时制作了一段1分钟的小视频,视频中,一匹AI小红马勇闯华中科技大学设计学院,它漫步、奔驰、跳跃,和人亲昵,虽年幼却充满活力、雄心勃勃,在视频的最后,蔡新元动情地解说:“设计学院就像这匹小马,承载着很多人的期望,也承载着我们对未来设计的理解和想象。新年愉悦!”
今年3月,设计学院团队依托该平台,仅历经不到200小时的连续攻关,制作出AI视频《新江汉揽胜图》,让“武汉魅力”以超燃姿态“出圈”,发布后被中国外交部发言人官方账号在X、Facebook等海外平台转发,引发全球网友围观点赞。
目前,“爱乌”已对10余家北京、武汉的设计公司开放试用。经测算,和实拍相比,经由“爱乌”制作可减少95%以上的成本。“‘爱乌’的英文名是‘ARTIOO’,把AI和ART(艺术)融合,最后三个字母形似‘100’,我们想在数字创意产业做到满分。”蔡新元说。
湖北日报全媒记者 张歆 通讯员 左盈
(责任编辑:{typename type="name"/})
-
当地时间7月31日,伊朗“波斯湾海峡管理局”发布声明称,由于美军在相关海域持续采取侵略性行动,目前霍尔木兹海峡已无法正常通行。声明指出,待地区局势恢复稳定与平静后,官方将按照申请顺序重新评估并陆续发放
...[详细]
-
5月7日消息,《最终幻想 7:重制版》三部曲联合总监滨口直树接纳德国媒体 ntower 采访,曝光系列最终章核心情报,确认希德与文森特将成为可操作角色,同时回应 DLC 规划与经典元素回归等玩家关切问
...[详细]
-
荆楚网湖北日报网)讯通讯员 徐美玲、王宇凡)“我们平时工作都是两点一线,生活圈子也很窄,想认识新朋友都没有渠道,妇联搭建这样的交友平台真是太必要了。”在荆门市东宝区民主街青年交友音乐会现场,一名青年笑
...[详细]
-
这个五一假期,一种俗称“野草莓”学名蓬蘽,亦称阿公公、空心泡)的小红果刷屏了许多杭州人的朋友圈。在余杭黄石坎村、龙坞水库、青山村、萧山戴村等地,都能见到提着篮子寻找野草莓的市民
...[详细]
-
“桂花开了,来吧,来杭州吧!”秋夜的钱塘江畔,杭州奥体中心体育场变成一方金桂花盛开的舞台。22日晚举行的杭州第4届亚洲残疾人运动会开幕式上,最后一棒火炬手用通过大脑操控的智能仿生手高擎火炬“桂冠”向全
...[详细]
-
喉咙、眼睛难受吗?污染又来了,PM2.5标准修订“箭在弦上”
2025年10月30日开始,京津冀及周边地区正遭遇今年秋冬季首次空气污染过程。视觉中国/图今早出门,你戴口罩了吗?2025年11月5日,北京出现中度污染的雾霾天气。远处的楼宇轮廓模糊了,一些呼吸道敏感
...[详细]
-
世界气象组织28日表示,2026年至2030年间,有高达86%的概率,某一年气温将超过2024年,成为有记录以来最热的年份。根据世界气象组织的统计,目前2024年是有记录以来最热的一年,全球气温比工业
...[详细]
-
直播现场□楚天都市报极目新闻记者 晏雯 摄影:楚天都市报极目新闻记者 宋枕涛 通讯员 罗俊华 王芳“外科医生的最高境界,不是只会做手术,而是知道什么时候不该做,什么时候该等一等再做。”说这话的,是湖北
...[详细]
-
当地时间7月29日,央视记者获悉,美国方面消息显示,有美国高级官员称,美军正在对伊朗发动打击。该消息尚未得到官方证实。美军中央司令部28日在社交媒体发布消息称,伊朗当天对驻中东美军发动导弹突袭,美军拦
...[详细]
-
2025年10月13日,河北吴桥杂技艺术学校,来自非洲的学员一起练习“大武术”杂技 王伟伟/图)“我希望在中国能更系统地学习杂技,帮助自己走向国际。”在河北吴桥杂技艺术学校的排练厅里,18岁的埃塞俄比
...[详细]

上新,2023年国家医保药品目录新增126个药品
神谷英树怒斥粉丝白痴滚开:贝优妮塔不是LGBTQ偶像
银发列车焕新上线 哪些车次有优惠?这份指南请收好
《星际火狐》N64原版游戏 vs NS2(Switch2)重制版 画面对比视频
国防部:日方罔顾事实“指礁为岛”根本站不住脚
