华科大开发多模态AI工具 直击视频“穿帮”痛点

蔡新元介绍电影版《新江汉揽胜图》的穿帮迭代过程。
“10分钟,华科数千年,大开这就是发多武汉!”5月中旬,模态华中科技大学视频号发布《新江汉揽胜图》电影版,工具这则10分钟的直击长视频浓缩江城千年史诗,壮阔恢宏。视频制作它需要投入多少人力?痛点花费多少工时?回答可能令人惊讶——初剪版由华中科技大学设计学院6人学生团队在48小时内完成。
这一“效率奇迹”源于一款企业级多模态AI创意生产平台——“爱乌”。穿帮日前,华科华中科技大学光影交互服务技术文旅部重点实验室主任蔡新元向湖北日报全媒记者们展示了“爱乌”的大开神奇魔力。凭借这款自主研发的发多AI平台,设计师不出办公室,模态即可将脑海中的工具创意变成画面清楚、观感舒服的视频作品。
针对视频生成模型痛点研发控制系统
AI视频并不是一件新鲜事。DataEye数据显示,今年1月,国内AI漫剧上线数量创下新高,平均每天有470多部新剧上线;截至2月末,在播AI剧/漫剧总数已达12.78万部,是2025年的两倍。
行业一边迎来爆发式增长,一边在制作痛点上反复磋磨——“文生图”要“抽卡”,后台算力产出数百张图片,满足使用要求的仅为个位数;“图生视频”缺乏一致性,稍微长一些的视频,人物、布景全走样,“穿帮”频现;高峰时段算力争抢,生成时间长,设计师“披星戴月”,只为“错峰打工”,节约等候时间。
痛点因何而生?“视频生成模型好比一台充满能量的发动机,当我想把它变成一辆好车,让它在我所希望的路线上奔跑,就需要有好的减震轮胎、导航系统等,得给它一些‘控制’。”蔡新元比方道,缺乏有效控制,视频生成模型“自由发挥”,用户就会遭遇使用困境。
光影交互服务技术文旅部重点实验室拥有跨学科优势,针对行业痛点,团队着手“爱乌”的研发,把人工智能、机器学习等领域的新技术应用到研发设计上,赋予其“控制系统”。如在业内普遍面临的“抽卡”难题上,团队通过结构化提示词框架,将自然语言的提示词转化为计算机能理解的结构性语言,避免提示词污染与理解偏差,进而控制生成的边界;引入全链路控制系统应对“穿帮”,保障长视频角色、场景、调性的一致性,促进镜头的自然衔接;“小样本自主学习模型”技术则是通过上传少量样本,引导“爱乌”自主联网搜寻,构建知识库,有效避免海量样本“投喂”,大幅降低算力花费与样本依赖。
蔡新元介绍,“爱乌”的研发目标是辅助设计师生成15分钟到120分钟的电影级长视频。AI的应用也加速了研发进程,“爱乌”的代码有三分之一由AI编写完成,研发仅历时半年。
“爱乌”让创意创作更高效、更普惠
当前,人工智能已迈入规模化、普惠化、产业化的全新阶段。AI不再是科技巨头与专业实验室的专属工具,而是深度融入创意、设计、影视、教育、制造等各行各业,成为重构生产方式、提升创作效率、释放创新活力的底层动力。
对于AI,创意设计师常常一边使用一边畏惧,得益于AI技术带来的便利,也惧怕AI最终成为取代自己的工具与对手,让多年积累的专业能力失去价值。
“2030年短视频行业市场规模将有望达万亿元。AI不仅能够解决创意生成的质量和内容问题,更重要的是,在下一阶段,它会真正成为吸纳就业的主力军。”蔡新元表示,作为高校研发团队,必须正视技术引发的创作理念和创作实践的变革,不仅要“用AI”,也要“造AI”,要引入更好的技术,开发更好用的AI平台。
今年春节期间,蔡新元在“爱乌”上花费3小时制作了一段1分钟的小视频,视频中,一匹AI小红马勇闯华中科技大学设计学院,它漫步、奔驰、跳跃,和人亲昵,虽年幼却充满活力、雄心勃勃,在视频的最后,蔡新元动情地解说:“设计学院就像这匹小马,承载着很多人的期望,也承载着我们对未来设计的理解和想象。新年愉悦!”
今年3月,设计学院团队依托该平台,仅历经不到200小时的连续攻关,制作出AI视频《新江汉揽胜图》,让“武汉魅力”以超燃姿态“出圈”,发布后被中国外交部发言人官方账号在X、Facebook等海外平台转发,引发全球网友围观点赞。
目前,“爱乌”已对10余家北京、武汉的设计公司开放试用。经测算,和实拍相比,经由“爱乌”制作可减少95%以上的成本。“‘爱乌’的英文名是‘ARTIOO’,把AI和ART(艺术)融合,最后三个字母形似‘100’,我们想在数字创意产业做到满分。”蔡新元说。
湖北日报全媒记者 张歆 通讯员 左盈
(责任编辑:热讯)
-
来源:中国新闻周刊“灰产”时代结束了?“纯血Claude,免费试用,0.07倍率,速来”……今年以来,类似的广告帖如潮水般涌入短视频平台。在“0元学AI”和“AI副业赚钱”的讨论区里,AI中转站摇身一
...[详细]
-
据知名《光环》爆料人Rebs Gaming在最新视频中透露,微软即将推出的虚幻引擎5重制版《光环:战役进化》严重依赖外部开发力量。消息人士称:“从核心游戏编程到设计,外包比例极高,以至于这
...[详细]
-
IO Interactive——《杀手》系列的开发商——做了款007新作《007 初露锋芒》,讲的是年轻版詹姆斯·邦德的故事,间谍动作冒险
...[详细]
-
>在我们的送花中,很多人都是常常给老师、妈妈、爸爸、爱人送花。给嫂子送花的人不多,也造成很多人不知道给嫂子送什么花,特殊是对于年龄较大的嫂子。今天我们来给大家说说嫂子70多岁的送花吧。送花解读给嫂子送
...[详细]
-
当地时间2024年10月19日,朝鲜平壤地区的一棵树上,据称是一架韩国无人机。图/视觉中国10月27日,“韩国无人机渗透进入平壤”事件有了最新进展。朝鲜国防省发言人称,经查证,无人机事件的“行为主体、
...[详细]
-
“多面开花”,韧性、活力、潜力显现!多项数据撑起经济运行亮眼“成绩单”
央视网消息:11月15日上午,国家统计局发布的10月份我国经济运行“成绩单”显示,主要经济指标继续改善,经济运行总体平稳。10月份,全国规模以上工业增加值同比增长4.6%,增速
...[详细]
-
国家统计局11月15日发布数据显示10月份社会消费品零售总额同比增长7.6%全国规模以上工业增加值同比增长4.6%货物进出口总额同比增长0.9%1至10月份全国固定资产投资不含农户)同比增长2.9%社
...[详细]
-
近期出圈的三件事,放在一起,能看出什么名堂?一个只有初中学历的摩托车修理工,凭一腔热爱与执着,打造出性能比肩国际巨头的摩托车,旗下车队在世界超级摩托车锦标赛中夺得多个分站冠军。他叫张雪。一个没名气的导
...[详细]
-
美国总统特朗普22日在社交媒体发文称,各方都完全清楚,伊朗将同意接受大规模武器核查,以确保其在未来长期保持“核诚信”。当天早些时候,美国和伊朗代表团在瑞士比尔根山的首轮谈判结束。美国副总统万斯在新闻发
...[详细]
-
“为建设更加美好的世界提供精神养分” ——访国际儒学联合会副理事长安乐哲
第二届世界古典学大会即将在希腊首都雅典举行。作为与会嘉宾,国际儒学联合会副理事长安乐哲日前接受本报记者专访表示:“当今世界,百年变局加速演进,变革与动荡相互交织,地缘冲突此起彼伏。在此背景下,我们迫切
...[详细]

伊朗外交部:伊美瑞士谈判未涉及核问题
“海洋地质六号”完成第16航次科考任务
荣耀平板20首销打开,限时加赠李昀锐定制周边礼包
历史视角:本轮石油冲击会触发全球衰退吗?
发现179项安全隐患,国务院安委会在江西明查暗访