九游集团品牌机器人
CHUANGZE ROBOT
当前位置:首页 > 新闻资讯 > ai智能 > AI视频生成研究报告-由检索生成、局部生成走向依靠自然语言提示词的全量生成

AI视频生成研究报告-由检索生成、局部生成走向依靠自然语言提示词的全量生成

来源:量子位智库     编辑:九游集团品牌   时间:2024/10/17   主题:其他 [加盟]

技术趋势:视频生成正在由检索生成、局部生成走向依靠自然语言提示词的全量生成,生成内容更加灵活丰富,应用空间广阔

检索生成主要是对现有的视频素材根据关键词和标签进行检索匹配,再进行相应的拼接和排列组合

特点

1 采用传统的跨模态视频检索技术,通过视频标 签的或者视频语义理解的方式从数据库中的检 索,再将这些素材进行剪辑、组合拼接在一起, 本质上还是键值对匹配的逻辑

2 例如短视频平台的知识类视频、解说类视频, 通过文本关键字在数据库中进行素材检索,然 后在进行拼接组合生成

3 创意空间有限,没有贡献增量素材,但成本极 低,生成速度极快

仅针对视频的一部分进行生 成,例如视频中人物角色、 动作、背景、风格化、特殊 效果等

特点

1 采用传统的计算机视觉(Cv)、计算机图形学 (CG)技术,但生成功能有限,主要是一些局 部的垂点功能

2 例如效果生成,在现有视频上添加多种效果, 如滤镜、光影、风格化、美颜特效等。也可以 做局部动态化,如人物的面部表情生成、搞笑 表情、爆款特效、舞蹈动作生成等

3 有一定创意空间,生成部分新元素,成本低但 应用的场景有限

通过文字、图片、视频作为提示 词来进行凭空生成,不依赖外部 素材,核心在于大模型的能力

特点

1 采用基于Transformer或者扩散模型的大模型路 线,可以通过自然语言或者指导图进行全局生成 (但也可以嵌入已有内容),视频的内容、风格、 长短、分辨率、宽高比都可以进行灵活调整

2 例如生成天马行空的创意视频、艺术视频、卡通 视频等等,非常灵活

3 创意空间无限,所有的元素都是全新生成,现 阶段成本高昂,但天花板高,应用场景广泛

附件:AI视频生成研究报告-由检索生成、局部生成走向依靠自然语言提示词的全量生成






中国未来五十年人工智能行业生态全景—AI基础层全景

中国在AI基础设施和软件层面严重依赖国际厂商,特别是在计算芯片和存储芯片领域;在软件层面,依赖程度更加严重,软件仍是中国各大企业的常用工具占比达59%

中国未来五十年人工智能行业生态全景—关键技术

以注意力机制为核心的Transformer架构赋能AI在文本、图像、视频生成、文字交互、智能语音和计算机视觉 领域的技术能力增强和应用范围拓宽

中国近几年人工智能相关政策汇总

生成式人工智能服务管理暂行办法,算力基础设施高质量发展行动计划,关于加快场景创新以人工智能高水平应用促进经济高质量发展的指导意见,国家新一代人工智能创新 发展试验区建设工作指引

中国人工智能竞争与发展潜力—技术优势

中国多年来在人工智能论文发表数量和专利授权数量方面均居世界首位;显著领先于其他国家,中国人工智能专利授权的数量在全球范围内占比达61.3%,位居全球榜首

2024智能算力产业发展白皮书-算力规模增速超过50%

我国智能算力占比已经超过通用算力,成为整体算力增长的主要驱动力;国算力结构为通用算力:智能算力:超级算力=40%:59%:1%智能算力占比已较大幅度超过通用算力占比

大模型安全实践白皮书2024-安全性、可靠性、可控性以及评测四个角度剖析

分析了大模型发展趋势挑战的基础上,提出了大模型安全实践总体框架,并从安全性、可靠性、可控性以及评测四个角度对大模型安全技术进行了深度剖析

中国未来50年产业发展趋势白皮书-人工智能、智能制造、大消费、生命科学、碳中和等五大产业

白皮书将聚焦中国未来核心产业的发展方向,从人工智能、智能制造、大消费、生命科学、碳中和等五大产业出发,探讨中国将如何迎接下一波增长浪潮

脉脉2024大模型人才报告-人才供需比为1.76,薪酬涨幅保持在30%-50%

大模型领域人才供需比为1.76,整体供大于求,但高端技术岗位如云计算和算法仍紧缺,薪酬涨幅保持在30%-50%,65.79%每周工作超50小时,从业者中82%因技术和前景而主动加入

AI医学影像行业发展现状与未来趋势蓝皮书-92款人工智能医学影像辅助诊断软件获批

设备精度提升以及对更精准诊断的追求使得我国医学影像数据大量积累人工智能可以充分利用这些数据进行模型训练;提高了医学诊断效率, 减轻了医生工作负担、促进了医疗资源均衡分配

中国AI Agent应用研究报告2024-发展背景、特征、应用案例和未来趋势

智能体将深入复杂任务处理,手机和电脑智能体将引发应用生态变革;报告讨论了AIAgent产品的构建方式和市场策略,强调了大模型技术基础和行业数据的重要性

2024年AI生产力工具暑期发展报告-移动端渗透率达到38.6%,月活跃用户数(MAU)达到1.7亿

AI生产力工具市场快速发展,用户规模和产品类型激增,以AI搜索、写作、翻译等应用为核心的工具正推动工作效率和创造力的提升,生成式AI市场预计将达到4000亿元

AI大模型创业格局报告-6+2竞争格局,核心竞争力、产品与服务、融资情况以及未来趋势

国内AI大模型行业迅速发展,形成“6+2”竞争格局,产品覆盖C端和B端,聚焦金融、教育等行业,报告概括了AI大模型行业的主要参与者、核心竞争力、产品与服务、融资情况以及未来趋势
资料获取
ai智能
== 最新资讯 ==
AI视频生成研究报告-由检索生成、局部生
全球主要人形机器人应用场景及市场推广计划
中国人形机器人市场规模预测及发展趋势:市
全球人形机器人市场规模预测及发展趋势-销
人工智能大模型发展现状与挑战对比
常见的人工智能大模型:NLP,CV和多模
机器人各部位关键技术分析
上海市机器人产业发展现状:“3+X”空间
大模型在机器人领域研究与应用案例汇总
智能机器人纯视觉与激光雷达方案比较
人形机器人四种环境感知传感器各项性能比较
全球主要人形机器人的控制解决方案汇总
中国未来五十年人工智能行业生态全景—AI
中国未来五十年人工智能行业生态全景—关键
中国近几年人工智能相关政策汇总
== 机器人推荐 ==
迎宾讲解服务机器人

服务机器人(迎宾、讲解、导诊...)


            智能服务机器人                   
版权所有 九游集团品牌智能机器人集团股份有限公司 中国运营中心:北京 清华科技园九号楼5层 中国生产中心:山东日照太原路71号
销售1:4006-935-088 销售2:4006-937-088 客服电话: 4008-128-728