LinGen— Meta联合普林斯顿大学推出的文本到视频生成框架


lingen是由普林斯顿大学与meta联合开发的一种全新的文本生成视频框架。该框架采用线性复杂度的mate模块(包含ma-branch和te-branch),取代传统diffusion transformers中计算复杂的自注意力机制,从而实现在单个gpu上高效生成高分辨率、长时间段的视频内容。lingen在降低计算开销的同时保持高质量输出,在视频质量和生成效率方面均优于现有先进模型,为长视频生成及实时交互式应用提供了新方向。

Writer Writer

企业级AI内容创作工具

Writer 220 查看详情 Writer

☞☞☞AI 智能聊天, 问答助手, AI 智能搜索, 免费无限量使用 DeepSeek R1 模型☜☜☜

LinGen— Meta联合普林斯顿大学推出的文本到视频生成框架LinGen的核心功能

  • 高分辨率视频生成:支持生成如512p、1024p等高清视频,满足专业级内容创作需求。
  • 长时长视频输出:可生成分钟级别的视频,突破以往只能生成10-20秒短视频的限制。
  • 线性复杂度结构:基于MATE模块实现线性计算复杂度,显著减少资源消耗,适合在单一GPU设备上运行。
  • 优质视频表现:生成的视频在画面质量、文字匹配和帧间连贯性方面表现优异。
  • 支持实时交互生成:具备实时生成与编辑能力,适用于多种动态内容制作场景。

LinGen的技术架构

  • MA-branch(多尺度注意力分支)
    • 双向Mamba2模块:采用高效的线性序列模型Mamba2,并通过双向设计捕捉序列中的前后依赖关系。
    • Rotary Major Scan(RMS):通过不同扫描方式(如空间行优先、列优先,时间行优先、列优先)重新排列3D视频token张量,增强局部相关性并降低延迟。
    • Review Tokens:在处理前添加平均池化token,提供整体序列概览,强化远距离关联。
  • TE-branch(时间注意力分支):将3D视频token划分为窗口并在窗口内计算自注意力,TESA机制能捕捉空间邻近与时间中距token之间的联系;窗口在各层之间交替移动以扩大感受野,提升视频一致性。
  • 线性计算优化:得益于MATE模块的设计,LinGen的计算复杂度与像素数量呈线性增长,而非传统模型的二次增长,极大提升了生成效率。
  • 渐进训练策略:首先在低分辨率图像任务上预训练,随后逐步提升视频分辨率与时长进行训练;结合图文对混合训练,提高视频连贯性;最终在高质量视频数据集上微调,进一步优化输出效果。

LinGen的项目信息

  • 项目官网:https://www.php.cn/link/407c334809565d941338efc9e3a9f687
  • GitHub仓库:https://www.php.cn/link/3f1176741b1b079bdc7a2e7f208c902f
  • 技术论文链接:https://www.php.cn/link/4c2aeb849fab47239887f8bf9c8e6278

LinGen的应用领域

  • 内容创作:用于快速生成电影、电视剧、广告等内容,缩短制作周期并降低成本。
  • 游戏娱乐:生成游戏过场动画和背景视频,增强视觉沉浸感。
  • 教育与培训:制作教学视频和实验演示,提高学习趣味性和互动性;为企业员工培训提供直观的学习材料。
  • 广告营销:快速生成多样化广告视频,适应不同投放场景,提升传播效率。
  • 艺术创意:作为新型创作工具,为艺术家提供灵感激发和视频艺术表达的新方式。

以上就是LinGen— Meta联合普林斯顿大学推出的文本到视频生成框架的详细内容,更多请关注其它相关文章!


# 相关文章  # 福建推广营销选哪家  # 苏州抖音seo团队  # 莲湖区营销策划推广  # 南京整合营销推广公司  # 云南seo教程推荐公司  # 郑州seo网络推广培训  # 站外推广网站图片大全  # 网页优化关键词排名上升  # 日照seo推广  # 黄冈网站建设优化技术  # 中文网  # git  # 并在  # 适用于  # 是由  # 安装包  # 时长  # 一键  # 高质量  # 普林斯顿  # 排列  # 工具 


相关栏目: 【 Google疑问12 】 【 Facebook疑问10 】 【 优化推广96088 】 【 技术知识133117 】 【 IDC资讯59369 】 【 网络运营7196 】 【 IT资讯61894


相关推荐: CREATOR制造、使用工具,实现LLM「自我进化」  引领AI变革,九章云极DataCanvas公司重磅发布AIFS+DataPilot  《爱康未来之夜嘉宾官宣,携手共赴AI未来》  2025智源大会AI安全话题备受关注,《人机对齐》新书首发  讯飞星火大模型实现升级 助力通用人工智能人才培养  苹果2万5的AR遭遇砍单95%:不及预期  水路两栖艇、消防灭火机器人……这个展览“黑科技”抢眼  6月14日《星空下的对话》 张朝阳陆川将畅聊人生、电影、心理学与AI  「从未被制造出的最重要机器」,艾伦·图灵及图灵机那些事  苹果AR头显商标与华为撞车,在中国或改名  Zoom远程会议应用:AI培训需经用户授权  联合国秘书长称支持建立全球人工智能监管机构  测试框架-安全和自动驾驶  丰田汽车研究院推出生成式人工智能汽车设计工具  “直击”AI新世界,智能机器人再次“火出圈”了  人工智能赋能广西自然资源领域监测监管  李开复官宣新公司「零一万物」,进军 AI 2.0  机构研选 | 虚拟电厂是电力物联网升级版 智能电网望迎来高速发展  MetaGPT AI 模型开源:可模拟软件公司开发过程,生成高质量代码  揭晓2025年玻尔兹曼奖:Hopfield网络创始人荣获奖项  社区里,孩子们体验“机器人竞技”  大型无人机FH-98国内首次夜航转场成功  生成式人工智能如何改变云安全的游戏规则  人工智能即将进入Windows:企业准备好安全策略设置了吗?  WHEE功能介绍  Prompt解锁语音语言模型生成能力,SpeechGen实现语音翻译、修补多项任务  7大探索区域打造沉浸式玩乐“元宇宙” 昆明京东MALL未来科技探索官全城招募中  击败LLaMA?史上超强「猎鹰」排行存疑,符尧7行代码亲测,LeCun转赞  深剖Apple Vision Pro中暗藏的“AI”  Meta Quest订阅服务每月7.99美元畅玩两款VR游戏应用  国内AI大模型“安卓时刻”到来!阿里云通义千问免费、开源、可商用  即时 AI再次升级 30秒生成自带动效的网页 生成速度提升100%  华为云盘古大模型3.0发布 AI云服务同时上线:200亿亿次性能  AI会帮我们把活干完吗?  大模型训练成本降低近一半!新加坡国立大学最新优化器已投入使用  常见的五个人工智能误解  为了避免人工智能可能带来的灾难,我们要向核安全学习  干货满满,2025昆山元宇宙国际装备展等你来打卡!  小艺主导智慧交互升级,借助AI大模型增强能力  全球首款AI裸眼3D平板 国产的售价破万  谷歌推出新 AI 工具 Imagen Editor,一句话对图片二次创作  Databricks推出人工智能模型共享机制,可令开发者与公司“双赢”  第 66 届格莱美奖规定,AI 作品将无法获得评奖资格  “长沙造”无人机,领先的不止植保  美图设计室2.0使用教程  无人机协助盐城交通执法的协同训练  网友自制 AI 版《流浪地球 3》预告片,登上 CCTV6  英伟达CEO宣称生成式AI已迎来“划时代时刻”  自研4D激光雷达L1 + GPT大语言模型 宇树Unitree Go2四足机器人有啥黑科技?  海柔创新携手SAP,以机器人技术助力全球客户升级数智化竞争力 

 2025-06-21

了解您产品搜索量及市场趋势,制定营销计划

同行竞争及网站分析保障您的广告效果

点击免费数据支持

提交您的需求,1小时内享受我们的专业解答。

运城市盐湖区信雨科技有限公司


运城市盐湖区信雨科技有限公司

运城市盐湖区信雨科技有限公司是一家深耕海外推广领域十年的专业服务商,作为谷歌推广与Facebook广告全球合作伙伴,聚焦外贸企业出海痛点,以数字化营销为核心,提供一站式海外营销解决方案。公司凭借十年行业沉淀与平台官方资源加持,打破传统外贸获客壁垒,助力企业高效开拓全球市场,成为中小企业出海的可靠合作伙伴。

 8156699

 13765294890

 8156699@qq.com

Notice

We and selected third parties use cookies or similar technologies for technical purposes and, with your consent, for other purposes as specified in the cookie policy.
You can consent to the use of such technologies by closing this notice, by interacting with any link or button outside of this notice or by continuing to browse otherwise.