草庐IT

快让想象力跟上AI的发展!Meta AI 推出文本生成视频模型 #Make-A-Video

shadowcz007 2023-04-11 原文

AI 已经能让 “一句话” 诞生出巨大的生产力了。

#

文本-图像、文本-3D模型、文本-视频......

Meta AI 发布了文本生成视频模型 Make-A-Video

#

未来的编剧就是导演?

真的看到任何人都能落地自己想象力的时代来临了

小杜

Make-A-Video 可以让我们仅用几句话或几行文本生成异想天开、独一无二的视频。促进想象力变为现实的AI工具包发展得越来越多样了~

Make-A-Video

Meta AI 提出的 Make-A-Video 是一种将文本到图像 (T2I) 生成方面取得的巨大进展直接转化为文本到视频 (T2V) 的方法。

Make-A-Video 具有三个优点:
1. 
它加速了 T2V 模型的训练(它不需要从头开始学习视觉和多模态表示)
2. 它不需要成对的文本视频数据
3. 生成的视频继承了当今图像生成模型的广泛性(审美多样性、奇幻描绘等)。

目前 Make-A-Video 支持哪些视频类型的生成? 

Mixlab

小杜

项目网站中介绍的 Make-A-Video 支持「超写实主义」、「现实主义」、「风格化」类型的视频生产

不同风格的生成视频

除了文本生成视频,Make-A-Video 还支持哪些视频生成的创意玩法?

Mixlab

小杜

Make-A-Video 也支持单张图片生成视频,或者两张图片合成视频。


视频生成创意玩法-图片合成视频

小杜

除了文本/图片到视频生成, Make-A-Video 甚至支持输入视频后再进行AI的创意DIY输出!



视频生成创意玩法-视频DIY

看来以后真就能靠一张嘴输出一整套创意视频了

Mixlab

小杜

目前 Make-A-Video 展示的生成视频质量还不高,期待模型后续的迭代,感兴趣的同学也可以在项目网站进行内测申请哦~

Make-A-Video 画廊

项目地址:
makeavideo.studio


CogVideo 也是文本生成视频的模型

#



CogVideo 是目前最大的通用领域文本到视频生成预训练模型,含94亿参数。CogVideo将预训练文本到图像生成模型(CogView2)有效地利用到文本到视频生成模型,并使用了多帧率分层训练策略。

我也找到了一个文本生成视频的模型 Imagen Video ,虽然创意玩法上没有 Make-A-Video 丰富,但生成视频质量上要优秀许多。

#

Imagen Video 是一个基于级联视频扩散模型的文本条件视频生成系统。给定文本提示,Imagen Video 会使用基本视频生成模型和一系列交错的空间和时间视频超分辨率模型生成高清视频。

小杜

社群知识库里整理了相关的扩展阅读和开源工具链接,大家可以移步知识星球查看哦

!!!在知识星球使用标签搜索功能,搜索 #论文# #文本生成视频# #AIGC# 

opus

欢迎留言讨论,参与 AIGC 的共创共建~

创作者社群,备注
AIGC

提案# 《我做社区》共建者#纪念徽章发放

💡

Mixlab创造力团队招募链接

虚拟孵化器

公众号编辑/排版/校对招募

社区工作招募链接

sv.mikecrm.com/vHO5X6X

随着元宇宙热潮的进一步发酵,所有人也对元宇宙是什么以及将会带领人类走向何方众说纷纭。而马修•鲍尔作为全球最早、最全面介绍元宇宙的趋势家,影响了扎克伯格等科技大咖。近日他与扎克伯格对谈,而且他写的一篇关于元宇宙的文章登上了《时代周刊》封面。

在这本《元宇宙改变一切》中,鲍尔为我们揭晓今天为什么我们要了解元宇宙,以及为什么要继续发展元宇宙,他也为大众厘清:什么是元宇宙,元宇宙什么时候到来,如何真正构建元宇宙,以及元宇宙将如何改变一切

元宇宙商业之父 马修·鲍尔 开创之作

《元宇宙改变一切》(平装)  

生活、工作与思维方式的大变革

迄今为止,一本书讲透关于元宇宙的所有问题

开启元宇宙未来的启蒙指南与行动路线图

💡
 读后感征集!!!

积极参与社区推文话题讨论也有机会获得样书赠送哦

有关快让想象力跟上AI的发展!Meta AI 推出文本生成视频模型 #Make-A-Video的更多相关文章

  1. ruby-on-rails - rails : How to make a form post to another controller action - 2

    我知道您通常应该在Rails中使用新建/创建和编辑/更新之间的链接,但我有一个情况需要其他东西。无论如何我可以实现同样的连接吗?我有一个模型表单,我希望它发布数据(类似于新View如何发布到创建操作)。这是我的表格prohibitedthisjobfrombeingsaved: 最佳答案 使用:url选项。=form_for@job,:url=>company_path,:html=>{:method=>:post/:put} 关于ruby-on-rails-rails:Howtomak

  2. ruby - 无法安装 gem - make 未被识别为内部或外部命令可运行程序或批处理文件 - 2

    我想在Windows7上安装带有ruby​​1.9.3的rspec-railsgem。我收到一些错误消息,提示无法安装某些json库。所以,我使用下面的说明来解决它。来源=The'json'nativegemrequiresinstalledbuildtools从[rubyinstaller.org][3]下载[Ruby1.9.3][2]从[rubyinstaller.org][3]下载DevKit文件对于Ruby1.9.3,使用[DevKit-tdm-32-4.5.2-20110712-1620-sfx.exe][4]将DevKit解压到路径C:\Ruby193\DevKit运行cd

  3. ruby - 无法在 MacOS 10.14.2 Mojave : Error running '__rvm_make -j4' 上使用 RVM 安装任何 Ruby - 2

    将MacOS升级到10.14.2Mojave后,我无法再使用RVM安装任何Ruby版本。它总是给出这样的错误:$rvminstall2.5.3ruby-2.5.3-#removingsrc/ruby-2.5.3..Searchingforbinaryrubies,thismighttakesometime.Nobinaryrubiesavailablefor:osx/10.14/x86_64/ruby-2.5.3.Continuingwithcompilation.Pleaseread'rvmhelpmount'togetmoreinformationonbinaryrubies.Ch

  4. 未来的趋势————以ChatGPT为标杆的AI对生活的影响是巨大的 - 2

    文章目录前言1.AI的发展历程2.我是如何接触到人工智能的概念和产品的3.对于ChatGPT的一点看法4.AI对大学毕业生的职业发展的利与弊5.对于AI的思考和问题前言随着ChatGPT的爆火,生成式AI,大模型的人工智能被越来越多的人注意到,同时他也带来了许多问题。本文将对几方面进行探讨。1.AI的发展历程远古时期在公元前第一个千禧年,中国,印度和希腊哲学家都提出了一些推理的研究理论,比如亚里士多德(Aristotle)进行了演绎推理三段论的完整分析,欧几里得(Euclid)所著Elements是一种形式推理的模型,MuḥammadibnMūsāal-Khwārizmī,发明了代数学,即我们

  5. 焕新古文化传承之路,AI为古彝文识别赋能 - 2

    目录1古彝文与古典保护2古文识别的挑战2.1西文与汉文OCR2.2古彝文识别难点3合合信息:古彝文保护新思路3.1图像矫正3.2图像增强3.3语义理解3.4工程技巧4总结1古彝文与古典保护彝文指的是云南、贵州、四川等地的彝族人使用的文字,区别于现代意义上的彝文,古彝文指的是在民间流通使用的原生态彝文,多达87046字。古彝文的起源距今至少数千年,是世界上最古老的文字之一。对古彝文字集研究有助于理解尚未被翻译成汉文、用字尚未规范化的古籍,更深层、透彻地作用于传统文化保护。古彝文字义对照图(网络资料+邵文苑供图)古籍是不可再生的宝贵资源,应当得到妥善保护。中国的古籍在历史上迭经水火兵燹等自然灾害、

  6. ruby-on-rails - ruby + Mongoid : how to make a required field? - 2

    我使用Mongoid的githead版本(因为Rails4),我想制作一个字段必填文档:classMyClassincludeMongoid::Documentfield:name,type:String,required:true我有这个错误:Problem:Invalidoption:requiredprovidedforfield:name.Summary:Mongoidrequiresthatyouonlyprovidevalidoptionsoneachfielddefinitioninordertopreventun...我做错了什么? 最佳答案

  7. ruby - 在 OSX 10.8.4 上使用无法识别的选项 '-arch' 安装 json-1.8.0 时 make 失败 - 2

    我正在尝试正确设置我的ruby​​环境,但在尝试bundleinstall我的测试应用程序时不断收到错误。我在尝试bundleinstall时第一次遇到错误:$railsnewapp//[...]runbundleinstallFetchinggemmetadatafromhttps://rubygems.org/..Resolvingdependencies...Usingrake(10.1.0)Usingi18n(0.6.5)Usingmulti_json(1.7.9)Usingactivesupport(3.2.9)Usingbuilder(3.0.4)Usingactivemo

  8. ruby - 我可以做 hash.has_key 吗? ('video' 或 'video2' ) ( ruby ) - 2

    或者我可以做得更好hash.has_key?('videox')wherexis''什么都没有或一个数字?所以'video'、'video1'、'video2'会通过条件吗?当然我可以有两个条件,但万一我将来需要使用video3,事情会变得更复杂...... 最佳答案 如果您想要video的一般情况后跟一个数字而不明确列出所有组合,可以使用Enumerable中的几种方法。您可以将其与正则表达式结合使用。hash.keys是来自hash的键数组,^video\d$匹配视频后跟一个数字。#trueiftheblockreturnstr

  9. ruby-on-rails - gem install nokogiri -v '1.5.11' 由于 make :/usr/local/bin/gmkdir: No such file or directory 而失败 - 2

    Rubyversion:2.2.5MacOSX:10.11.5Gemversion:2.4.8Bundlerversion:1.12.5当我运行geminstallnokogiri-v'1.5.11'时,出现以下错误:Buildingnativeextensions.Thiscouldtakeawhile...ERROR:Errorinstallingnokogiri:ERROR:Failedtobuildgemnativeextension./Users/hwpeng/.rvm/rubies/ruby-2.2.5/bin/ruby-r./siteconf20160707-31800-

  10. ruby - 运行错误 '__rvm_make install' - 2

    我是编程新手,尝试使用RVM添加Ruby2.2并收到以下错误。我已经运行rvmgetstable并尝试重新安装,但出现了同样的错误。$rvmreinstallruby-2.2.0Searchingforbinaryrubies,thismighttakesometime.Nobinaryrubiesavailablefor:osx/10.10/x86_64/ruby-2.2.0.Continuingwithcompilation.Pleaseread'rvmhelpmount'togetmoreinformationonbinaryrubies.Checkingrequirements

随机推荐