离职OpenAI的技术大神karpathy，终于上线了2小时的AI大课。——「让我们构建GPTTokenizer（分词器）」。图片其实，早在新课推出两天前，karpathy在更新的GitHub项目中，就预告了这件事。图片这个项目是minbpe——专为LLM分词中常用的BPE（字节对编码）算法创建最少、干净以及教育性的代码。目前，GitHub已经狂揽6.1k星，442个fork。图片项目地址：https://github.com/karpathy/minbpe网友：2小时课程含金量，相当于大学4年不得不说，karpathy新课发布依然吸引了业内一大波学者的关注。他总是可以把相当复杂的LLM概念，
前言真没想到，距离视频生成上一轮的集中爆发(详见《Sora之前的视频生成发展史：从Gen2、EmuVideo到PixelDance、SVD、Pika1.0》)才过去三个月，没想OpenAI一出手，该领域又直接变天了自打2.16日OpenAI发布sora以来(其开发团队包括DALLE3的4作TimBrooks、DiT一作BillPeebles、三代DALLE的核心作者之一AdityaRamesh等13人)，不但把同时段Google发布的Gemmi1.5干没了声音，而且网上各个渠道，大量新闻媒体、自媒体(含公号、微博、博客、视频)做了大量的解读，也引发了圈内外的大量关注很多人因此认为，视频生成领域
GoogleResearch最近发布了一款名为VideoPoet的大型语言模型（LLM），旨在解决当前视频生成领域的挑战。该领域近年来涌现出许多视频生成模型，但在生成连贯的大运动时仍存在瓶颈。现有领先模型要么生成较小的运动，要么在生成较大运动时出现明显的伪影。VideoPoet的创新之处在于将语言模型应用于视频生成，支持多种任务，包括文本到视频、图像到视频、视频风格化、修复和修复以及视频到音频。与当前主流的扩散模型不同，VideoPoet将这些视频生成功能融合在一个大型语言模型中，而不是依赖于分别针对每个任务进行训练的组件。该模型通过多个分词器（MAGVITV2用于视频和图像，SoundStr
又有创业公司的饭碗要被抢了。最近一波视频生成模型突然出现，在许多情况下展示了令人惊叹的如画质量，例如Runway、Pika。然而当前视频生成的瓶颈之一是产生连贯大运动的能力。在许多情况下，即使是当前领先的大模型也会产生较小的运动，或者当产生较大的运动时，会表现出明显的伪影。谷歌刚刚发布了零镜头视频生成大模型VideoPoet。它能够执行各种视频生成任务，包括文本到视频、图像到视频、视频风格化、视频修复和修复，以及视频转音频。该工具被感叹是一个突破性文生视频工具。目前市场上一些领先的视频生成模型都是基于扩散的，然而，VideoPoet不是。VideoPoet的重要特点之一就是，它将许多视频生成功
蒙娜丽莎打哈欠，小鸡学会举铁……谷歌VideoPoet大模型表现很亮眼。2023年底，科技公司都在冲击生成式AI的最后一个关卡——视频生成。本周二，谷歌提出的视频生成大模型上线，立刻获得了人们的关注。这款名为VideoPoet的大语言模型，被人们认为是革命性的zero-shot视频生成工具。VideoPoet既可以文生视频、图像生视频，又能风格迁移，视频转语音。从效果上看，它可以构建多样化且流畅的运动。消息一出，有很多人表示欢迎：看看目前的几个成品效果不错，大模型技术发展的速度也太快了。有人对于这个大模型生成视频的长度表示惊讶：来源：https://twitter.com/cyberspher
DiffusionModels视频生成-博客汇总前言：视频生成领域长期被StableDiffusion统治，大部分的方式都是在预训练的图片StableDiffusion的基础上加入时间层，学习动态信息。虽然有CoDi《【NeurIPS2023】多模态联合视频生成大模型CoDi》等模型尝试过突破这一结构的局限，但是都没有对业界带来特别有影响力的工作。最近谷歌出手了，拿出了Decoder-Only结构视频生成模型，堪称王炸！华为曾经出过Decoder-Only的模型(还被群嘲过)，但是事实逐渐证明这种能够把文本、音频、视频等各种模态通过编码成tokens组合在一起是多么具有想象力的事情！明年的Ch
2023年底，科技公司都在冲击生成式AI的最后一个关卡——视频生成。本周二，谷歌提出的视频生成大模型上线，立刻获得了人们的关注。这款名为VideoPoet的大语言模型，被人们认为是革命性的zero-shot视频生成工具。VideoPoet既可以文生视频、图像生视频，又能风格迁移，视频转语音。从效果上看，它可以构建多样化且流畅的运动。消息一出，有很多人表示欢迎：看看目前的几个成品效果不错，大模型技术发展的速度也太快了。有人对于这个大模型生成视频的长度表示惊讶：来源：https://twitter.com/cybersphere_ai/status/1737257729167966353还有人表示
