一、论文信息论文信息：DetectingDeepfakeswithSelf-BlendedImages论文/Paper:http://arxiv.org/pdf/2204.08376代码/Code:https://github.com/mapooon/SelfBlendedImages作者团队：会议：CVPR2022-Oral二、动机与创新动机 早期训练集的构造点是基于两种方案：对图片进行模糊处理以模拟生成图片的清晰度下降，以及合成两个图片来制造伪影，以便于学习。然而随着深度伪造技术的进步，清晰度逐渐上升，前者已经不再适用。而后者在低质量数据集上又难以检测伪影，鲁棒性较差。 创新 提出新的
一、论文信息论文信息：DetectingDeepfakeswithSelf-BlendedImages论文/Paper:http://arxiv.org/pdf/2204.08376代码/Code:https://github.com/mapooon/SelfBlendedImages作者团队：会议：CVPR2022-Oral二、动机与创新动机 早期训练集的构造点是基于两种方案：对图片进行模糊处理以模拟生成图片的清晰度下降，以及合成两个图片来制造伪影，以便于学习。然而随着深度伪造技术的进步，清晰度逐渐上升，前者已经不再适用。而后者在低质量数据集上又难以检测伪影，鲁棒性较差。 创新 提出新的
渲染上：（1）Image通过UGUI的Image和CanvasRenderer组件组件来渲染；（2）Sprite通过SpriteRenderer组件来渲染；（3）两者在视觉上没有任何区别（都使用默认材质时）。它们默认的渲染也都是在TransparentGeometry队列中。原理上：（1）GPU接收到DrawCall指令后，通过一系列流程生成最终要显示的内容并进行渲染，其中大致的步骤包括：a.CPU发送DrawCall指令给GPU；b.GPU读取必要的数据到自己的显存；c.GPU通过顶点着色器（vertexshader）等步骤将输入的几何体信息转化为像素点数据；d.每个像素都通过片段着色器（f
渲染上：（1）Image通过UGUI的Image和CanvasRenderer组件组件来渲染；（2）Sprite通过SpriteRenderer组件来渲染；（3）两者在视觉上没有任何区别（都使用默认材质时）。它们默认的渲染也都是在TransparentGeometry队列中。原理上：（1）GPU接收到DrawCall指令后，通过一系列流程生成最终要显示的内容并进行渲染，其中大致的步骤包括：a.CPU发送DrawCall指令给GPU；b.GPU读取必要的数据到自己的显存；c.GPU通过顶点着色器（vertexshader）等步骤将输入的几何体信息转化为像素点数据；d.每个像素都通过片段着色器（f
前言文献名称：LearnedImageCompressionwithDiscretizedGaussianMixtureLikelihoodsandAttentionModules本文基于CompressAI的库进行复现github地址：compressAI关于compressAI相关博客说明：CompressAI：基于pytorch的图像压缩框架使用安装好compressai后相当于把这个底层库引入了我们的工程相关环境搭配可以参考JointAutoregressiveandHierarchicalPriorsforLearnedImageCompression文献复现文献复现同样都是使用co
前言文献名称：LearnedImageCompressionwithDiscretizedGaussianMixtureLikelihoodsandAttentionModules本文基于CompressAI的库进行复现github地址：compressAI关于compressAI相关博客说明：CompressAI：基于pytorch的图像压缩框架使用安装好compressai后相当于把这个底层库引入了我们的工程相关环境搭配可以参考JointAutoregressiveandHierarchicalPriorsforLearnedImageCompression文献复现文献复现同样都是使用co
CLIP（ContrastiveLanguage-ImagePre-Training）:利用文本的监督信号训练一个迁移能力强的视觉预训练模型通过对比学习,训练得到图片和文本的相似度,传闻使用4亿个配对的数据和文本来进行训练,不标注直接爬取的注意:由于训练数据基本都是英文,对英文支持的比较好用途:CLIP主要是用来做图片分类(计算图片和文本的相似度(关联度)),也可以辅助做GAN,检测,分割,检索等等以往我们训练一个猫狗分类模型，换一个线条猫，点云猫，油画猫，穿着奇装异服的猫，分类网络很难还认识，但是现在只要加上一个CLIP，模型马上就被扩展了.CLIP是如何训练的:CLIP是如何进行推理的:可
CLIP（ContrastiveLanguage-ImagePre-Training）:利用文本的监督信号训练一个迁移能力强的视觉预训练模型通过对比学习,训练得到图片和文本的相似度,传闻使用4亿个配对的数据和文本来进行训练,不标注直接爬取的注意:由于训练数据基本都是英文,对英文支持的比较好用途:CLIP主要是用来做图片分类(计算图片和文本的相似度(关联度)),也可以辅助做GAN,检测,分割,检索等等以往我们训练一个猫狗分类模型，换一个线条猫，点云猫，油画猫，穿着奇装异服的猫，分类网络很难还认识，但是现在只要加上一个CLIP，模型马上就被扩展了.CLIP是如何训练的:CLIP是如何进行推理的:可
[已解决]RuntimeError:CUDAerror:nokernelimageisavailableforexecutiononthedevice问题描述问题分析总结问题描述在ubuntu服务器上用python炼丹的时候遇到的两个问题，一个warning和一个runtimeErro，我的环境是用conda配置的，我就切换了一下环境，然后切回来就报这两个错误，期间啥也没干，之前重新安装opencv疯狂报错也是这种样子的。warningwarning：NVIDIAGeForceRTX3090withCUDAcapabilitysm_86isnotcompatiblewiththecurrent
[已解决]RuntimeError:CUDAerror:nokernelimageisavailableforexecutiononthedevice问题描述问题分析总结问题描述在ubuntu服务器上用python炼丹的时候遇到的两个问题，一个warning和一个runtimeErro，我的环境是用conda配置的，我就切换了一下环境，然后切回来就报这两个错误，期间啥也没干，之前重新安装opencv疯狂报错也是这种样子的。warningwarning：NVIDIAGeForceRTX3090withCUDAcapabilitysm_86isnotcompatiblewiththecurrent
