草庐IT

监督组

全部标签

【论文导读】- Link Weight Prediction Using Supervised Learning Methods(使用监督学习方法的链路权重预测及其在Yelp网络中的应用)

文章目录论文信息摘要主要内容(contributions)图模型和评价指标特征指标原图特征指标原始图转线图线图特征指标论文信息LinkWeightPredictionUsingSupervisedLearningMethodsandItsApplicationtoYelpLayeredNetwork原文地址:https://ieeexplore.ieee.org/abstract/document/8281007/摘要Real-worldnetworksfeatureweightsofinteractions,wherelinkweightsoftenrepresentsomephysical

【论文导读】- Link Weight Prediction Using Supervised Learning Methods(使用监督学习方法的链路权重预测及其在Yelp网络中的应用)

文章目录论文信息摘要主要内容(contributions)图模型和评价指标特征指标原图特征指标原始图转线图线图特征指标论文信息LinkWeightPredictionUsingSupervisedLearningMethodsandItsApplicationtoYelpLayeredNetwork原文地址:https://ieeexplore.ieee.org/abstract/document/8281007/摘要Real-worldnetworksfeatureweightsofinteractions,wherelinkweightsoftenrepresentsomephysical

【S2VD】S2VD半监督视频降雨方法(Semi-Supervised Video Deraining with Dynamical Rain Generator)论文学习

摘要目前的深度学习的视频去雨方法主要有两个缺点:(1)大多数不足以模拟雨天视频中包含的雨层特征。(2)当前的深度学习方法严重依赖于标记的训练数据,其雨层是合成的,导致与真实数据的偏差。S2VD解决了这些问题:首先使用了一个动态降雨发生器(dynamicalraingenerator)来合成降雨层。而动态生成器(dynamicalgenerator)由一个发射模型(emissionmodel)和一个过渡模型(transitionmodel)构成。分别同时编码雨纹的空间外观和时间动态,同时这两个模型均由深度神经网络(DNN)参数化。介绍雨纹,在过去几年中,已经探索了许多视觉特征,如光度外观、几何特

【S2VD】S2VD半监督视频降雨方法(Semi-Supervised Video Deraining with Dynamical Rain Generator)论文学习

摘要目前的深度学习的视频去雨方法主要有两个缺点:(1)大多数不足以模拟雨天视频中包含的雨层特征。(2)当前的深度学习方法严重依赖于标记的训练数据,其雨层是合成的,导致与真实数据的偏差。S2VD解决了这些问题:首先使用了一个动态降雨发生器(dynamicalraingenerator)来合成降雨层。而动态生成器(dynamicalgenerator)由一个发射模型(emissionmodel)和一个过渡模型(transitionmodel)构成。分别同时编码雨纹的空间外观和时间动态,同时这两个模型均由深度神经网络(DNN)参数化。介绍雨纹,在过去几年中,已经探索了许多视觉特征,如光度外观、几何特

LLMs:ColossalChat相关的开源训练数据集简介(SFT指令微调数据集+奖励模型排序数据集+RLHF数据集)、RLHF算法实现的三个阶段(监督指令微调→训练奖励模型→RLHF训练模型→​​​

LLMs:ColossalChat相关的开源训练数据集简介(SFT指令微调数据集+奖励模型排序数据集+RLHF数据集)、RLHF算法实现的三个阶段(监督指令微调→训练奖励模型→RLHF训练模型→推理量化和服务) 目录ColossalChat的使用方法1、ColossalChat相关的开源训练数据集(1)、SFT指令微调数据集

人工智能安全监督软件:让安全监督更加智能化和人性化

作者:禅与计算机程序设计艺术概述随着信息技术的飞速发展,安全监督日益成为行业的一项重要工作。安全监督涉及到对网络安全管理人员进行定期、系统的审计工作。但是,现代社会里的数据量越来越庞大,处理数据的能力也越来越强,传统的逐条审计方法已经不能满足需要。如何自动化地完成安全监督是一个难题。因此,越来越多的安全监督系统开始采用人工智能(AI)的方法来提升效率、减少错误、改善用户体验。目前,关于人工智能在安全监督中的应用,主要集中在自动检测垃圾邮件、网络钓鱼攻击等恶意网页和文件的行为、自动生成可疑目标的威胁情报、自动生成漏洞利用的攻击路径等方面。人工智能安全监督(AISecurity)是实现上述功能的一

突破自监督学习效率极限!马毅、LeCun联合发布EMP-SSL:无需花哨trick,30个epoch即可实现SOTA

过去几年,无监督和自监督学习(SSL)取得了巨大进步,通过SSL学习得到的表征在分类性能上甚至赶上了有监督学习,在某些情况下甚至还能超过有监督学习,这一趋势也为视觉任务的大规模数据驱动无监督学习提供了可能。虽然自监督学习的实验性能惊人,但大多数自监督学习方法都是相当「低效」的,通常需要数百个训练epoch才能完全收敛。  最近,马毅教授、图灵奖得主YannLeCun团队发布了一种新的自监督学习方法Extreme-Multi-PatchSelf-Supervised-Learning(EMP-SSL),证明了高效自监督学习的关键是增加每个图像实例中的图像块数量。论文链接:https://arxi

【Python机器学习】实验07 K-means无监督聚类

文章目录聚类K-means聚类1准备数据2给定聚类中心,计算每个点属于哪个聚类,定义函数实现3根据已有的数据的标记,来重新更新聚类中心,定义相应的函数4初始化聚类中心,定义相应的函数5定义K-means算法6绘制各个聚类的图7定义评价函数--即任意一点所在聚类与聚类中心的距离平方和8使用“肘部法则”选取k值9画张图来可视化选择K10对任意样本来预测其所属的聚类试试Sklearn实验1K-means实现无监督聚类1定义和调用更新每个样本所属聚类,聚类中心更新,初始化聚类中心的参数2定义Kmeans算法获得最终的聚类中心和样本所属聚类索引3绘制各个聚类的图4定义评价函数--即任意一点所在聚类与聚类

使用Anomalib项目的padim无监督算法 进行自制工业缺陷数据集的模型训练和ONNX部署(一)——模型训练篇

目录前言 一、无监督学习缺陷检测Anomalib介绍二、Anomalib代码结构三、任务描述和模型训练推理四、总结与展望前言     本文专注于padim算法在自制数据集上的训练过程,博主水平有限,对神经网络模型秉持能用就行的态度,所以文中不涉及网络结构和论文细节的解读,想看这些的同学请另寻资料哈~一、无监督学习缺陷检测Anomalib介绍    组里最近给的新任务,对金属材质表面的各种缺陷进行检测。之前使用的是有监督的yolov5网络,标数据集着实痛苦无比。而且工业缺陷数据有一个比较显著的特征:样本不平衡。绝大部分采集得到的工业数据都是没有缺陷的,这样一来,正样本的数据在模型训练中根本没有起

机器学习主要类型(三):半监督学习

机器学习主要类型(三):半监督学习Semi-SupervisedLearning让学习器不依赖外界交互、自动地利用未标记样本来提升学习性能未标记样本虽未直接包含标记信息,但若它们与有标记样本是从同样的数据源独立同分布采样而来,则它们所包含的关于数据分布的信息对建立模型将大有裨益半监督学习可进一步划分为纯(pure)半监督学习和直推学习(transductivelearning),前者假定训练数据中的未标记样本并非待预测的数据,而后者则假定学习过程中所考虑的未标记样本恰是待预测数据,学习的目的就是在这些未标记样本上获得最优泛化性能。换言之,纯半监督学习是基于"开放世界"假设,希望学得模型能适用于