草庐IT

MapReduce概述及工作流程

内容mapreduce原语(独创)mapreduce工作流程(重点)MR作业提交流程(重点)YARNRM-HA搭建(熟练)运行自带的wordcount(了解)动手写wordcount(熟练)MapReduce原语hadoopMapReduce框架可以让你的应用在集群中可靠地容错地并行处理TB级别的数据1024TB=1PB 1024PB=1EB 1024EB=1ZBMapReduce原语 “相同”key的键值对为一组调用一次reduce方法,方法内迭代这一组数据进行计算分组比较器YARN:资源管理框架        ResourceManager:一个  主        NodeManager

朴素贝叶斯模型及案例(Python)

目录1朴素贝叶斯的算法原理2一维特征变量下的贝叶斯模型3 二维特征变量下的贝叶斯模型4 n维特征变量下的贝叶斯模型5 朴素贝叶斯模型的sklearn实现6 案例:肿瘤预测模型6.1 读取数据与划分6.1.1 读取数据6.1.2 划分特征变量和目标变量6.2 模型的搭建与使用6.2.1 划分训练集和测试集6.2.2 模型搭建6.2.3 模型预测与评估参考书籍1朴素贝叶斯的算法原理贝叶斯分类是机器学习中应用极为广泛的分类算法之一。朴素贝叶斯是贝叶斯模型当中最简单的一种,其算法核心为如下所示的贝叶斯公式。其中P(A)为事件A发生的概率,P(B)为事件B发生的概率,P(A|B)表示在事件B发生的条件下

漏洞补丁:漏洞命名(CVE和CNNVD)及补丁查找

摘要:以前一个项目,最近收到一份脆弱性分析报告(漏洞报告),通过这份报告小技能+1,记录一下报告中几个重要编号说明和如何下载对应的补丁文件。一、名称介绍截图为报告的部分内容,里面包含了编号,描述,解决地址。这里对CVE编号,CVSS分值,国家漏洞库编号(CNNVD)等几个主要名称含义进行记录。1、CVE编号CVE官网:https://cve.mitre.org/参考链接地址:https://info.support.huawei.com/info-finder/encyclopedia/zh/CVE.htmlCVE(CommonVulnerabilitiesandExposures)的全称是公

三极管串联线性稳压电路原理详解及Multisim仿真

文章目录前言一、三极管输入/输出特性曲线1.输入特性曲线2.输出特性曲线二、三极管稳压电路及原理解析1.三极管串联稳压电路2.稳压原理解析总结参考前言这段时间在工作中接触到了基于三极管、稳压二极管实现降压稳压的电路。在熟悉电路和阅读文章的时候,发现不少文章对于三极管线性稳压电路的原理介绍得不太详细、不太正确的问题。本文首先介绍了三极管的输入/输出特性曲线,并在此基础之上利用Multisim搭建了三极管稳压电路,最后对所搭建的稳压电路进行了原理解析。一、三极管输入/输出特性曲线1.输入特性曲线当三极管共射极连接,集电极与发射极之间的电压UCEU_{CE}UCE​维持在不同的电压时,反映UBEU_

Hyperledger Fabric 安装部署及测试网络汇总

先放上官方的学习文档,永远相信官方文档是最好最新的!!!入门—hyperledger-fabricdocsmaster文档环境准备环境搭建大部分可参考下篇文章搭建HyperledgerFabric环境的详细步骤,超级详细_FAFU_kyp的博客-CSDN博客但要注意的是:文章中的go语言版本比较老,有可能会出问题,所以可以自行去官网查看最新版本在去改一下命令即可!(目前最新版本为1.18.4)同时我们在下载一样东西之后,最好先执行sudoapt-getupdate更新一下索引,以免出错,然后再接着下载下一个有关docker的权限问题,可以参考这篇文章Gotpermissiondeniedwhi

ElasticSearch - 集群部署及脑裂问题

官方文档一、集群安装1、删除原来的单节点的es相关的内容1.1关闭原来安装的es,并且移除它dockerstop4ffdockerrm4ff1.2删除原来es的数据存在文件夹rm-rfes2、配置elasticsearch.ymles1配置文件#集群的名称cluster.name:elasticsearch#节点的名称node.name:es1#指定该节点是否有资格被选举成为master节点,默认是true,es是默认集群中的第一台机器为master,如果这台机挂了就会重新选举masternode.master:true#允许该节点存储数据(默认开启)node.data:true#允许任何ip

新闻发布及管理系统的设计与实现(论文+PPT+源码)

本科毕业设计(论文)题目:新闻发布及管理系统的设计与实现专题题目:本科毕业设计(论文)任务书题目:新闻发布及管理系统的设计与实现专题题目(若无专题则不填):原始依据(包括设计(论文)的工作基础、研究条件、应用环境、工作目的等):工作基础基于web的新闻发布及管理系统的设计与实现,是动态网页和数据库结合,通过事件来处理新闻。我们对最新信息的更新和发布需要比较及时,而动态交互网页能实现这些功能,新闻发布及管理系统就是一个能够在网上实现新闻的发布及管理,让人们更好的获取更新的新闻资讯。研究条件随着全球信息化的发展,生活节奏越来越快,要求人们对信息的时效性容的实时性的要求。所以基于web的新闻发布系统

VOC/YOLO/COCO数据集格式转换及LabelImg/Labelme/精灵标注助手Colabeler标注工具介绍

数据集格式:VOC(xml)、YOLO(txt)、COCO(json)本文主要对Label格式,以及LabelImg、Labelme、精灵标注助手Colabeler这常用的三种数据标注软件进行介绍。1Label格式LabelImg是目标检测数据标注工具,可以标注标注两种格式:VOC标签格式,标注的标签存储在xml文件YOLO标签格式,标注的标签存储在txt文件中COCO标签格式,标注的标签存储在json文件中打开LabelImg后我们在要标定数据的时候,一般是已经制定好了要标注物体的类别,这样在打开LabelImg之后,我们只要框定目标之后,选择要对应的标签即可。labelimgJPEGIma

skywalking了解及搭建使用

skywalking了解及搭建使用SkyWalking是分布式系统的应用程序性能监视工具,专为微服务、云原生架构和基于容器(Docker、K8S、Mesos)架构而设计SkyWalking是观察性分析平台和应用性能管理系统。提供分布式追踪、服务网格遥测分析、度量聚合和可视化一体化解决方案SkyWalking组成Agent:负责从应用中,收集链路信息,发送给SkyWalkingOAP服务器。目前支持SkyWalking、Zikpin、Jaeger等提供的Tracing数据信息。而我们目前采用的是,SkyWalkingAgent收集SkyWalkingTracing数据,传递给服务器。SkyWal

selenium的安装及配置

文章目录1.selenium简介2.selenium安装3.selenium浏览器驱动3.1selenium驱动下载3.2selenium驱动设置4.验证驱动是否可用5.selenium程序1.selenium简介Selenium是最广泛使用的开源WebUI(用户界面)自动化测试套件之一。Selenium支持的语言包括C#,Java,Perl,PHP,Python和Ruby。目前,SeleniumWeb驱动程序最受Python和C#欢迎。Selenium测试脚本可以使用任何支持的编程语言进行编码,并且可以直接在大多数现代Web浏览器中运行。在爬虫领域selenium同样是一把利器,能够解决大部