目录一、学习心得二、爬虫用到的pip模块以及对应的功能三、单个网页爬虫代码及结果四、scrapy框架爬虫五、Gerapy搭建一、学习心得 本学期我开始接触网络爬虫，从爬虫的基础知识开始学习，到简单的网页信息的抓取和简单的数据处理，将数据保存到MySQL数据库、MongoDB数据库中，乃至于scrapy、gerapy爬虫框架的应用，整体上对数据爬虫有了认识。爬虫工作首先是获取网页，再向服务器发送请求获取信息，将提取到的数据进行存储，以及自动化程序。 万事开头难，刚开始学习需要了解的基础知识挺多，代码报错是经常的事，还有软件的安装，各种库的安装，都很容易出错。在爬虫学习的过程中，我遇到
目录安装必需组件配置项目选项安装必需组件需要安装MicrosoftVisualStudioInstallerProjects2022组件。点击扩展->选择管理扩展->搜索installer->下载InstallerProjects2022。重启应用完成安装。配置项目选项在解决方案处点击右键->选择添加->新建项目->选择SetupProject。编辑项目名称并确认项目位置。在ApplicationFolder上点击右键->Add->项目输出->主输出。点击主输出，查看属性框，确认KeyOutput中的SourcePath为项目可执行文件。然后继续在ApplicationFolder上点击右键-
气象数据是在各项研究中都经常使用的数据，气象指标包括气温、风速、降水、湿度等指标，说到常用的降水数据，最详细的降水数据是具体到气象监测站点的降水数据！之前我们分享过1929-2022年全球气象站点的逐年平均气温数据、逐年最高气温和逐年最低气温数据。本次我们为大家继续带来具体到气象监测站点的数据——1929-2022年全球气象站点的逐年平均降水量数据！原始数据来源于美国国家海洋和大气管理局（NOAA）下设的国家环境信息中心(NCEI)，原始数据以英寸为单位，数据格式为csv，缺失数据用99.99表示。为了方便大家使用，我们对原始数据进行了一些处理，包括：①降水单位转为毫米；②处理得到了shp和e
最新私网IP地址（IPv4）私网的IP地址建议私网的IP地址A类：10.0.0.0-10.255.255.255A类：100.64.0.0-100.127.255.255B类：172.16.0.0-172.31.255.255C类：192.168.0.0-192.168.255.255建议还是早日了解IPv6吧，政务机房2022年已经上了一批IPv6了，未来肯定是主推IPv6的。
Unity官方下载_Unity最新版_从UnityHub下载安装|Unity中国官网选择从hub下载 要登陆，之前注册了就不说了windows先下载unityHub安装好打开然后hub叫你安装editor，选个风水宝地 小插曲，卡了半年，但我们认为这是正常的 装完，直接projects里面就可以创建了，记得创建的时候改location另：刚创建project会提示你Pleasechooseanorganization.，关掉重开即可
访问windowsserver2022共享文件夹提示引用的帐户当前已锁定，且可能无法登录的解决客户端打开windowsserver2022的共享文件或者升级文件夹时提示"引用的帐户当前已锁定，且无法登录"，这有可能是服务器且用了【允许管理员账户锁定】导致登录界面输入错误的密码超过次数或者其他原因，被锁定拒绝访问。编辑本地安全策略CMD输入（Windowa+R），键入secpol.msc，按Enter键。"本地安全策略"窗口打开后，选择"安全设置"。打开帐户策略并选择帐户锁定策略。禁用帐户锁定，请将现有值替换为0，单击"应用"以保存更改。其他项目自动关闭。如果设置要打开以上设置，就要一项一项的设
首先依次点击File->setting->VersionControl->Git，将PathtoGitexecutable设置为：你Git安装目录下的bin\git.exe然后创建一个本地仓库，注意：你需要将这个仓库设置为项目的根目录，如果你设置到其他的目录可能会出现Git功能可以用，但是右键项目没有Git的选项，也没有add文件到暂存区的功能。
2022年NOC大赛创客智慧编程图形化决赛用题运动与竞技主题描述：第二十四届冬季奥林匹克运动会2月4日晚在北京开幕，这是中国首次举办的冬季奥运会。北京冬奥会的会徽叫做冬梦，由会徽图形、文字标志、奥林匹克五环标志组成；吉祥物叫做冰墩墩，以熊猫为设计原型，整体形象酷似航天员。主题是一起向未来，展现了中国对世界和平的追求和向往。参加冬奥会的运动员们公平竞争，不断挑战自我，以体育精神、奥林匹克精神激励了所有人。请以【运动和竞技】为主题，从以下4个角度进行探索，并在4个子主题中任选1个进行创作，完成对应的程序编写，并撰写500字以内作品灵感来源及描述。提示：作品类型包括但不限于游戏制作、互动艺术、场景故
大家好，我是小白DunkIT，今天给大家分享一下我最近遇到的IDEA2022.3版本创建Maven项目时出现没有src目录的问题。问题：IDEA创建Maven项目时没有出现src目录创建Maven项目新版本的IDEA创建是选用的是MavenArchetype，选择这个也是和Maven一样的。按照这样流程创建完成之后的的架构 将会是这样：此时我们可以看见并没有出现src目录，很多小伙伴这是就会疑惑怎么办，是不是创建目录有问题，接下来我们给出解决的办法：解决办法：1.首先单击左上角file目录，找到Settings目录，在搜索框里面找到Runner这个选项，或者可以按照Build,Exceptio
Cmake配置vs2022工程我电脑安装的是vs2022但是cmake的gui没有vs2022的选项只有2019而且选择2019生成编译环境是错的提示“visualstudio162019couldnotfindanyinstanceofvisualstudio.”解决方法如下先利用vs2022创建一个cmake项目在项目路径下执行命令mkdirbuildcd.\build\cmake.生成如下我们再去看cmake的配置UI上看就已经有了我们的vs2022的选项了这下我们直接点击finish生成即可或者参考如下路径在cmake下自行配置#ThisistheCMakeCachefile.#For
