1.简介快速优雅地学会JS逆向，就需要从实战开始，接下来我会提供Base64加密的原网址以及接口参数，从实战中学习如何下断点、抠代码、本地运行等操作，此技术一般用于爬虫上，是一个爬虫程序猿进阶的必经之路。2.实战信息网址：aHR0cHM6Ly9mYW55aS5iYWlkdS5jb20vP2FsZHR5cGU9MTYwNDcjYXV0by96aA==接口：aHR0cHM6Ly9mYW55aS5iYWlkdS5jb20vdjJ0cmFuc2FwaT9mcm9tPXpoJnRvPWVu逆向参数：sign:232427.485594token:3dde9ef10b6f6ae310af38e6f1bd5
1.导入所需要的请求头参数这里为了避免被封IP，我使用了IP代理。#配置代理self.proxy_ip=""self.proxy_port=""opt=ChromeOptions()opt.add_argument("--disable-blink-features=AutomationControlled")opt.add_argument('--disable-web-security')#opt.add_experimental_option("debuggerAddress","127.0.0.1:9222")opt.add_argument(f'--proxy-server={sel
目录一、selenium的优势和点击操作二、chrome的远程调试能力三、通过Chrome隔离实现一台电脑登陆多个账号一、selenium的优势和点击操作1.环境搭建工具：Chrome浏览器+chromedriver+seleniumwin用户：chromedriver.exe放在python.exe旁边MacOS用户：驱动路径是/user/local/bin/chromedriverLinux大佬自行安装2.Selenium优势Selenium直接操作浏览器，不需要分析请求和加密数据程序可以读取网页源码，分析并提取内容程序可以直接和网页元素进行交互，例如点击fromseleniumimpor
目录一、背景介绍1.1软件说明1.2效果演示二、科普知识2.1关于视频id2.2关于评论时间三、爬虫代码3.1界面模块3.2爬虫模块3.3日志模块四、获取源码及软件一、背景介绍你好，我是@马哥python说，一名10年程序猿。最近我用python开发了一个GUI桌面软件，作用是爬取YouTube指定视频的评论，6个关键字段，含：评论id、评论内容、评论时间、评论作者昵称、评论作者频道、点赞数1.1软件说明几点重要说明：运行之前，先打开魔法Windows用户可直接双击打开使用，无需Python运行环境可爬取指定数量评论，或者全部评论（不存在反爬问题）排序方式支持：按日期排序/按热门排序可爬取6个
玩爬虫的时候，遇到了很多不能爬取的问题，网页为空、返回码出错（400、412）、图片不展示但源码中存在图片链接等，问题通常都是服务器检测到浏览器是自动化爬取。文章记录一下通用解决办法importtimefromseleniumimportwebdriverfromwebdriver_manager.chromeimportChromeDriverManager#Chromedriver_path=''options=webdriver.ChromeOptions()options.add_argument("--disable-extensions")options.add_argument(
前言：目前为止，很多app的防护基本也还是用的sslpinning检测证书。因为，目前的app要么不用ssl，要么用就是一般的ssl，基本就是在手机上装个相关软件的代理即可，而且这个代理基本就是fiddler，charlels，burpsuite,mitmproxy（Python环境下的）四个抓包软件自带的ssl证书，然后即可抓到ssl（https）的请求以上这些，基本可以解决大部分的app（其实很多使用ssl的网站也是这样处理）但是因为很多app为了防止数据被分析爬取，会做sslpinning验证sslpainningSSLPinning是一种防止中间人攻击（MITM）的技术，主要机制是在客
一、seleniumWire介绍介绍SeleniumWire扩展了Selenium的Python绑定，使您能够访问浏览器发出的底层请求。您已使用Selenium相同的方式编写代码，但是您获得了额外的api，用于检查请求和响应，并动态地对它们进行更改。（注：意思是这个不仅包含了selenium的功能，还额外增加了新的扩展功能，引用seleniumwire后就不用再引用selenium)工作原理 SeleniumWire的工作原理是将浏览器流量重定向到它在后台运行的内部代理服务器。当请求流经代理服务器时，它们被拦截和捕获。捕获请求可能会使事情变慢，但你可以做一些事情来限制被捕获的内容。二、sel
1.写在前面 最近一段时间接触了一些小说网站的业务。发现很多的小说网站，甚至一些小站它们的安全防护措施做的都很到位！例如上次说到的的五秒盾也是存在于一个小说小站。今天要讲的这个网站它集JS加密、ob混淆、CSS反爬于一体目标站点：aHR0cHM6Ly93d3cuaG9uZ3NodS5jb20vY29udGVudC8xMTM3NzIvMjA1NDI1LTE0NTU1NzIuaHRtbA==2.分析这次主要说的就是小说内容这块，打开这个网站的你会发现内容是不允许复制的。其次页面呈现的内容里面有一部分数据是隐藏的，虽然在页面你看它显示都正常，但在原代码中是没有的，而是由类似span标签代替的这种反
方法一：去除window.navigator.webdriver特征代码如下：fromselenium.webdriverimportChromeOptionsfromseleniumimportwebdriver#实例化对象option=ChromeOptions()option.add_experimental_option(‘excludeSwitches’,[‘enable-automation’])#开启实验性功能#去除特征值option.add_argument(“–disable-blink-features=AutomationControlled”)#实例化谷歌driver=
一、使用chrome浏览器，浏览器驱动与浏览器版本必须一致，浏览器驱动下载好后放在python安装目录下的scripts文件夹里二、可以跳过滑动验证码，代码如下：fromselenium.webdriver.common.byimportByfromlib2to3.pgen2importdriverfromseleniumimportwebdriver#隐藏WebDriver提示条和自动化扩展信息option=webdriver.ChromeOptions()option.add_experimental_option('excludeSwitches',['enable-automation
