雨夜的博客

启动 sudo /usr/local/mongodb/bin/mongo启动进程 sudo /usr/local/mongodb/bin/mongod -f /etc/mongod.conf进入数据库 sudo /usr/local/mongodb/bin/mongo数据库的操作1.查看所有数据库 show dbs2.使用数据库-use 数据库名3.查看当前数据库 db4.删除数据库 db.... 阅读全文…

验证码的识别 url不变，验证码不变 请求验证码的地址，获得相应，识别 url不变，验证码会变 思路：对方服务器返回验证码的时候，会和每个用户的信息和验证码进行一个对应，之后，在用户发送post请求的时候，会对比post请求中法的验证码和当前用户真正的存储在服务器端的验证码是否相同 1.实例化session 2.使用seesion请求登录页面，获取验证码的地址 3.使用session... 阅读全文…

xpath的包含 //div[contains(@class,'i')] xpath有哪些常用方法 // 从任意位置选择节点 //a/text() a下的文本 //a//text() a下所有的文本 . 当前路径 @符号 a/@href div[@class='a'] text() a[text()='下一页'] .. 上一级 /... 阅读全文…

正则使用的注意点 re.findall("a(.*?)b","str"),能够返回括号中的内容,括号前后的内容起到定位和过滤的效果 原始字符串r，待匹配字符串中有反斜杠的时候，使用r能够忽视反斜杠带来的转义的效果 点号默认情况匹配不到\n \s能够匹配空白字符，不仅仅包含空格，还有\t|\r\n xpath使用重点 使用xpath helpe... 阅读全文…

requests如何进行url解码，如何添加超时参数 requests.utils.unquot(url) requests.utils.quot(url) requests.get(url,timeout=3) retrying模块如何使用123@retry(stop_max_attempt_number=3)def fun1(): pass 破解js生成的数据 定位js search... 阅读全文…

判断请求否是成功1assert response.status_code==200 url编码 https://www.baidu.com/s?wd=%e9%95%bf%e5%9f%8e 字符串格式化的另一种方式1"1{}345".format(2) 使用代理ip 准备一堆的ip地址，组成ip池，随机选择一个ip来时用 如何随机选择代理ip，让使用次数较少的ip地址有... 阅读全文…

爬虫软件安装命令： 安装requests模块pip install urllib 安装异常模块pip install retrying 源码安装python setup.py install xpath模块安装 pip install lxml 下载PhantomJSwget https://bitbucket.org/ariya/phantomjs/downloads/phant... 阅读全文…

把pycharm固定到启动栏 sudo gedit /usr/share/applications/jetbrains-pycharm.desktop粘贴以下内容 12345678910[Desktop Entry] Version=1.0Type=ApplicationName=Pycharm Icon=/home/zhang/pycharm/pycharm-2018.2.4/b... 阅读全文…

pycharm常用快捷键##1、编辑（Editing） 基本的代码完成（类、方法、属性） Ctrl + Space 快速导入任意类 Ctrl + Alt + Space 语句完成 Ctrl + Shift + Enter 参数信息（在方法中调用参数） Ctrl + P 快速查看文档 Ctrl + Q 外部文档 F1 外部文档，进入web文档主页 Shift + F1... 阅读全文…

拷贝一个备份 sudo cp /etc/mysql/mysql.conf.d/mysqld.cnf /etc/mysql/mysql.conf.d/mysqld.cnf.bak 用vim打开配置文件 sudo vim /etc/mysql/mysql.conf.d/mysqld.cnf 注释绑定地址即不绑定地址 #bind-address = 127.0.0.1 ... 阅读全文…