Python教程

【Python 爬虫】Boss直聘信息提取

本文主要是介绍【Python 爬虫】Boss直聘信息提取，对大家解决编程问题具有一定的参考价值，需要的程序猿们随着小编来一起学习吧！

@

目录
  • 步骤
    • 方法1：
    • 方法2：
    • 爬取结果
    • 代码
    • 更新...

步骤

方法1：

使用resquest 获取不到网页的源码：

后来有的网友说要登录才能爬取，就想试一下登录：
在这里插入图片描述看来没法登录也解决不了！！！

方法2：

尝试使用无头浏览器进行爬取，还好能够爬取到信息！
接下来定位需要的信息就可以！！！

最后，由于直接进行测试，导致IP被反爬识别访问异常了！！！kule
IP 尝试多次被封！！！
在这里插入图片描述手动验证
在这里插入图片描述

  • 下次使用代理IP

爬取结果

在这里插入图片描述

代码

考试之后再贴上......初步代码，持续更新.......
数据爬取

更新...

  1. 添加gui界面
    python GUI 第一次写，先打一个最简单的设计。。。。
    在这里插入图片描述初步

  2. 输入城市名，输入职位名称，文件命名，点击保存格式。。。。
    在这里插入图片描述
    初步封装成类：

  • 总结：

self.button.clicked.connect(self.paqu) 绑定按钮
citys = self.CityEdit.toPlainText() 获取输入框的文本，这个函数没有text()函数
self.button = QPushButton('确定',self) self 是将按钮添加到当前窗口上这是一个继承父类的窗口
self.FileNEdit.move(280, 160) 布局，相对于父窗口的起点位置
self.FileNEdit.resize(130, 30) 自身窗口的大小

这篇关于【Python 爬虫】Boss直聘信息提取的文章就介绍到这儿，希望我们推荐的文章对大家有所帮助，也希望大家多多支持为之网！
您可能喜欢
栏目导航