python爬虫怎么写

 时间:2024-11-02 13:00:03

1、首先我们需要确定要爬取的目标页面内容,如下图所示比如要获取温度值

python爬虫怎么写

2、然后我们需要打开浏览器的F12,查找所要获取内容的特征,比如他有哪些样式标签或者ID属性

python爬虫怎么写

3、接下来我们打开cmd命令行界面,导入requests库和html库,如下图所示,这个lxml需要大家自行下载安装

python爬虫怎么写

4、接着就是通过requests库将页面内容获取过来,然后用lxml下的html将其转化为文本,如下图所示

python爬虫怎么写

5、接下来就是通过xpath语法进行特定元素内容的查找,这里一般会用到class或者id的名称,如下图所示

python爬虫怎么写

6、最后运行程序就可以获取到需要的内容了,如下图所示

python爬虫怎么写

7、综上所述,运用python制作爬虫主要是运用requests获取内容,然后根据内容进行特定元素查找,这只是最简单的流程,不过即使在复杂的爬虫也是这几步

  • 第一次和男/女朋友约会应该注意的事情
  • 如何给女朋友/爱人一个惊喜
  • 怎样给女人吃豆豆
  • 如何让女朋友变成妻子?
  • 教你:如何“哄”女朋友!
  • 热门搜索
    砌体加筋怎么布置 剪纸图片大全 电脑显卡怎么升级 马图片大全 无底洞怎么加点 怎么显示文件后缀名 盏五笔怎么打 公鸡图片大全 第二年车险怎么买 小姐怎么找