ICode9

精准搜索请尝试: 精确搜索
首页 > 编程语言> 文章详细

python爬虫学习(六):xpath解析

2022-03-20 17:35:17  阅读:210  来源: 互联网

标签:xpath etree python text 爬虫 对象 源码 文本


  • xpath解析原理:
    - 1.实例化一个etree的对象,且需要将被解析的页面源码数据加载到该对象中。
    - 2.调用etree对象中的xpath方法结合着xpath表达式实现标签的定位和内容的捕获。
    • 环境的安装:
      • pip install lxml
    • 如何实例化一个etree对象:from lxml import etree
      • 1.将本地的html文档中的源码数据加载到etree对象中:
        etree.parse(filePath)
      • 2.可以将从互联网上获取的源码数据加载到该对象中
        etree.HTML('page_text')
      • xpath('xpath表达式')
    • xpath表达式:
      • /:表示的是从根节点开始定位。表示的是一个层级。
      • //:表示的是多个层级。可以表示从任意位置开始定位。
      • 属性定位://div[@class='song'] tag[@attrName="attrValue"]
      • 索引定位://div[@class="song"]/p[3] 索引是从1开始的。
      • 取文本:
        • /text() 获取的是标签中直系的文本内容
        • //text() 标签中非直系的文本内容(所有的文本内容)
      • 取属性:
        /@attrName ==>img/src

标签:xpath,etree,python,text,爬虫,对象,源码,文本
来源: https://www.cnblogs.com/simon1993/p/16030638.html

本站声明: 1. iCode9 技术分享网(下文简称本站)提供的所有内容,仅供技术学习、探讨和分享;
2. 关于本站的所有留言、评论、转载及引用,纯属内容发起人的个人观点,与本站观点和立场无关;
3. 关于本站的所有言论和文字,纯属内容发起人的个人观点,与本站观点和立场无关;
4. 本站文章均是网友提供,不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属;如您发现该文章侵犯了您的权益,可联系我们第一时间进行删除;
5. 本站为非盈利性的个人网站,所有内容不会用来进行牟利,也不会利用任何形式的广告来间接获益,纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

专注分享技术,共同学习,共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有