跳到主要内容

提取HTML内容

从 HTML(一定程度上也支持 XML)里按 XPath 取出文本、属性或表格。内部用 HtmlAgilityPack,深入用法见其 文档

当前模块定义

概述

源可以是 HTML 文本,也可以是 http / https 网址(模块会先下载)。同一网址短时间内多次提取会走缓存;更新很勤的页面请先用 HTTP请求 再提取,避免拿到旧数据。

参数说明

操作类型

  • 提取文本内容:按 XPath 取节点。
  • 提取表格内容:取表格,可写入工作表对象。

源HTML:HTML 代码、网址,或根节点对象。

网页编码类型:按网址下载时的编码。留空默认 UTF-8;选 自动检测 (加载两次) 会先探测编码再重新请求。乱码时改这里。

节点XPath:例如网页标题 html/head/title。找不到节点时,试把标签名改成小写

提取方式:第一个符合条件的节点,或所有符合条件的节点(结果是列表)。

提取内容类型

提取内容类型说明
innerHtml 内部HTML节点内部的 HTML
innerText 内部文本节点内部的纯文本
outerHTML 节点全部HTML含节点自身的 HTML
Attribute 节点的某个属性再填 属性名称
节点对象返回 HtmlNode

属性名称:仅提取内容类型为属性时有效。

写入工作表对象:提取表格时,把结果写入工作表。旧稿未写。

失败后停止动作:失败是否中止动作。默认开启。

输出

  • 步骤执行是否成功
  • 提取值:单个值或列表,变量类型要匹配。
  • 根节点:整份源对应的 HtmlNode,可交给下一步再提取。旧稿未写。

示例动作

步骤较多,用卡片打开后查看。

限制与排障

  • 短时间重复拉同一网址会命中缓存。
  • XPath 大小写不对时经常取不到节点。
  • 编码不对会乱码:试 autogb2312utf-8

XPath 教程:W3School知乎笔记。在线测试:xpather.com

相关链接

更新历史

  • 1.4.17 开始提供。
  • 20230704 增加支持 XML,以及使用小写 XPath 的说明。

更新于