谢乾坤|青南
·
一日一技：写XPath也并不总是这么简单
💡
原文中文，约1500字，阅读约需4分钟。
📝
内容提要
初级爬虫工程师编写XPath时常遇到动态生成的HTML问题。使用DrissionPage工具可以在模拟浏览器中操作，避免弹出框消失，从而轻松获取所需的XPath，适用于各种弹出框。
🎯
关键要点
-
初级爬虫工程师的工作是编写XPath，通常认为技术含量低。
-
动态生成的HTML会导致无法查看弹出框的源代码。
-
点击鼠标左键会导致弹出框自动关闭，影响XPath编写。
-
使用关键字匹配编写XPath可能因语言变化而失效。
-
解决动态HTML问题的关键在于使用合适的工具。
-
推荐使用DrissionPage工具在模拟浏览器中操作，避免弹出框消失。
-
通过DrissionPage点击元素后，可以稳定获取弹出框的HTML。
-
此方法适用于各种弹出框，简化XPath编写过程。
❓
延伸问答
初级爬虫工程师的主要工作是什么？
初级爬虫工程师主要负责编写XPath，以提取网页中的数据。
动态生成的HTML对XPath编写有什么影响？
动态生成的HTML会导致无法查看弹出框的源代码，从而影响XPath的编写。
如何解决弹出框消失的问题以编写XPath？
可以使用DrissionPage工具在模拟浏览器中操作，避免弹出框消失，从而稳定获取HTML。
为什么使用关键字匹配编写XPath可能会失效？
因为页面文本会根据浏览器语言变化，导致关键字匹配的XPath失效。
DrissionPage工具的使用步骤是什么？
首先启动Python环境，使用DrissionPage打开浏览器，手动登录并点击元素以获取弹出框的HTML。
使用DrissionPage工具有什么优势？
使用DrissionPage可以在模拟浏览器中操作，避免弹出框消失，简化XPath编写过程。
🏷️
标签
➡️
