本文介绍了如何抓取受密码保护的网站，包括提取登录表单元素、使用Selenium自动登录、保存会话cookie和获取数据。首先，识别登录页面的用户名、密码和登录按钮的CSS选择器，然后使用Selenium进行登录并保存cookie，最后通过requests库获取所需数据。此外，还可以利用AI提取特定信息，如API密钥。

本文介绍了使用wget命令抓取整个网站的技巧，包括递归抓取、下载页面必需元素、避免抓取父级目录和转换链接为相对链接等。同时提醒注意内存使用，以防止OOM错误。