代码编辑运行环境:(推荐学习:Python教程)
个人推荐PyCharm社区版,当然,Python自带的IDLE也行,Notepad++亦可,只要自己使用得习惯。
F12 开发者工具
看源代码:快速定位元素分析xpath:1、此处建议谷歌系浏览器,可以在源码界面直接右键看
抓包工具
推荐httpfox,火狐浏览器下的插件,比起谷歌火狐是自带的F12工具都要好,可以方便查看网站收包发包的信息
XPATH CHECKER (火狐插件)
非常不错的xpath测试工具,不过也有几个小缺点,:
xpath checker生成的是绝对路径,遇到一些动态生成的图标(常见的有列表翻页按钮等),飘忽不定的绝对路径很有可能造成错误,所以这里建议在真正分析的时候,只是作为参考记得把如下图xpath框里的“x:”去掉,貌似这个是早期版本xpath的语法,目前已经和一些模块不兼容(比如scrapy),还是删去避免报错。
正则表达测试工具
在线正则表达式测试 ,拿来多练练手,也辅助分析!里面有很多现成的正则表达式可以用,也可以进行参考!
更多Python相关技术文章,请访问Python教程栏目进行学习!
以上就是<a href="https://www.dapan.cc/article/python">python用什么软件写爬虫的详细内容,更多请关注大盘站其它相关文章!
声明:本站所有文章,如无特殊说明或标注,均为本站原创发布。任何个人或组织,在未征得本站同意时,禁止复制、盗用、采集、发布本站内容到任何网站、书籍等各类媒体平台。如若本站内容侵犯了原著者的合法权益,可联系我们进行处理。