怎么用python解析html

Posted 2023-03-22

参考技术A 现在用起来比较方便的有两种：
1. pyquery (类似Jquery语法，对于js熟悉的人，用这个会比较上手)

2. beatifulsoup:这个功能比较强大，用起来也很方便，目前正在整理笔记中，其中一个亮点就是：可以使用正则来解析有规律的html标签内容。
还有一个主要的问题：爬取网页的时候，需要使用http代理。因为有的网站有了方爬取的策略，这部分也在整理中，后续会整理发布。