【常见问题】python可以做到自动抓取互联网上的新闻更新到网站吗

巨推传媒官方解答

2017-10-25

可以的，首先要自己会写代码学习爬虫可以从下面一些知识点入手学习。1、http相关知识。2、浏览器拦截、抓包。3、python2 中编码知识，python3 中bytes 和str类型转换。4、抓取javascript 动态生成的内容。4、模拟post、get，header等5、cookie处理，登录。6、代理访问。7、多线程访问、python 3 asyncio 异步。8、正则表达式、xpath等等等。。。。还有scrapy requests等第三方库的使用。本回答由提问者推荐