许多自学爬虫(python)的小伙伴因为没有经历过面试所以在找工作之前难免有些抓不住重点,虽然自己有些技术但是因为发挥不好而错失工作机会,小编经过n次面试以后特总结以下面试常见问题,为想要转爬虫的小伙伴提供一些参考。关注小编,可以查看更多Python面试题哦。
你写爬虫的时候都遇到过什么?反爬虫措施,你是怎么解决的?
用的什么框架,为什么选择这个框架?
scrapy的基本结构(五个部分)都是什么?,请求发出去的整个流程?
scrapy的去重原理 (指纹去重到底是什么原理)
scrapy中间件有几种类,你用过那些中间件?
scrapy中间件在哪里起的作用(面向切面编程)
为什么会用到代理?
代理怎么使用(具体代码,请求在什么时候添加的代理)
代理失效了怎么处理?
爬取速度过快出现的验证码处理
相关推荐: