发表于 2024年8月25日1年前 我是做 java 的，好多年前用 java 做过爬虫。最近朋友让帮忙面试几个高级 Python 爬虫工程师，主要是从 0 搭建数据采集系统，主要是抓取一些新闻时事、自媒体网站的数据。关于 Python ，我的水平仅限于能写一些简单的脚本和 flask 服务。了解了下现在 Python 爬虫这块儿主要是 scrapy ，打算趁着周末写几个小 demo 熟悉一下。针对面试点，我自己结合自己的经验，打算围绕分布式爬虫系统的搭建、核心模块、反爬机制的策略、监控和预警这些。Python 这块儿朋友这边负责面试。请教一下大家，除了我准备的这些点，还有哪些地方需要问一下的。或者说我准备的内容有不合适的地方也请大家指正一下。
关于 Python ，我的水平仅限于能写一些简单的脚本和 flask 服务。了解了下现在 Python 爬虫这块儿主要是 scrapy ，打算趁着周末写几个小 demo 熟悉一下。
针对面试点，我自己结合自己的经验，打算围绕分布式爬虫系统的搭建、核心模块、反爬机制的策略、监控和预警这些。Python 这块儿朋友这边负责面试。
请教一下大家，除了我准备的这些点，还有哪些地方需要问一下的。或者说我准备的内容有不合适的地方也请大家指正一下。