使用Mixin模式配置Scrapy日志输出
背景 为什么要重新配置Scrapy日志输出 在使用kafka进行处理爬虫数据后出现了一种现象：日志打印会将整个item数据打印出，由于使用kaf
Redis-incr计数
Incr Incr 命令将 key 中储存的数字值增一 如果 key 不存在，那么 key 的值会先被初始化为 0 ，然后再执行 INCR 操作。 如果值包含错误的类型，或字符串类型的值不能表示为数
Scrapy-Redis初始化数据处理
一、思考 在使用Scrapy-Redis进行数据初始化时，你是如何进行数据写入Redis队列的？ 数据写入的格式如果是JSON，你是如何进行处理
Mixed Content The page at was loaded over HTTPS but requested an insecure resource This request has been blocked the content must be served over HTTPS
描述 在HTML文件中引用js文件<script src="{{ url_for('static', path='/js/app.js') }}"></script> ，在本地调试正常，上线后发现网页打不开，打开控制台看到了如下报错信息： 原因 由于线
Selenium设置无头模式，页面自动切换H5模式问题解决
问题描述 在使用Selenium进行某一网站数据抓取的时候，出现一种现象 在页面中需要定位一个元素信息：pages = driver.find_elements(By.XPATH, "//button[contains(@class,'page-button')]/span") 本地调试的时候，一切正常