黑马博学谷【年度钻石会员】JavaEE

创建 Scrapy 爬虫框架需要在 Python 的控制台中输入创建命令，也可以通过 UI 图形界面点击创建。例如，创建一个爬取电影数据信息的 Scrapy 爬虫项目的命令如下：scrapy startproject film

数据清理       

数据清洗用于检测和纠正、删除表或数据库中不准确或损坏的记录。数据擦除是指识别不正确、不完整、不相关或其他有问题（“脏”）的数据部分，然后替换、修改或删除脏数据。

(1) 删除不必要的观察。

在数据收集过程中，最常见的是重复观察或冗余观察。当合并来自不同位置的数据集或从客户端接收数据时，由于数据是重复的，这种观察会极大地影响效率，并可能增加正确或不正确的