爬虫数据分析三个步骤

1、 利用爬虫自动采集互联网中的信息（图片、文字、链接等），采集回来后进行相应的储存与处理。 并按照一定的规则和筛选标准进行数据归类形成数据库文件的一个过程。 但在这个过程中，首先需要明确要采集的信息是什么，当你将采集的条件收集得足够精确时，采集的内容就越接近你想要的。

3、 1.分析目标网站的结构和数据，找到目标数据的XPath路径或CSS选择器。 2.使用Python和BeautifulSoup构建爬虫程序，获取目标数据。 3.将获取到的数据存储到MySQL数据库中。 4.使用Python和Matplotlib进行数据可视化，生成电影评分分布图和电影类型分布图。