爬虫技术和数据挖掘在网页信息中的应用

摘要：

随着网购用户规模的不断扩大,如何挖掘并利用商品的网页信息是当前重要的研究课题.为了充分利用网页信息为购买者提供更加优质的服务,要合理引入爬虫技术和数据挖掘方法,利用Python构建一个基于Scrapy框架的爬虫,将其存储于MySQL数据库,获取电商网页的数据信息,并对爬取的数据进行数据挖掘和提取分析,包括描述性分析和聚类分析等,深入全面地挖掘网页信息潜在的价值.

关键词：爬虫技术、数据挖掘、网页信息

所属期刊栏目：34

分类号：TP391(计算技术、计算机技术)

在线出版日期：2023-01-16（万方平台首次上网日期，不代表论文的发表时间）

页数：共3页

页码：60-62