基于Python爬虫技术的网页解析与数据获取研究

摘要：

网络的发展,大数据、人工智能的崛起使数据变得尤为重要,各行各业的发展都需要数据的支持,任何一种深度学习以及算法中都需要大量的数据作为模型来训练才能得出较为准确的结论.文中讨论了网络爬虫实现过程中的主要问题:了解网页基本结构、使用直观的网页分析工具对网页进行抓包分析、如何使用正则表达式获取准确的字符串信息、利用Python实现简单的页面数据获取.

关键词：网络爬虫、Python、正则表达式、抓包分析

所属期刊栏目：4

分类号：TP391.3(计算技术、计算机技术)

资助基金：地震震害防御专项项目;中央高校基本科研业务费专项项目

在线出版日期：2020-04-09（万方平台首次上网日期，不代表论文的发表时间）

页数：共3页

页码：12-13,16