基于网络爬虫的网贷平台数据采集和分析开题报告
2022-01-11 16:23:56
全文总字数:1416字
1. 研究目的与意义及国内外研究现状
国家“普惠金融”政策的实行、大学生旺盛的消费需求以及监管的空白使得网络贷款在近几年迅速发展起来,但在繁荣的同时也造成了暴力催款、裸条放款等不良现象以及许多人因无力还款而跳楼自杀的社会悲剧。网贷平台行业良莠不齐,鱼龙混杂,如何从多如牛毛的网贷平台发现不法平台,发现那些可能会跑路的平台,避免借贷者陷入网贷诈骗,避免投资人的投资血本无归,需要得到各大网贷平台的基础数据并加以分析处理,从而找出那些发展势头较好的网贷平台,让借贷人能够放心借钱解决一时之需而不被坑,让投资人能够安心投资从中获利而不是赔的血本无归。本文采用python技术通过网络爬虫在网贷之家网站系统上抓取各大网贷平台的基础数据放入数据库中,然后对相关数据进行分析,分析各大网贷平台发展现状。揭示出当前我国p2p平台的发展现状,然后给借贷人和投资人在借贷和投资哪个网贷平台时供以参考。国内外研究现状
网络爬虫是搜索引擎的重要组成部分,它是一个自动提取网页的 程序, 为搜索引擎从网上下载网页 。
传统爬虫从一个或若干初始网页的 url 开始, 获得初始网页上的 url ,在抓取网页的过程中,不断从当前页面上抽取新的 url 放入队 列 , 直到满足系统的一定停止条件 。
剩余内容已隐藏,您需要先支付后才能查看该篇文章全部内容!
2. 研究的基本内容
通过python爬虫爬取网贷之家的各大网贷平台的基础数据并存入提前写好的mysql数据库中,以此分析中国P2P行业发展现状。
3. 实施方案、进度安排及预期效果
1、先看完相关论文;
2、查阅相关资料,了解相关知识;
3、进行初步的系统设计;
剩余内容已隐藏,您需要先支付后才能查看该篇文章全部内容!