jsp1102 基于网络爬虫的电子商城（ssm）

1．毕业设计的背景：

淘宝、苏宁、京东，是当下国内领先的综合性的网购平台，这些综合的大型的网购商城，很好地体现了人们购物的爱好之处，商品热销的品牌，通过对三大电子商场的具体研究分析,理清电子商务企业收集、整理、存储和分析大数据的流程;分析用户多次的购物记录形成关系网,知悉更多用户的购买习惯和喜好;将客户分为不同的类型,将个性化的信息推荐给客户,以客户为中心,进行实时营销和精准营销。

网购平台的使命是让人们足不出户就能够选购自己心爱的商品。电商平台的搭建依靠搜索引擎关键词，不论是生活用品还是电子产品，都能让网购者选到自己心仪的物品，展示自己的兴趣喜好，结交一大批网购好友，搭建别具特色的“问大家“互动平台。电商销售涵盖生鲜水果、休闲零食、奶品水饮粮油厨房、家用电器、洗护美妆等方方面面，是全球最大的购物平台，它为人们提供一个方便购物和物种齐全的购物虚拟场所，并以此成为大数据爱好者研究人们的生活习性、兴趣喜欢、热销产品的数据集中地。

这么庞大的用户群体所造就的大型电商平台，每秒钟能产生的数据量，是我们无法想象的大数据。借由网络爬虫技术获得电商中的各类数据，再运用技术手段加以筛选清理，从而有目的提取出自己想知道的相关信息。

针对网络购物的人们，网易购云商城对其行为兴趣喜好进行研究，将更加有利于网易购云商城的销售，有利于提高销售水平，有利于提升客户对网易购云商城的满意度和向心力。将网易购云商城打造的更加完美。

从商业的角度来研究这类网购群体的行为兴趣喜好。这样有利于商家了解当下客户最喜欢的，最受欢迎的商品和服务，从而有针对性的提供所需要的东西。通过分析其中的特征关系对客户进行精准营销，客户推荐还存在着巨大的潜力。

2．毕业设计(论文)的内容和要求：

本系统主要是为用户提供当下热销的电脑、平板、watch手环、手机的品牌的价格比较，系统主要包括：登录模块、价格比价模块、优惠推荐模块、销售统计模块。价格比价模块是显示京东上该商品近一段时间的价格波动曲线。优惠推荐模块主要显示一些优惠促销产品。销售统计是统计各商品在京东上的销售量占比，用饼图显示。

使用Python web抓取框架Scrapy开发一个快速,高层次的页面抓取分析程序，用于抓取京东页面并从页面中提取结构化的数据，

系统结合基于 Lucene的全文搜索服务器Solr，提取相关电子产品销售的数据并使用Solr等进行分词处理。

使用数据挖掘算法对数据进行处理，并使用Echarts等图表组件进行图形化显示在网易购云商城里面，引导顾客购物，形成云商城里面的购物指向指标。

设计并开发一个系统用于数据的处理和展示，并将结果展示在网易购电子云商城，形成一个购物指向地表，引导顾客们进行电子产品的购买