从这个网站里爬取了猫猫品种介绍的数据,以及20W+条猫猫交易数据,以此来了解一下可爱的猫咪。
检查网页,可以发现网页结构简单,容易解析和提取数据。爬虫代码如下:
由于数据量较大,可以分开爬取,先获取到每一页中的所有猫猫详情交易链接的url保存到csv,再读取csv中的url来请求,爬取每条交易数据,爬虫思路跟前面类似,为了加快爬取效率,可以使用多线程或者异步爬虫。最终获取了20W+条数据。
售卖的猫咪猫龄主要在1-6个月,都是刚出生还未满半岁的小猫咪呀。这时候的小猫咪应该很可爱吧,等待有缘的主人把它带回家。最后来看一下网站里价格最贵的猫咪和浏览次数最多的猫咪
反观浏览次数排第二、第三的,价格便宜不少,预防都打了3针疫苗,在售只数还比较充裕,还比第一可爱好多(个人感觉)。
THE END