使用scrapy框架爬取简书的用户数据+文章内容等并写入数据库 class JianshuItem(scrapy.Item): #用户名 #主页链接地址 #关注量 #粉丝数 #文章数 #字数 #收获喜欢 #收获喜欢 class JianshuArticleItem(scrapy.Item): #文章标题 #作者 #最后编辑时间 #字数 #阅读数 #评论数 #喜欢数 #赞赏数 #作者签名信息 #正文——文本——信息 #文章页面链接 #微博长图链接
最近更新: 7年多前爬取简书网所有用户公开信息数据写入数据库并同时保存为json文件 #用户名 #主页链接地址 #关注量 #粉丝数 #文章数 #字数 #收获喜欢 #收获喜欢
最近更新: 7年多前使用scrapy爬虫框架爬取www.xuexi111.com8万多条资料的迅雷下载链接 每一份资料的迅雷下载链接都单独分类到文件夹并单独保存为TXT文本文件
最近更新: 7年多前爬取淘宝1688公司企业经营信息 "公司名称":company[0], "主营产品":product, "所在地":address[0], "员工人数":employee_num[0], "经营模式":business_model[0], "工艺类型":Process_types[0], "加工方式":processing_method[0], "厂房面积":factory_area[0],
最近更新: 7年多前使用scrapy爬取挂号网中长沙地区医院信息 #医院名称 hospital = scrapy.Field() #医院等级 grade = scrapy.Field() #医院地址 address = scrapy.Field() #医院电话 tel_num = scrapy.Field() #官方网站 website = scrapy.Field() #简介 about = scrapy.Field() #预约量 yu_yue_liang = scrapy.Field() #导医服务 dao_yi_fu_wu = scrapy.Field() #患者评价 huan_zhe_ping_jia = scrapy.Field() #候诊时间 hou_zhen_shi_jian = scrapy.Field()
最近更新: 7年多前链家网长沙地区二手房数据 "标题":title[0], "楼盘名称":loupan[0], "房间信息":house_info[0], "地理位置":position[0], "所在街道":place[0], "关注人数、看房人数、发布日期":follow_info[0], "特殊介绍":s, "价格":price[0], "约合单价/平方米":unit_price[0],
最近更新: 7年多前使用scrapy爬取上海地区二手房信息 包括数据: #名称 #所在区域 #楼栋总数 #建筑年代 #总户数 #物业类型 #容积率 #绿化率 #物业费 #开发商 #物业公司 #小区地址 #周边学校 #小区均价 #环比上月(上涨or下跌) #小区成交
最近更新: 7年多前使用scrapy框架爬取大众点评网站店铺信息 包括: 店铺名称 所在城市 地址 评论数 评价消费 标签 口味评分 环境评分 服务评分
最近更新: 7年多前