北京海淀网站建设公司_佛山网站设计_wangzhan_网站设计培训班

import reclass BilianSpider(scrapy.Spider):name = 'bilian'allowed_domains = ['ebnew.com']# start_urls = ['http://ebnew.com/']# 存储的数据格式sql_data = dict(projectcode='', # 项目编码web='', # 信息来源网站keyword='', # 关键字detail_url='', # 招标详细页网址title='', # 第三方网站发布标题toptype='', # 信息类型province='', # 归属省份Product='', # 产品范畴industry='', # 归属行业tendering_manner='', # 招标方式publicity_date='', # 招标公示日期expiry_date='', # 招标截止日期)# form表单提交的数据格式form_data = dict(infoClassCodes='',rangeType='',projectType='bid',fundSourceCodes='',dateType='',startDateCode='',endDateCode='',normIndustry='',normIndustryName='',zone='',zoneName='',zoneText='',key='', # 搜索的关键字pubDateType='',pubDateBegin='',pubDateEnd='',sortMethod='timeDesc',orgName='',currentPage='' # 当前的页码)def start_requests(self):from_data = self.form_datafrom_data['key'] = '路由器'from_data['currentPage'] = '2'yield scrapy.FormRequest(url='https://ss.ebnew.com/tradingSearch/index.htm',formdata=from_data,callback=self.parse_page1,)# def parse_page1(self, response):# with open('2.html','wb')as f:# f.write(response.body)# //div[@class="abstract-box mg-t25 ebnew-border-bottom mg-r15"]/div/i[1]/text()def parse_page1(self, response):content_list_x_s = response.xpath('//div[@class="ebnew-content-list"]/div')for content_list_x in content_list_x_s:toptype = content_list_x.xpath('./div/i[1]/text()').extract_first()publicity_date= content_list_x.xpath('./div/i[2]/text()').extract_first()title = content_list_x.xpath('./div/a/text()').extract_first()tendering_manner = content_list_x.xpath('.//div[2]/div[1]/p[1]/span[2]/text()').extract_first()Product = content_list_x.xpath('.//div[2]/div[1]/p[2]/span[2]/text()').extract_first()expiry_date = content_list_x.xpath('.//div[2]/div[2]/p[1]/span[2]/text()').extract_first()province = content_list_x.xpath('.//div[2]/div[2]/p[2]/spanp[2]/text()').extract_first()print(toptype, publicity_date, title,tendering_manner,Product, expiry_date, province) 南昌建站徐家汇网站建设免费建站的网站关键词武汉网站开发西安做网站的公司常州seo天河区网站制作甘肃做网站沈阳做网站株洲网站排名优化秦皇岛网站优化成都小程序开发价格阿里巴巴java开发手册厦门app开发网站建设教程视频3g网站制作做网站的流程晋中seo制作企业网站的宝安网页设计江苏建站北京企业网站设计公司系统开发平台哈尔滨做网站乐陵seo衡水seo罗湖网站建设公司滁州seo建站泰州网站建设