需要登录的网站怎么爬取?

我在爬取企查查的时候  爬取一个公司的详情页页面发现   点击html代码中的a标签中的链接的时候  企查查会自动提醒登录   导致我爬不出详情页的信息 怎么解决？求大神指导

相关代码：

import scrapy
import xlrd
from qcc_excel.items import QccExcelItem

class QccExcel1Spider(scrapy.Spider):
    name = 'qcc_excel_1'
    allowed_domains = ['qcc.com']
    # start_urls = ['http://qcc.com/']
    def start_requests(self):
        excel = xlrd.open_workbook('company.xlsx')
        work_book = excel.sheet_by_name('Sheet1')
        for k, v in work_book.get_rows():
            company_list_url = 'https://www.qcc.com/web/search?key={}'.format(k.value)
            yield scrapy.Request(url=company_list_url,callback=self.parse)

    def parse(self, response,*args,**kwargs):
            second_url=response.xpath('//table[@class="ntable ntable-list"]/tr[1]/td[3]/div/div/span/a/@href').extract()
            yield scrapy.Request(url=second_url,callback=self.handle_second_url)


    def handle_second_url(self,response):
        info=QccExcelItem()
        info["location"]=response.xpath('//table[@class="ntable"]/tr[6]/td[4]/text()').extract_first()
        info["trades"] = response.xpath('//table[@class="ntable"]/tr[6]/td[2]/text()').extract_first()
        info["business"] = response.xpath('able[@class="ntable"]/tr[10]/td[2]/text()').extract_first()
        yield info