网站查询时不返回表

Question

我试图查询https://www.bankofindia.co.in/Home/BranchLocator?page=1，当我打开网站时，它显示了数据表。在页面中向前和向后移动也显示和更新表格。但是当通过scrapy查询时，不返回表。

start_urls = [
"https://www.bankofindia.co.in/Home/BranchLocator?page={}".format(i)
for i in range(1, 10)
]
def parse(self, response, **kwargs):
"""Parse response."""
all_names = response.xpath(
"//span[@id='BranchName']/text()",
).extract()
for name in all_names:
print(name)
all_addresses = response.xpath(
"//span[@id='Address']/text()",
).extract()

是我做错了什么还是网站没有正常运行?

Answer 1

这里没有问题。实际上，要获得表格数据，你必须填写表格，填写的表格将生成表格，而表格数据你必须删除，否则是不可能的。您看到的带有页码的表数据是动态的，即使不是从xhr api请求生成的。

PS:您需要填写以下内容:早午餐名称，IFSC代码，州，城市