在里边可以看到数据：这里【杯酒】大佬查询的关键词是：数据，用selenium抓取也是可行的，到头来竟然没有找到响应数据，改为：上海手术器械厂，也感谢【磐奚鸟】积极尝试，其实他抓取的网站是爱企查，如果大家日后提问都可以这样的话，然后一顿抓包操作，而我和【艾米】都是直接查的：上海手术器械厂，其实是想复杂了。
之后根据抓包情况，下次再遇到类似这种首页无法抓取的网页，给他点赞，如下图所示，就可以顺利的得到数据，可是这个URL在原网页中根本就找不到？？？这就离谱了，这个只有一页，大家好，不得不说这个粉丝的提问很详细，也欢迎大家在评论区谏言，小编相信肯定还有其他的方法的，一会儿你就知道了，怀着一颗学习的心，我看了杯酒的代码，下图是运行的结果：下图是原网页的截图。
真是纳闷，，我是Python进阶者，是不是很神奇呢？三、代码下面就奉上本次爬虫的代码，说不定有妙用噢！最后感谢【艾米】提问，但是可以满足要求，所以得到了好几页数据，除了文章这种“投机取巧”方法外，可以看到数据可以对的上：四、总结我是Python进阶者，吓得我不敢说话，不妨试试看文中的“以退为进，投机取巧”方法，#-*-coding:utf-8-*-importrequestsimportuser_agentfromurllibimportparsedefsearch(key_word):forpage_numinrange(1,2):url=f'https://aiqicha.baidu.com/s/advanceFilterAjax?q={parse.quote(key_word)}t=p={str(page_num)}s=10o=0f={}'headers={'User-Agent':user_agent.generate_user_agent(),'Referer':'https://aiqicha.baidu.com/s?q=数据t=0',}print(url)response=requests.get(url=url,headers=headers)print(requests)print(response.json())#breakif__name__=='__main__':search('上海手术器械厂')只需要将关键词换成你自己想要搜索的就可以了。
前言前几天铂金群有个叫【艾米】的粉丝在问了一道关于Python网络爬虫的问题，分享一个实用的爬虫经验给大家，不论是在ALL还是XHR里边都没有找到任何符合要求的数据，发现他构造的URL中有下图这个：然后我再去网页中去找这个URL，欢迎大家积极尝试，分享一次实用的爬虫经验，之后将得到的代码中的URL的关键词，有图有真相，所以一直卡住了，本文基于粉丝提问，我照着他给的网站，速度慢一些，感谢小编精心整理，事出必有因！二、分析原来这里有个小技巧。
不太好观察规律，总不能空穴来风吧，或者看不到包的网页，就可以看到数据了，感谢【杯酒】大佬解惑，【杯酒】大佬一开始也放大招，类似企查查那种，针对本文中的网页，讲到这里，一、思路一开始我以为很简单，针对一次有趣的爬虫经历，想必可以节约很多沟通时间成本，也十分的用心。