文章导航PC6首页软件下载单机游戏安卓资源苹果资源

pc软件新闻网络操作系统办公工具编程服务器软件评测

安卓新闻资讯应用教程刷机教程安卓游戏攻略tv资讯深度阅读综合安卓评测

苹果ios资讯苹果手机越狱备份教程美化教程ios软件教程mac教程

单机游戏角色扮演即时战略动作射击棋牌游戏体育竞技模拟经营其它游戏游戏工具

网游cf活动dnf活动lol周免英雄lol礼包

手游最新动态手游评测手游活动新游预告手游问答

您的位置:首页单机游戏角色扮演 → 怪物猎人世界新装备介绍 怪物猎人世界新装备新系统一览

腾讯视频

火车头使用Post方法采集Ajax页面教程_我的网站

我是谁

一 |     

     阿里云优惠券 先领券再下单        前面有写过一篇瀑布流的采集方法,今天在添加一个POST方法来采集Ajax刷新页面的教程。    Kenny 编译 一位加油站运营商表示,他对发生在光天化日下的抢劫感到焦虑,他说新西兰的犯罪趋势有恶化迹象。         据Newshub报道,3月3日上午,9名年轻人打劫了奥克兰Western Springs火车站附近的Caltex加油站,把工作人员吓到惊慌失措。    之前的文章请看:火车头采集动态加载Ajax数据(无分页瀑布流网站)    如果遇到POST方法来架子Ajax数据,这和我之前写的是两个类型,瀑布流是直接刷新出数据的页面。         Advertise with us          运营11个Caltex加油站的Sanjai Bagia说他很担心零售企业的运营安全。         警方发言人表示:“早上7:18位于Great North Road的一处商业场所发生抢劫事件,警方正在展开调查。”          “几名犯罪分子进入该场所并威胁一名员工,员工启动了雾炮,然后跑到了安全的地方。”          警方称该团伙盗窃了一些财物,然后乘坐汽车逃跑了。    采集网站分析    采集任何一个新站前我们都要对他进行一番分析才好下手。该肇事汽车不久后被发现。         Bagia说劫案的犯罪者“看起来大多是青少年”。    列表页分析    这个网站的列表页,前面并不是通过Ajax加载的。         “我们很惊讶,因为这类打劫通常发生在晚上,但显然有新鲜事发生了。CTRL+U可以直接看到列表内容,通过浏览器也看不到相关请求地址。    

    因为习惯原因,我直接看了下尾页列表页。然后顺手CTRL+U看看网站代码结构有没有大的变化。防止后期采集出错。九名罪犯也刷新了作案的人数,”他说。         “工作人员按照规章启动了雾炮,分散劫匪的注意力,最终劫匪只从收银机里抢走200纽币。结果就发现无法看到列表内容。”          (监控截图)          Bagia说这是今年以来他的加油站第八次成为打劫目标。         “这非常令人担忧,我们大多是家族经营企业,无法承受这种打击。”          “这不仅给我们业主带来了痛苦和压力,对我们的员工和顾客也同样如此。

二 | ”          他说新政府需要制止犯罪:“新政府正在讨论解决犯罪问题,但目前还没有看到行动。

三 | 浏览器可以看到一个通过post请求的地址。

四 | 我们看到犯罪趋势依然令人担忧,而且正在恶化中。    

    这时候就意识到这网站列表页可能后面的应该全是通过Ajax加载的。”          “无论政府怎么说,犯罪活动都没有减少。”          Bagia说他为新西兰各地的年轻罪犯感到担忧:“这些孩子为什么要这样做?他们这样做的原因是什么?” 作为四个孩子的父亲,他说他担心犯罪者的父母们并不知道孩子的近况。

五 |          “我总能知道我的孩子们在哪儿,他们在做什么,他们的朋友是谁——我总知道。    通过笨方法,手动访问页面看看Ajax加载大概是哪些。甚至我的朋友和社区也知道我的孩子们发生了什么,”他想知道这些青少年罪犯们的父母为什么不知情,他们又为什么会变成这样。最后找到大概从2200页左右开始Ajax加载。

六 |     那我们采集的时候,前面的列表页就可以使用普通方式去采集(速度更快)。         Bagia说他在Napier的加油站也发生了抢劫。    2200页开始到尾页就通过post请求Ajax页面数据。罪犯被抓捕后其中一人13岁,另一人16岁。    抓包获取Post数据    这个Ajax地址我在浏览器看不到任何跟页码有关的数据。         “那个13岁的孩子在做什么?他的父母在哪儿?”          “看在上帝份上,这些孩子应该在上学啊!”他说。         (监控截图)          相关阅读:          奥克兰一家餐厅被盗,损失达数万纽币,老板深受打击          两名男子大白天持械抢劫奥克兰酒铺,抡起斧头砍店员          深夜开着偷来的汽车高速逃逸,五名奥克兰青少年被拘留          奥克兰昂贵自行车被盗,提供监控照片及GPS数据后警方拒绝调查          奥克兰一购物中心内珠宝店被暴力打劫,一名20岁男子逃离现场后被逮捕          奥克兰夜间发生暴力入室抢劫案,4名持枪罪犯逃窜100公里后在北地被捕          太猖獗!四名劫匪持斧头抢劫奥克兰加油站,员工差点爆头而亡          四名蒙面罪犯手持锤子袭击奥克兰加油站店员,行业组织恳求政府紧急行动          奥克兰高峰时段发生激烈追逐:逃逸车辆逆行险象环生,两人被捕          奥克兰北岸大超市清晨被抢:警方出动直升机和警犬队追捕,4人被拘          700棵蓝莓树被偷摘,价值5万纽币的青铜雕塑被破坏          奥克兰发生激烈群殴事件,武装警察包围了一栋房屋,一男子被捕          一名男子遭恶性袭击,被抛下码头并按在水下,警方急寻目击者          奥克兰新年夜枪杀案:两人中枪一人身亡,凶杀案调查已展开          注:本文为编译/原创,欢迎转发分享;但严禁复制等未经授权的非法使用。最后只能使用抓包工具看一下详细的请求内容了。违反上述声明者,本网将追究其相关法律责任。

七 | 使用授权请联系[email protected]。         chineseherald.co.nz All Rights Reserved 版权所有          (责编:鸮鹦鹉)          相关内容                怀特岛火山喷发22人遇难!这些公司判赔上千万!但尴尬的是…           一波三折!总理表态:退钱!不再申领住宿津贴           新中两国科学家合作研究获得突破:可用二氧化碳生产燃料           气候预警:本周末全国大范围将迎狂风和暴雨,奥克兰也在内!           500多名僧侣齐聚奥克兰参加全球佛教峰会,议题之一是“放生”           总理坚称“有权”领5.2万纽币住宿津贴,工党党魁抨击他“极其虚伪”           新西兰正式宣布“禁枪令修正法案”:全面打击黑帮犯罪           工党攻击警察部长是“雇佣兵”杀过人,部长回应。    

    使用抓包工具Fiddler    Fiddler下载地址:OneDrive-Fiddler-Setup_v5.0.20204.45441.zip    安装设置完成后我们打开浏览器。重新访问一下采集页面,Fiddler会抓到很多请求地址。    查看分析Post数据    Ctrl+F 我们搜索那个Ajax地址    
火车头使用Post方法采集Ajax页面教程
    Fiddler会以黄色将搜索到的结果显示出来,我们点击一下他。    
火车头使用Post方法采集Ajax页面教程
    在Fiddler右侧会显示这个请求地址的相关详细信息。    
    信息顶部可以看到是post请求方法。

八 |     可以看到有我们请求的页码相关内容。    

    访问不同页码的页面,经过研究发现规律。    
    currentPageIndex的值和页码相关,值等于页码减一。我们访问6139页时,currentPageIndex值是6138。    这就找到了规律,我们打开火车头采集器。    火车头采集器配置分页设置    起始网址填入Ajax请求地址    
    点“高级模式”。    
    点“分页设置”,http请求方式“post”。

九 |     

    把我们Fiddler抓包获取的内容填进去。    
    将currentPageIndex值的内容替换成火车头采集器的“分页”标签。

十 |     

    下面填入页码。

十一 |     页面地址是从2200到6140,上面我们分析得出post请求内容的currentPageIndex值是实际页码减一。所以这里面我们填2199到6139.    

    网址获取选项设置    为了筛选出我们需要的内容,我们设置一下网址获取选项。    打开浏览器F12开发工具,预览一下Ajax获取的内容。    
    可以看到链接的形式是    自考成考报名条件有哪些?    完整的链接地址是    https://域名/chengrenzikao/20200611152022.html    那我们就可以使用下面的规则提取地址。    
    我们测试一下网址采集。    测试网址采集    点击测试可能提示“post请求必须选择网页编码”我们在火车头其他设置中将编码选为“UTF8”即可。    
    可以看到已经正确获取到了链接。不放心可以复制链接实际访问一下看看是否正确。    
    注意事项    采集过程注意运行线程和请求间隔时间。教程在测试时因为开的线程较多,频率过高导致对方网站开启了防CC设置。拉黑了我一个服务器IP,此教程写完用了两台服务器。    我们实际采集可以只开1个线程,并设置合适的间隔时间,比如1000ms到1500ms左右。    本文来自2号站长网,转载请注明出处:https://www.zz2zz.com/331414.html
        
    

申请创业报道,分享创业好点子。点击此处,共同探讨创业新机遇!。

十二 |

Current article:http://432yv.cuntoujuefourantapai.cfd/bgn7/1q28.html

Published on:04:10:52


相关阅读 NASA NEOWISE太空望远镜拍摄了长达12年的天空延时电影国家海洋局北海预报中心发布海浪Ⅳ级警报、风暴潮Ⅳ级警报名记:湖人迎全新管理层布局 保罗有望身居要职iPhone 14 Pro Max与 iPhone14 Pro哪款更适合入手?押呗对于14典当回收价行情_支持_一代正在直播!国足对阵库拉索,冲击胜利,邵佳一首秀,CCTV5助力省科技厅领导到东戴河新区调研育碧《魔法门之英雄无敌 3 重制版》游戏《上古起源》官宣,已上架 Steam记者:桑乔2500万镑买断条款已激活 切尔西不买断需付500万违约金

文章评论
发表评论

热门文章 WNBA常规赛:洛杉矶火花VS亚特兰大梦想中国期货市场监控中心:截至2026年7月底 期货市场资金总量2.64万亿元账号问题踢里昂本要登场!林德洛夫妻子:儿子头部严重受伤,他不得不离场

最新文章 吃中国饭砸中国锅?柬埔寨局势突变,泰总理宣布重启与美军事合作,锐闻,原创 吃中国饭砸中国锅?柬埔寨局势突变,泰总理宣布重启与美军事合作网站数据库优化:MySQL调优和缓存策略 邂逅夏日好彩运|上海福彩“彩运亨通”赠票活动上线India logs 2,424 new Covid cases1.5T和2.0T发动机供选择/全新开发车型 全新一代长安UNI-V官图美国众议院硬闯关:强行推动对以色列武器输送,拜登警告无效!

人气排行 微软Surface Andromeda设备概念视频:可折叠大屏幕子屏幕雨果&孙颖莎分获世界杯男女单打冠军,收获奖金65万元人民币Seven Tonnes of Radioactive Water Reportedly Leaked at 3rd Reactor of Japan's Mihama NPP受大规模太阳风暴影响,新西兰这些地方的供电受到了影响!土司工坊价格调整引发热议,企业承诺持续提供优质服务“浩浩妈”王星辰全新美照滚装码头建设忙敢打敢拼!申京季后赛首秀砍下26分 21世纪中锋球员最高