• php配合fiddler批量下载淘宝天猫商品数据分享


    有个做电商的朋友问我,每次上款,需要手动去某宝去搬运商品图片视频,问我能不能帮忙写个脚本,朋友开口了,那就尝试一下
    首先打开某宝,访问一款商品,找出他的数据来源
    通过观察我们发现主图数据来这个接口输出
    h5api.m.taobao.com/h5/mtop.taobao.pcdetail.data.get/1.0
    在这里插入图片描述
    同理,我们在去找到详情图的输出接口地址是
    h5api.m.taobao.com/h5/mtop.taobao.detail.getdesc/7.0
    在这里插入图片描述
    既然数据找到了,那我们怎么将这些数据存储下来呢,这里就用到了我们的另一个工具fiddler,这款工具是一个抓包神器,我们还可以通过它将我们访问到的数据进行一个存储到本地的txt文件里面来,流程就是
    打开软件之后,点击上方的菜单栏Rules->Customize Rules,然后会打开一个编辑器,这个时候我们找到OnBeforeResponse方法,在这里添加两段代码
    在这里插入图片描述

    if (oSession.fullUrl.Contains("h5api.m.taobao.com/h5/mtop.taobao.pcdetail.data.get/1.0")) { 
                try{  
    				var responseBytes = oSession.responseBodyBytes;
    				var responseString = System.Text.Encoding.UTF8.GetString(responseBytes);
    				var filePath = "G:/test/head.txt";
    				System.IO.File.WriteAllText(filePath, responseString, System.Text.Encoding.UTF8); 
                }catch(err){
                    var err;
                }
            }
    		if (oSession.fullUrl.Contains("h5api.m.taobao.com/h5/mtop.taobao.detail.getdesc/7.0")) { 
    			try{
    				var responseBytes = oSession.responseBodyBytes;
    				var responseString = System.Text.Encoding.UTF8.GetString(responseBytes);
    				var filePath = "G:/test/desc.txt";
    				System.IO.File.WriteAllText(filePath, responseString); 
    			}catch(err){
    				var err;
    			}
    		}
    

    这样我们将抓包到的数据,写到了指定txt文件里面
    在这里插入图片描述
    数据都拿到了,将图片下载下来还不简单吗,这里我通过php,写个脚本,然后将数据解析出来,然后对需要的数据进行下载,这样所有功能就完成啦
    PHP 脚本我放到资源下载里面感兴趣的去下载
    地址:https://download.csdn.net/download/zhanglili1993/89447042
    在这里插入图片描述
    大致流程就是这样,先通过抓包,抓到数据,然后写到本地,最后在通过脚本批量下载,虽然不是很智能化,但是朋友对此效果满足了,同样的方法,某猫的数据也是这样操作,希望能对你有所帮助

  • 相关阅读:
    Palo Alto PAN-OS 10.1 for vSphere & KVM -- 基于机器学习的新一代防火墙
    怎样判断气门油封有问题?
    前端学习<三>CSS进阶——04-如何让一个元素水平垂直居中?
    14:00面试,14:08就出来了 ,问的实在是太...
    Python语言例题集(006)
    微信小程序 --- 自定义组件
    ​力扣解法汇总1417-重新格式化字符串
    SQL优化 第一章
    C# 9.0语法标准 “函数指针” 深度解读!
    使用vue-cli搭建spa项目
  • 原文地址:https://blog.csdn.net/zhanglili1993/article/details/139747765