我是靠谱客的博主 沉静大侠,最近开发中收集的这篇文章主要介绍阿里巴巴逆向js,request模块获取数据前言一、逆向解析阿里巴巴平台详情页面的sign值二、在请求头中加入sign值获取数据三、总结,觉得挺不错的,现在分享给大家,希望可以做个参考。
概述
python爬虫案例(电商平台)
阿里巴巴平台request模块获取数据
- 前言
- 一、逆向解析阿里巴巴平台详情页面的sign值
- 二、在请求头中加入sign值获取数据
- 1>获取评论成交数数据
- 2>效果展示
- 三、总结
前言
本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理
一、逆向解析阿里巴巴平台详情页面的sign值
先找一个商品详情页面,根据页面上显示得数据去寻找该路由,然后利用谷歌自带得debug模式一步步去分析js加载情况…
获取到阿里巴巴生成的sign值地js函数,输入值加入商品得id就可以计算得到阿里巴巴得sign值
python代码如下:
import js2py
def get_des_psswd(data):
jsstr = get_js()
# 使用获取上下js2py生成一个上下文环境
context = js2py.EvalJs()
context.execute(jsstr)
# ctx = execjs.compile(jsstr) # 加载JS文件
return (context.h(data))
# return (ctx.call('h', data)) # 调用js方法 第一个参数是JS的方法名,后面的data和key是js方法的参数
def get_js():
f = open("./des.js", 'r', encoding='utf-8') # 打开JS文件
line = f.readline()
htmlstr = ''
while line:
htmlstr = htmlstr + line
line = f.readline()
return htmlstr
if __name__ == '__main__': # 66f15958d3db6ded2e31b63c6dff914e_1637574478506
print(get_des_psswd(
'f3e524beffeb74de6684f41df6206d83&1638771084690&12474478&{"fcGroup":"offer-cbu","fcName":"offerdetail-service","fcArgs":"{\"serviceName\":\"offerFavoriteService\",\"params\":{\"offerId\":598029856572}}"}'))
二、在请求头中加入sign值获取数据
1>获取评论成交数数据
代码如下(通过在请求头中加入sign数据,可以有效访问到接口里面得数据,切换IP可以重新获取):
# 评论获取
def comments(b, seller_id, seller_member_id):
global g
# 获取时间戳
t = time.time()
good_collection_time = int(round(t * 1000)) # 毫秒级时间戳
good_collection_token = unqueue_cookies()
# 分割获取token值
good_collection_token = good_collection_token['_m_h5_tk'].split('_')[0]
# 拼接sign值进行js加密
sign = good_collection_token + '&' + str(
good_collection_time) + '&12574478&' + '{"fcGroup":"offer-cbu","fcName":"offerdetail-service","fcArgs":"{\"serviceName\":\"offerSatisfactionService\",\"params\":{\"memberId\":\"%s\",\"sellerId\":%s,\"offerId\":%s,\"isSignedForTm\":false}}"}' % (
seller_member_id, seller_id, str(b['Z']))
# 将sign值加密
sign = get_des_psswd(sign)
# 发送请求
try:
data = {"sellerId\":str(b['Z'])} # 拼接商品id数据
data = quote(data, 'utf-8')
good_comments_url = 'https://h5api.m.1688.com/h5/mtop.mbox.fc.common.gateway/1.0/?jsv=2.4.11&appKey=12574478&t=' + str(good_collection_time) + '&sign=' + sign + '&api=mtop.mbox.fc.common.gateway&v=1.0&type=jsonp&isSec=0&timeout=20000&dataType=jsonp&callback=mtopjsonp4&data=' + data
comments_count = 0
while True:
try:
# 获取接口数据
headers = {
"user-agent": "Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/92.0.4515.131 Safari/537.36",
"referer": 'https://detail.1688.com/',
'cookie': cookies()
}
SESSION.keep_alive = False # 关闭多余连接
comments_response_html = SESSION.get(good_comments_url,
headers=headers, timeout=5, verify=False, proxies=g[0])
good_comments = comments_response_html.text.split('(')
good_comments = good_comments[1].split(')')[0]
good_comments = json.loads(good_comments)
good_comment = good_comments['data']['result']['totalsStr']
break
except Exception as e:
print(e)
if comments_count < 2:
g = proxy_ip()
comments_count += 1
continue
else:
comments_count += 1
continue
except Exception as g:
print(g)
good_comments = ''
return good_comment
2>效果展示
三、总结
在这小编分享一波2022最新的Python教程。获取方式,私信小编.。。。
最后
以上就是沉静大侠为你收集整理的阿里巴巴逆向js,request模块获取数据前言一、逆向解析阿里巴巴平台详情页面的sign值二、在请求头中加入sign值获取数据三、总结的全部内容,希望文章能够帮你解决阿里巴巴逆向js,request模块获取数据前言一、逆向解析阿里巴巴平台详情页面的sign值二、在请求头中加入sign值获取数据三、总结所遇到的程序开发问题。
如果觉得靠谱客网站的内容还不错,欢迎将靠谱客网站推荐给程序员好友。
本图文内容来源于网友提供,作为学习参考使用,或来自网络收集整理,版权属于原作者所有。
发表评论 取消回复