网页资讯视频图片知道文库贴吧地图采购
进入贴吧全吧搜索

 
 
 
日一二三四五六
       
       
       
       
       
       

签到排名:今日本吧第个签到,

本吧因你更精彩,明天继续来努力!

本吧签到人数:0

一键签到
成为超级会员,使用一键签到
一键签到
本月漏签0次!
0
成为超级会员,赠送8张补签卡
如何使用?
点击日历上漏签日期,即可进行补签。
连续签到:天  累计签到:天
0
超级会员单次开通12个月以上,赠送连续签到卡3张
使用连续签到卡
03月06日漏签0天
mathematica吧 关注:19,939贴子:74,242
  • 看贴

  • 图片

  • 吧主推荐

  • 游戏

  • 8回复贴,共1页
<<返回mathematica吧
>0< 加载中...

使用MMA进行爬虫以及api调用的问题

  • 只看楼主
  • 收藏

  • 回复
  • JarvisIven
  • ()[]区别
    5
该楼层疑似违规已被系统折叠 隐藏此楼查看此楼
在使用MMA进行信息爬取时遇到了一些问题,使用MMA13.0,win10环境,需要使用MMA来爬取vikacg中连续签到用户的数据
尝试使用f12进行抓包并且获取到了可能的api接口,参见代码中的网址。
代码如下:
req = HTTPRequest[
FromCharacterCode[{104, 116, 116, 112, 115, 58, 47, 47, 119, 119,
119, 46, 118, 105, 107, 97, 99, 103, 46, 99, 111, 109, 47, 119,
112, 45, 106, 115, 111, 110, 47, 98, 50, 47, 118, 49, 47, 103,
101, 116, 77, 105, 115, 115, 105, 111, 110, 76, 105, 115, 116}], <|
"Method" -> "POST"|>]
执行后仅返回了第一条数据,也就是仅返回在签到板上排名第一的用户数据
问题就出在仅返回部分数据,在网页上通过f12可以看出调用的该api返回payload有20组用户的数据,之后尝试通过增加headers中的数据来尝试获取更多数据,还是失败。最后无奈只能通过模拟浏览器才解决,但是还是想使用api来获取完整的数据,请问我在调用api的时候参数是否遗漏了什么?或者是api本身调用的问题?


  • JarvisIven
  • ()[]区别
    5
该楼层疑似违规已被系统折叠 隐藏此楼查看此楼
由于不能带外链,所以使用了ToCharacterCode将链接转为字符代码,直接复制黏贴后即可执行


2026-03-06 03:41:37
广告
不感兴趣
开通SVIP免广告
  • JarvisIven
  • ()[]区别
    5
该楼层疑似违规已被系统折叠 隐藏此楼查看此楼
全部的代码为
req = HTTPRequest[
FromCharacterCode[{104, 116, 116, 112, 115, 58, 47, 47, 119, 119,
119, 46, 118, 105, 107, 97, 99, 103, 46, 99, 111, 109, 47, 119,
112, 45, 106, 115, 111, 110, 47, 98, 50, 47, 118, 49, 47, 103,
101, 116, 77, 105, 115, 115, 105, 111, 110, 76, 105, 115, 116}], <|
"Method" -> "POST"|>]
URLExecute[req]
前面的误删了后面的URLExecute


  • asdasd1dsadsa
  • 小吧主
    10
该楼层疑似违规已被系统折叠 隐藏此楼查看此楼
。。你起码得提供一个「正常工作情况」的信息吧,哪怕是F12请求界面的截图


  • JarvisIven
  • ()[]区别
    5
该楼层疑似违规已被系统折叠 隐藏此楼查看此楼


  • JarvisIven
  • ()[]区别
    5
该楼层疑似违规已被系统折叠 隐藏此楼查看此楼
{pages->71280,data->{{user->{id->129431,sex->0,name->ikali,link->,avatar_webp->,desc->,user_title->,verify->,verify_icon-><i class="b2-vrenzhengguanli b2font b2-color"></i>,cover->,lv->{vip->{name->,lv->,icon->,color->,time->0},lv->{name->LV5,credit->0,lv->lv5,icon-><span class="lv-icon user-lv b2-lv5"><b>LV5</b><i>lv5</i></span>,lv_next->lv6,lv_next_name->LV6,lv_next_credit->0,lv_ratio->58}},cover_webp->},credit->629,date-><time class="b2timeago" datetime="2023-02-06 00:13:20" itemprop="datePublished">2小时前</time>,count->585,_date->2023-02-06 00:13:20}}}


  • 隨意超
  • 小吧主
    13
该楼层疑似违规已被系统折叠 隐藏此楼查看此楼
漏了POST参数
count=20&paged=1&type=always


登录百度账号

扫二维码下载贴吧客户端

下载贴吧APP
看高清直播、视频!
  • 贴吧页面意见反馈
  • 违规贴吧举报反馈通道
  • 贴吧违规信息处理公示
  • 8回复贴,共1页
<<返回mathematica吧
分享到:
©2026 Baidu贴吧协议|隐私政策|吧主制度|意见反馈|网络谣言警示