求助一个PHP Curl网页源码动态的问题

唐王李世民

kpxyyyy 发表于 2024-11-11 14:43
做爬虫要先分析网页的结构，而不是直接就写请求，现在的网站很多都是前后端分离动态加载。 ...

谢谢您的回复，技术菜，所以很多不懂

唐王李世民

kof21411 发表于 2024-11-11 14:50
你可以直接curl他的接口api拿内容

它的接口现在改了好像，找不到vid了

kpxyyyy

imdong 发表于 2024-11-11 15:06
你要获取页面内容不需要输出响应头信息
把这段curl_setopt($ch, CURLOPT_HEADER, $header); 改成curl_setop ...

好的，谢谢您的回复

唐王李世民

zhughe 发表于 2024-11-11 15:16
python + playwright 轻松搞定，php只能通过浏览器分析接口，直接抓接口

其实php也有querylist

唐王李世民

imdong 发表于 2024-11-11 15:06
你要获取页面内容不需要输出响应头信息
把这段curl_setopt($ch, CURLOPT_HEADER, $header); 改成curl_setop ...

  看不到内容跳转了，但是一直在转圈圈了，代码没办法进入下一步

imdong

kpxyyyy 发表于 2024-11-11 16:36
其实php也有querylist

需要额外安装模块吗？谢谢您了

唐王李世民

唐王李世民 发表于 2024-11-11 16:43
看不到内容跳转了，但是一直在转圈圈了，代码没办法进入下一步

设置cookie
头信息下只需要设置UA，cookie 设置一个ttwid参数值随机数

https:   //  i.ibb  .co/1stn4fW/20241111211814.jpg （去掉空格）

kpxyyyy似毛非毛

imdong 发表于 2024-11-11 21:16
设置cookie
头信息下只需要设置UA，cookie 设置一个ttwid参数值随机数

谢谢您的回复，我试一试

唐王李世民

说实话，整贴下来也没看到你到底要取什么内容，取网页代码平常的请求就能拉，取数据爬人家接口就行了.。。。你这刚学爬虫就爬淘宝么？哪有新手村出来就打boss的。爬点简单的吧

唐王李世民

kpxyyyy 发表于 2024-11-12 12:22
说实话，整贴下来也没看到你到底要取什么内容，取网页代码平常的请求就能拉，取数据爬人家接口就行了. ...

它的接口已经改变了，现在取不到接口数据，谢谢您了