梦幻篮球论坛

标题: 求教php抓取网页 [打印本页]

作者: 大恶 时间: 2017-4-19 22:25
标题: 求教php抓取网页
抓取http打头的网页很容易实现，但在抓取https打头的网页时遇到了困难，如果有高手能够用php抓取到下面网址的源码(不需要包括js异步加载的)，可以得到20000金币奖励。
网址:https://www.whoscored.com/Matches/1179783/LiveStatistics/
这个网址输入到浏览器中打开是没有问题的，但用php死活也抓不到，网上查了好多办法都不行

作者: yipkan 时间: 2017-4-19 23:59

搞足球游戏了

作者: 吹雪 时间: 2017-4-20 21:17
大恶原来也是技术达人!!牛!! 按照程序员的思路,新问题只要合理的提出,就一定有解决的办法.可能就是差层窗户纸. 给点思路. 如果用不上一笑置之.
1.php.ini里是否有选项未打开;
2.是否安装安装curl扩展;
3.是否安装一些其他需要的插件;
4.http://blog.csdn.net/baidu_35738 ... tionNum=2&fps=1
5.http://so.csdn.net/so/search/s.do?q=php抓取https&t=null&o=null&s=null&l=null

作者: 大恶 时间: 2017-4-22 09:24

吹雪发表于 2017-4-20 21:17
大恶原来也是技术达人!!牛!! 按照程序员的思路,新问题只要合理的提出,就一定有解决的办法.可能就是差层窗户 ...

多谢了，这只是curl的使用说明，我已经用curl尝试过各种方法了，都不成功，我需要的是确切的代码能够抓到网页的

作者: 大恶 时间: 2017-4-22 15:03
看来没戏，对方使用了非常强大的反爬虫系统，绝对不是一般人能采集的

欢迎光临梦幻篮球论坛 (https://www.fantasynba.cn/bbs/)