标题:又来求助各位老师了,这个网页的数据如何采集?
只看楼主
jinanshui
Rank: 2
等 级:论坛游民
帖 子:274
专家分:64
注 册:2009-10-6
结帖率:95.65%
已结贴  问题点数:20 回复次数:4 
又来求助各位老师了,这个网页的数据如何采集?
又来求助各位老师了,这个网页的数据如何采集?能不能把所有学科的评估数据都采集下来,谢谢,有点贪心了
https://souky.
我查看网页源码,上面只有哲学的
view-source:https://souky.



搜索更多相关主题的帖子: api 老师 采集 数据 网页 
2021-06-12 13:50
wp231957
Rank: 20Rank: 20Rank: 20Rank: 20Rank: 20
来 自:神界
等 级:版主
威 望:422
帖 子:13681
专家分:53296
注 册:2012-10-18
得分:20 
回复 楼主 jinanshui
程序代码:
import requests

url = 'https://souky.'
headers = {
          'User-Agent': 'Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/87.0.4280.88 Safari/537.36'
          }
for xid in range(1,112):
    data = {
        'xid': str(xid),
        'flag': '1'
        }
    res=requests.post(url=url,headers=headers,data=data)
    print(res.text.encode(encoding="utf-8").decode(encoding="unicode_escape"))


DO IT YOURSELF !
2021-06-12 15:19
jinanshui
Rank: 2
等 级:论坛游民
帖 子:274
专家分:64
注 册:2009-10-6
得分:0 
谢谢老师,我试试
2021-06-12 15:48
s1518838035
Rank: 1
等 级:新手上路
帖 子:7
专家分:0
注 册:2020-4-8
得分:0 
回复 2楼 wp231957
大佬,我有个编程题,能请教一下吗
2021-06-24 14:50
wapjin
Rank: 1
等 级:新手上路
帖 子:7
专家分:5
注 册:2021-6-29
得分:0 
百度一下,你就知道

分享一下你的技术
2021-06-29 16:20



参与讨论请移步原网站贴子:https://bbs.bccn.net/thread-506004-1-1.html




关于我们 | 广告合作 | 编程中国 | 清除Cookies | TOP | 手机版

编程中国 版权所有,并保留所有权利。
Powered by Discuz, Processed in 0.290425 second(s), 7 queries.
Copyright©2004-2025, BCCN.NET, All Rights Reserved