像这种网站的数据怎么扒？

[hongfeiyu]

https://nces.ed.gov/ipeds/datacenter/InstitutionByName.aspx
可能要翻墙，链接跳转的话
https://nces.ed.gov/search/?q=custom+data+files 的第一个搜索结果

[knightdf]

你是要爬什么数据？完全没明白你的目的。。。

[hongfeiyu]

@knightdf 它里面不是有那个选择机构和参数，然后提供文件下载，如果想把全部文件下载的话怎么爬

[knightdf]

@hongfeiyu 执行 js

[DennyDai]

http://catalog.data.gov/dataset?q=ipeds&sort=score+desc%2C+name+asc

[hongfeiyu]

@DennyDai 天啊，这两个网站的数据是一样的吗
这个网站的数据可以直接下载 吗

[DennyDai]

@hongfeiyu 不知道是不是一样我就是简单搜了一下，可以下载。。。反正 data.gov 是个找数据的好去处