从网页抓取数据( )
优采云 发布时间: 2022-02-01 16:22从网页抓取数据(
)
出于练习目的,我正在尝试从本网站的表格中提取整个股票列表(我知道有 Yahoo APIs for Finance 等,但这是为了自学):我正在尝试提取整个列表出于练习目的从本网站的表格中提取股票(我知道有 Yahoo APIs for Finance 等,但这是为了自学):从 @> 的表格中提取整个股票列表以供练习(我知道有Yahoo APIs for Finance 等,但这是为了自学):
使用 Python,我不想依赖诸如 selenium 之类的繁重的东西并多次单击 next 来遍历整个列表。 next 遍历整个列表。
所以我正在尝试挖掘“网络”选项卡,看看是否有数据来自的来源。也许是一个json文件左右。也许是一个json文件左右。
我好像找不到。我也尝试挖掘 Javascript 文件(有这么多!),我觉得我正在深入一个永无止境的海洋。我还尝试过挖掘 Javascript 文件(有这么多!),我觉得我正在潜入一个永无止境的海洋。我真的不知道我应该去哪里找。
我假设应该有一些与数据库的连接?谢谢您的帮助!感谢您的帮助!
更新:更新:
根据 Carcigenicate 提供的信息:根据 Carcigenicate 提供的信息:
我尝试了以下方法,但仍然没有得到正确的响应
url = 'https://www.nyse.com/api/quotes/filter'
payload = {"instrumentType":"EQUITY","pageNumber":5,
"sortColumn":"NORMALIZED_TICKER",
"sortOrder":"ASC","maxResultsPerPage":10,
"filterToken":""}
response = requests.post(url, data = payload)
print(response)
根据我是否使用 POST 或 GET,我会收到以下响应: