将响应变量转换为 JSON 文件

Posted

技术标签:

【中文标题】将响应变量转换为 JSON 文件【英文标题】:Convert Response Variable to JSON file 【发布时间】:2021-07-25 18:27:55 【问题描述】:

我正在尝试将https://lpl.qq.com/web201612/data/LOL_MATCH_DETAIL_7325.js 处的页面转换为 json 文件,以便将其解析为 pandas 表。

我正在使用 python 请求库,我的函数如下所示:

[1]def lpl_get_match_data(url, test):
[2]    good_url = "https://lpl.qq.com/web201612/data/LOL_MATCH_DETAIL_7325.js"
[3]    json_file = requests.get(good_url)
[4]    json_content = json_file.json()
[5]    if test == True:
[6]        pprint.pprint(json_content)
[7]    return(json_content)

当我运行这个函数时,我得到一个错误,“JSONDecodeError: Expecting value: line 1 column 1 (char 0)”。

我做了明显的“谷歌错误”并检查了一堆响应,看起来在很多情况下人们有空文件或没有得到响应。我尝试将第 3 行更改为 requests.get(good_url).content 以确认我得到了正确的响应,并且看起来确实如此。我想知道是否有人可以指出为什么此页面无法作为 json 对象读取。

【问题讨论】:

【参考方案1】:

问题在于您尝试读取的页面包含 javascript 对象,而不是 JSON 文件。您可以使用demjson 库转换您获得的对象,使用:demjson.decode(json_file.content[12:-1])。请注意,内容是一个字符串,因此您可以使用给定的索引对“var dataObj = ”和“”部分进行切片。您可以使用它而不是您的第三行,这应该可以解决您的问题。

【讨论】:

工作就像一个魅力。我认为问题在于页面指向了 java 对象而不是 json 文件,但不知道如何解决这个问题。非常感谢。 不客气!享受和快乐的编码! :)

以上是关于将响应变量转换为 JSON 文件的主要内容,如果未能解决你的问题,请参考以下文章

将文本响应转换为 JSON 数组(邮递员)

将表示 UCHAR 数组的 json 字符串响应转换为字节数组

将变量嵌套列表的大文件转换为 JSON

如何在 bash 中将 json 响应转换为 yaml

将 XML 响应转换为 Json 时出错

ASP.NET Web API将MV响应转换为MVC 4中的json List