Lassen Sie das JSON-Objekt Bytes akzeptieren oder lassen Sie die Ausgabezeichenfolgen urlopen

Mit Python 3 fordere ich ein JSON-Dokument von einer URL an.

response = urllib.request.urlopen(request)

Das responseObjekt ist ein dateiähnliches Objekt mit readund readlineMethoden. Normalerweise kann ein JSON-Objekt mit einer im Textmodus geöffneten Datei erstellt werden.

obj = json.load(fp)

Was ich tun möchte ist:

obj = json.load(response)

Dies funktioniert jedoch nicht, da urlopen ein Dateiobjekt im Binärmodus zurückgibt.

Eine Umgehung ist natürlich:

str_response = response.read().decode('utf-8')
obj = json.loads(str_response)

aber das fühlt sich schlecht an ...

Gibt es eine bessere Möglichkeit, ein Byte-Dateiobjekt in ein String-Dateiobjekt umzuwandeln? Oder fehlen mir Parameter für eine urlopenoder json.loadeine Kodierung?

HTTP sendet Bytes. Wenn es sich bei der fraglichen Ressource um Text handelt, wird die Zeichenkodierung normalerweise entweder durch den HTTP-Header vom Inhaltstyp oder durch einen anderen Mechanismus (RFC, HTML meta http-equiv, ...) angegeben.

urllib sollte wissen, wie man die Bytes in einen String codiert, aber es ist zu naiv - es ist eine schrecklich unterversorgte und nicht pythonische Bibliothek.

Dive Into Python 3 bietet einen Überblick über die Situation.

Ihr "Workaround" ist in Ordnung - obwohl es sich falsch anfühlt, ist es der richtige Weg, dies zu tun.

Pythons wunderbare Standardbibliothek zur Rettung…

import codecs

reader = codecs.getreader("utf-8")
obj = json.load(reader(response))

Funktioniert sowohl mit py2 als auch mit py3.

Dokumente : Python 2 , Python3

Ich bin zu dem Schluss gekommen, dass die Frage die beste Antwort ist :)

import json
from urllib.request import urlopen

response = urlopen("site.com/api/foo/bar").read().decode('utf8')
obj = json.loads(response)

Für alle anderen, die versuchen, dies mithilfe der requestsBibliothek zu lösen :

import json
import requests

r = requests.get('http://localhost/index.json')
r.raise_for_status()
# works for Python2 and Python3
json.loads(r.content.decode('utf-8'))

Dieser funktioniert für mich. Ich habe die 'Anforderungs'-Bibliothek verwendet json(), um das Dokument in Anfragen für Menschen auszuchecken

import requests

url = 'here goes your url'

obj = requests.get(url).json() 

Ich bin mit Python 3.4.3 & 3.5.2 und Django 1.11.3 auf ähnliche Probleme gestoßen. Als ich jedoch auf Python 3.6.1 aktualisierte, verschwanden die Probleme.

Weitere Informationen finden Sie hier: https://docs.python.org/3/whatsnew/3.6.html#json

Wenn Sie nicht an eine bestimmte Version von Python gebunden sind, sollten Sie ein Upgrade auf 3.6 oder höher in Betracht ziehen.

Wenn dieses Problem bei der Verwendung des Kolben-Mikroframeworks auftritt, können Sie Folgendes tun:

data = json.loads(response.get_data(as_text=True))

Aus den Dokumenten : "Wenn as_text auf True gesetzt ist, ist der Rückgabewert eine decodierte Unicode-Zeichenfolge."

Ihre Problemumgehung hat mich gerade gerettet. Ich hatte viele Probleme bei der Verarbeitung der Anfrage mit dem Falcon-Framework. Das hat bei mir funktioniert. req ist das Anfrageformular curl pr httpie

json.loads(req.stream.read().decode('utf-8'))

Dadurch werden die Byte-Daten in json gestreamt.

import io

obj = json.load(io.TextIOWrapper(response))

io.TextIOWrapper wird dem Modulleser des Codecs vorgezogen. https://www.python.org/dev/peps/pep-0400/

Ich habe gerade diese einfache Methode gefunden, um HttpResponse-Inhalte als JSON zu erstellen

import json

request = RequestFactory() # ignore this, this just like your request object

response = MyView.as_view()(request) # got response as HttpResponse object

response.render() # call this so we could call response.content after

json_response = json.loads(response.content.decode('utf-8'))

print(json_response) # {"your_json_key": "your json value"}

Hoffe das hilft dir

Ab Python 3.6 können Sie json.loads()ein bytesObjekt direkt deserialisieren (die Codierung muss UTF-8, UTF-16 oder UTF-32 sein). Wenn Sie also nur Module aus der Standardbibliothek verwenden, können Sie Folgendes tun:

import json
from urllib import request

response = request.urlopen(url).read()
data = json.loads(response)

Ich habe unten Programm verwendet, um zu verwenden json.loads()

import urllib.request
import json
endpoint = 'https://maps.googleapis.com/maps/api/directions/json?'
api_key = 'AIzaSyABbKiwfzv9vLBR_kCuhO7w13Kseu68lr0'
origin = input('where are you ?').replace(' ','+')
destination = input('where do u want to go').replace(' ','+')
nav_request = 'origin={}&destination={}&key={}'.format(origin,destination,api_key)
request = endpoint + nav_request
response = urllib.request.urlopen(request).read().decode('utf-8')
directions = json.loads(response)
print(directions)