Thema "Re: REST API 403 Error" in Website & Apps

REST API 403 Error

nobisseb — Tue, 07 Dec 2021 15:32:50 GMT

Hallo Community,

ich habe ein Python Tool entwickelt mit dem ich meine Depotdaten analysiere.

Ich nutze dafür die REST API und verwende viele verschiedene requests.

Das Tool hat über ein Jahr reibungslos funktioniert und von einem Tag auf den andere n bekomme ich teils zufällig und immer an anderen Stellen "403" responses auf meine requests.

Wurde so etwas wie eine strengere Begrenzung bei der Anzahl an requests/Zeit oder ähnliches?

Da das Tool mehrere Monate unverändert funktioniert hat und auch die Fehler jetzt recht zufällig bei immer unterschiedlichen requests auftauchen denke ich nicht dass es an meiner Implementierung liegt.

Habt ihr einen Tipp für mich oder schon ähnliches beobachtet?

Grüße

Sebastian

Re: REST API 403 Error

SMT_Jan-Ove — Wed, 08 Dec 2021 11:31:24 GMT

Hallo @nobisseb,

herzlich willkommen in unserer Community!

Ich habe dazu gerne mal bei unserem API Team nachgefragt. Eine genaue Erklärung können wir anhand deiner Angaben jedoch leider nicht liefern. Mögliche Situationen (abgelaufenes Token, falscher Login oder falsche IDs) würden zu HTTP 401 und nicht HTTP 403 führen.

Wir empfehlen dir daher, darauf zu achten, nicht zu viele Aufrufe in kurzer Zeit auszuführen und darauf, dass deine IDs immer richtig sind.

Beste Grüße

Jan-Ove

Re: REST API 403 Error

nobisseb — Wed, 08 Dec 2021 18:53:02 GMT

Hallo Jan-Ove,

danke für deine Rückmeldung.

In welchen Fällen bekommt man denn einen HTTP 403 zurück?

Wieviele Aufrufe pro Zeit sind denn als kritisch zu betrachten?

Meine IDs sollte das Tool richtig durchreichen, da ich am Code seit über einem Jahr nicht verändert habe und es von einem auf den anderen Tag die HTTP 403 Fehler gab.

Besten Dank für eure Mühe

Grüße

Sebastian

Re: REST API 403 Error

SMT_Jan-Ove — Thu, 09 Dec 2021 09:03:16 GMT

Hallo @nobisseb,

denkbar wäre ein Response vom Loadbalancer oder einem Anti-DDOS-System. Die genauen Zeiten können wir dir nicht sagen. Besonders bei Depotpositionen sollte man aber behutsam vorgehen und etwas Zeit (vielleicht im Bereich von einer Sekunde) zwischen Operationen einplanen. Diese Mechanismen sollen verhindern, dass z.B. versehentlich ein Wertpapier doppelt verkauft wird, weil z.B. die UI etwas hinterherhinkt und der Kunde dann ggf. frustriert doppelt geklickt hat. Diese zu häufigen Aufrufe können auch zu Sperren führen.

Beste Grüße

Jan-Ove

Re: REST API 403 Error

nobisseb — Thu, 09 Dec 2021 22:36:43 GMT

Habe jetzt vor jedem meiner requests testweise eine Pause von ca 5s eingebaut. Insgesamt macht mein Tool nun ca 10 request mit jeweils 5s pause zwischendrinn.

Bekomme leider immernoch sehr willkürlich verteilt die 403 responses 😞

Bin jetzt etwas ratlos. Habe leider gar keinen Anhaltspunkt.

Auch wenn die requests vorher tadelos funktioniert haben poste ich euch nochmal einen meiner requests wie ich ihn in python aufgesetzt habe:

def get_all_depots_data(clientId, access_token, session_id😞

response = requests.get(

f"https://api.comdirect.de/api/brokerage/clients/{clientId}/v3/depots",

allow_redirects=False,

headers = {

"Accept":"application/json",

"Authorization":"Bearer " + access_token,

"x-http-request-info":f"{{\"clientRequestId\":{{\"sessionId\":\"{session_id}\",\"requestId\":\"{time_string_generator.currenttime()}\"}}}}",

"Content-Type":"application/json"

data='{}',

)

return response.json()

Die request ID erzeuge ich mir mit aus der aktuellen Zeit:

def currenttime():

return datetime.datetime.now(datetime.timezone.utc).strftime("%Y%m%d%H%M%S%f")

Ich weiss nicht ob ihr damit etwas anfangen könnt.

Beste Grüße

Sebastian

Re: REST API 403 Error

SMT_Jan-Ove — Mon, 13 Dec 2021 15:14:49 GMT

Hallo @nobisseb,

unsere Kollegen haben noch eine Idee.

Vielleicht ist die request ID der Grund für die Fehlermeldung.Bitte lies daher einmal im Doku Kapitel zu den HTTP-Headern nach, worauf beim HTTP-Header geachtet werden muss.

Hier ein kleines Java-Script Codesnippet als Beispiel, wie die Request ID generiert werden kann:

// Request ID aus den letzten (!!!) 9 Zeichen des aktuellen Timestamps in ms:
var ts = _.now().toString();
pm.environment.set("request_id", ts.substring(ts.length - 9, ts.length));

Das Beispiel ist aus der offiziellen Postman-Collection genommen, die du auch herunterladen kannst.

Vielleicht hilft das weiter. 🙂

Beste Grüße

Jan-Ove

Re: REST API 403 Error

com_phil — Tue, 14 Dec 2021 08:54:02 GMT

Hallo @SMT_Jan-Ove ,

ich habe seit letzten Samstag das gleiche Problem.

Die schon beschrieben Punkte bin ich schon durchgegangen.

Mein Timestamp wird ordentlich übergeben und auch alle Request habe ich mal um 5 Sekunden verzögert ohne Erfolg.

Bei mir wird im Response zusätzlich noch ein hmtl Output gegeben.

Vielen Dank &

Beste Grüße

Re: REST API 403 Error

SMT_Jessica — Tue, 14 Dec 2021 09:56:19 GMT

Hallo @com_phil,

wir haben deine Anfrage an den Fachbereich weitergegeben. Bis zur Antwort kann es derzeit etwas dauern. Daher bitten wir dich um Geduld und melden uns, wenn wir mehr erfahren.

Viele Grüße

Jessica

Re: REST API 403 Error

nobisseb — Tue, 14 Dec 2021 09:57:24 GMT

Hi all,

auch ich habe nochmal in meinem Code Anpassungen gemacht um 100% konform mit eurer Request Doku zu sein. Problem besteht auch bei mir weiterhin.

Danke dass ihr euch der Sache annehmt.

Beste Grüße

Sebastian

Re: REST API 403 Error

SMT_Jessica — Tue, 14 Dec 2021 10:04:00 GMT

Danke auch dir @nobisseb für die Rückmeldung.

Das leite ich ebenfalls weiter.

Viele Grüße

Jessica

Re: REST API 403 Error

SMT_Jessica — Wed, 15 Dec 2021 13:35:53 GMT

Hallo in die Runde,

die Fachabteilung hat sich das Problem angesehen und konnte was anpassen. Daher sollte die Fehlermeldung nicht mehr auftauchen.

Danke nochmal für die Meldungen.

Viele Grüße

Jessica

Re: REST API 403 Error

com_phil — Wed, 15 Dec 2021 13:40:11 GMT

Hallo zusammen,

bei mir leider ohne Erfolg.

Viele Grüße

Philipp

Re: REST API 403 Error

SMT_Jessica — Wed, 15 Dec 2021 13:45:59 GMT

Danke, dass du es getestet hast @com_phil.

Ich werde die Fachabteilung nochmals informieren.

Viele Grüße

Jessica

Re: REST API 403 Error

com_phil — Wed, 15 Dec 2021 13:47:23 GMT

Hallo @SMT_Jessica ,

viele Lieben Dank an euch!

Viele Grüße Philipp

Re: REST API 403 Error

nobisseb — Wed, 15 Dec 2021 17:09:02 GMT

Hallo Jessica,

auch ich bekomme leider weiterhin meine 403 errors.

Danke dass ihr dran bleibt!

Beste Grüße

Sebastian

Re: REST API 403 Error

SMT_Erik — Thu, 16 Dec 2021 13:58:41 GMT

@com_phil schrieb:

Hallo zusammen,

bei mir leider ohne Erfolg.

Viele Grüße

Philipp

Hallo @com_phil ,

die Fachabteilung hat uns dazu folgendes geschrieben:

"Wir sehen vermehrt GET-Requests mit einem Request Body. Das ist nicht zulässig. Bitte prüft also eure Implementierungen, ob ihr bei einem GET-Request einen Request Body mitschickt.

Sollte das nicht zur Behebung des Problems führen, würden uns Antworten auf die folgenden Fragen helfen:

- Treten die 403 Responses nur sporadisch auf oder immer, egal welcher Request?

- Treten die 403 nur bei bestimmten Schnittstellen auf, wenn ja welche?"

Gruß

Erik

Re: REST API 403 Error

nobisseb — Thu, 16 Dec 2021 15:58:50 GMT

Hi,

der Hinweis mit dem Body in den GET requests. Ich hatte immer leere Daten mitgeschickt. Seitdem ich in allen GET requests den body entfernt habe läuft alles wieder! Wunderbar!

Nur erstaunlich dass es davor monatelang funktioniert hat.

In jedem Fall besten Dank! Bei mir tut wieder alles wie es soll!

Grüße und frohe Weihnacht

Sebastian

Re: REST API 403 Error

com_phil — Thu, 16 Dec 2021 16:51:44 GMT

Hallo zusammen,

ich habe den Fehler ausfindig machen können.

Eigentlich war mein Stand, dass die API nie einen leeren Body übergeben bekommen darf, sondern "{}" eine leere JSON.

Da wurde hier zur Einführung der API beschrieben.

Ich habe seither, wenn der Body leer war, immer ein "{}" im Body mitgesendet.

Problem ist gerade, dass es sich nicht einheitlich durch die API zieht.

Bei zB. Get AccountsBalance einen leeren Body benötigt, aber beim Aktivieren der Session-TAN benötigt man im Body immer noch eine leere JSON, sonst kommt es zu einem Fehler.

Vielen Dank für die schnelle Reaktion,

habe mir ein Workaround gebaut.