{"id":783,"date":"2006-11-19T15:23:28","date_gmt":"2006-11-19T14:23:28","guid":{"rendered":"http:\/\/olbertz.de\/blog\/2006\/11\/19\/hetzner-protokoll-eines-scheiterns\/"},"modified":"2023-07-13T08:13:04","modified_gmt":"2023-07-13T06:13:04","slug":"hetzner-protokoll-eines-scheiterns","status":"publish","type":"post","link":"https:\/\/olbertz.de\/blog\/2006\/11\/19\/hetzner-protokoll-eines-scheiterns\/","title":{"rendered":"Hetzner: Protokoll eines Scheiterns"},"content":{"rendered":"

Der Beitrag ist inzwischen etwas unübersichtlich geworden. Hier geht es zum ursprünglichen Anfang<\/a>.<\/p>\n

Nachtrag 20.11.2006 20:56 Uhr: <\/b>
\nHeute morgen, kurz nach dem offiziellen Supportbeginn bei Hetzner (7:30 Uhr), war der Blogger.de-Datenbankserver wieder erreichbar und eine Mail aus dem Ticketing-System lag vor: Die nicht verwendete Platte könnte gegen eine neue ausgetauscht werden, so dass ich die Daten der verbliebenen Platte rüberkopieren könnte. Anschließend würde man dann auch die zweite defekte Platte austauschen. Ausnahmsweise (und das glaube ich und ich bin da auch sehr froh drüber!) hat man mir angeboten, den kompletten Vorgang des Austauschen und Kopieren von Seiten Hetzners in die Hand zu nehmen. Dieses Angebot habe ich dankend angenommen, eine 160 GB Festplatte Byte für Byte zu kopieren dauerte halt ein wenig, aber um 16:45 Uhr lief die Datenbank wieder. Auf eine Zwischenfrage von mir, wie es denn aussieht, wurde von Seiten Hetzners, schnell und ordentlich geantwortet.
\nIch bin also froh, dass das Problem nun dauerhaft beseitigt ist, außer den regelmäßigen Ausfällen der Datenbank gab es in den letzten Monaten nämlich keinen Ausfall bei Blogger.de zu verzeichnen.
\nIch hatte Hetzner noch um die Beantwortung ein paar Fragen gebeten, weil ich wissen wollte, wie der Support denn nun tatsächlich funktioniert und wie man im Fehlerfalle am Besten vorgeht. Hier meine Fragen und die Antworten von Hetzner:<\/p>\n

Sind am Freitag tatsächlich Mails an das Ticketing-System verloren gegangen? Die Mail von Hetzner, die mich um 12:38 Uhr erreichte, legt diesen Schluß nahe.<\/h2>\n

Hetzner: Diesbezueglich ist mir nichts bekannt.<\/i><\/p>\n

Wie lange dauert es im Durchschnitt, bis ein Reset-Auftrag ausgeführt wird?<\/h2>\n

Hetzner: Die Reaktionszeit sollte ca. 30 Min. dauern.
\nGibt es jedoch mal sehr viele Supportanfragen so kann sich dies verzoegern.
\nWir empfehlen Ihnen den ‚Automatischen Reboot‘ fuer einmalig 20,- Euro pro Server fuer Ihre Server einrichten zu lassen. Dann sind Sie in Sachen Reboot unabhaengig.
\n(Hier habe ich nochmal nachgehakt, da ich in dem Paket ja den ‚Automatischen Reboot‘ drin habe:)<\/p>\n

Wie genau funktioniert dieser Automatische Reboot? Bei dem Server, um den es am Freitag ging, war das Paket ja bereits inklusive und hat leider nicht funktioniert. Lag das evtl. daran, dass dies nicht richtig eingerichtet war, oder daran, dass dadurch eine Art Reset ausgeführt wird, die dem Aus- und Einschalten eines Rechners nicht gleichkommt?<\/h2>\n

Hetzner: Es wird ein echter Hardware Reset ausgefuehrt.
\nBleibt der Server aber im Bios haengen hilft auch der automatische Reboot nichts.<\/i><\/p>\n

Werden Nachfragen im Ticketingsystem genau so behandelt, wie neue Tickets? Landen sie also wieder am Ende der Warteschlange und es dauert entsprechend bis sie bei ihnen bearbeitet werden?<\/h2>\n

Hetzner: Bedingt. Neue Tickets werden permanent ueberwacht. Antworten auf bestehende Tickets nur in bestimmten Zeitabstaenden.<\/i><\/p>\n

Gehören die RZ-Telefonnummern zum offiziellen Support und sollen bei Problemen genutzt werden? Wie wird dort eine Authentifizierung des Anrufers vorgenommen?<\/h2>\n

Hetzner:Als ersten Schritt sollen Sie versuchen das Problem selbst zu loesen.
\nGelingt dies nicht dann aus dem Robot eine Supportanfrage stellen.
\nDa ist dann keine Authentifizierung mehr noetig.
\nSie koennen auch im Rechenzentrum anrufen.
\nZur Authentifizierung muessen Sie dort die ersten 4 Zeichen Ihres Robot Passwortes nennen.<\/i><\/p>\n

\n

Für mich ist die Sache damit erledigt. Der Server läuft wieder, das Preis-\/Leistungverhältnis stimmt wieder und eine Menge gelernt habe ich zusätzlich. Als nächstes werde ich mich mit der Installation des Software-RAIDS auseinandersetzen.<\/p>\n

Nachtrag 20.11.2006 16:36 Uhr: <\/b> Die Datenbank läuft wieder, Platten sind getauscht, Blogger.de<\/a> wieder online. Mehr Infos heute Abend<\/p>\n

Nachtrag 20.11.2006 08:35 Uhr: <\/b> Der Hetzner-Support hat mir ausnahmsweise angeboten, die Spiegelung der Daten von der alten auf die neue Festplatte komplett durchzuführen. Dafür bin ich sehr dankbar, da ich das Rescue-System nicht kenne, mit dem ich das hätte machen müssen. Ich hätte erst heute Abend Zeit dafür gehabt, mir den Umgang damit anzulesen, um den Vorgang fehlerfrei durchzuführen. Ab ca. 11:00 Uhr wird Hetzner die Platten also austauschen und kopieren. Anschließend kann die Datenbank von Blogger.de wieder online gehen. Da die Datenbank wieder verfügbar ist, habe ich die Tabellen gecheckt und repariert, zur Zeit wird Komplettbackup auf einen anderen Server gemacht, um auch für Probleme beim Kopiervorgang gewappnet zu sein.<\/p>\n

Bei<\/a> Hetzner<\/a> stehen für Blogger.de<\/a> und Blogscout.de insgesamt fünf ihrer Rootserver<\/a>. Bislang war ich sehr zufrieden und habe Hetzner sogar weiterempfohlen: Mail von Hetzner<\/a>
\nNach den Erfahrungen der letzten Tage bin ich jedoch ziemlich ernüchtert. Ich hatte mich damals extra gegen 1&1, sowie Strato entschieden, weil ich lieber einen „kleinen“ Hoster unterstützen wollte. Hinzu kommt, dass die Preise von Hetzner (im Gegensatz zu z.B. HostEurope), es mir überhaupt erst ermöglichen, die Dienste durch Werbung zu refinanzieren.
\nAn dieser Stelle möchte ich protokollieren, wie schwierig sich die Kommunikation mit Hetzner gestaltet hat. Zum Telefonhörer habe ich extra nicht gegriffen, da meine letzte Erfahrung mit dem Telefonsupport nur war, dass man mir sagen konnte, wieviele Tickets noch vor meinem stehen. Mit einem Techniker kommt man da nicht in Kontakt. Außerdem kenne ich Abläufe in Support-Abteilungen und weiß, wie wichtig ein (funktionierendes) Ticketing-System ist. Deshalb ist es hilfreich, wenn alle Kundenkontakte darüber abgewickelt werden.
\nEin Supporteinsatz am Wochenende und nachts kostet 116,- Euro inklusive 15 Minuten Arbeit. Das ist eine Summe, für die ich die Blogger.de-Server für einen Monat bezahlen kann. Aus dem Grund müssen wir leider bis Montag morgen warten, bis Hetzner dann hoffentlich schneller den DB-Server resettet und vielleicht auch gleich schon eine der defekten Platten austauscht.<\/p>\n

\n
16.11.2006 22:58 Uhr<\/dt>\n
Letzter Eintrag auf Blogger.de, bevor der DB-Server einfriert<\/dd>\n
17.11.2006 00:58 Uhr<\/dt>\n
Axel<\/a> stellt den Webserver um, so dass eine Fehlermeldung sichtbar ist. Der Server ist anpingbar, ein connect per ssh funktioniert jedoch nicht und die DB lässt sich vom Blogger.de-Applikationsserver nicht erreichen.<\/dd>\n
17.11.2006 08:42 Uhr<\/dt>\n
Ich stelle einen Auftrag auf Hardware-Reset über das Service-Menü von Hetzner.<\/dd>\n<\/dl>\n
17.11.2006 09:29 Uhr<\/dt>\n
Von Hetzner erreicht mich folgende Mail:
\nIhr Server ist sowohl anpingbar als auch per SSH erreichbar. Sind Sie sicher, dass wir Ihren Server neu starten sollen? Sie können Hard- und Softwareresets auch direkt über den Resetservice an Ihren Server leiten. Können wir Ihnen evtl. anderweitig weiterhelfen?<\/i><\/dd>\n
17.11.2006 10:03 Uhr<\/dt>\n
Ich schreibe an Hetzner:
\nDer Server ist (wie leider schon so oft), nicht per ssh erreichbar: ssh XXX.XXX.XXX.XXX bringt nichts. Deshalb ist blogger.de auch seit dieser Nacht offline :-(
\nBitte also schnellstmöglich den Server neustarten. Auf den manuellen Reset über das Tool reagiert der Server in solchen Fällen auch nicht!
\nDeswegen wollte ich sowieso nochmal nachfragen, was man da gegen diesen instabilen Server tun kann. Alle paar Wochen ein Totalausfall ist einfach nicht hinnehmbar. Vor allem nicht auf eine DB-Server.<\/i><\/dd>\n
17.11.2006 10:55 Uhr<\/dt>\n
Ich schreibe an Hetzner:
\nWie sieht’s aus? Der Reset-Auftrag wurde vor mehr als zwei Stunden gestellt…<\/i><\/dd>\n
17.11.2006 11:43 Uhr<\/dt>\n
Ich schreibe an Hetzner:
\nWas ist denn los? Als ein Server das letzte Mal hing, dauerte der Reset auch schon einige Stunden. Damals sagten sie, dass durch den Stromausfall viel Arbeit liegen blieb.
\nWoran liegt es nun? Ich halte es nicht für akzeptabel, mehrere Stunden auf einen Reset zu warten, in Frage gestellt zu werden, ob der Server wirklich resettet werden soll, eine falsche Diagnose zu stellen (der Server ist seit heute morgen gegen 1:40 nicht mehr per SSH zu erreichen und auch die DB auf dem Server konnte nicht mehr angesprochen werden) und dann nicht mehr zu reagieren.
\nIch möchte auch dringend wissen, wie sie mit dem defekten Server umgehen wollen? Bekomme ich einen anderen zur Verfügung gestellt, auf dem ich mit der Datenbank umziehen kann? Ich bitte dabei 10 Arbeitstage für einen parallelen Betrieb einzuplanen, da der neue Server erst komplett eingerichtet und auch die Backup-Skripte angepasst werden müssen.<\/i><\/dd>\n
17.11.2006 12:38 Uhr<\/dt>\n
Von Hetzner erreicht mich folgende Mail:
\nDies ging zur angegebnenen Zeit an Sie raus.
\n[…]
\nIhr Server ist sowohl anpingbar als auch per SSH erreichbar. Sind Sie sicher, dass wir Ihren Server neu starten sollen? Sie können Hard- und Softwareresets auch direkt über den Resetservice an Ihren Server leiten. Können wir Ihnen evtl. anderweitig weiterhelfen?
\n[…]
\nkoennten Sie uns bitte definitv sagen ob wir das System, das fuer uns erreichbar ist, nun Reseten sollen oder nicht?<\/i><\/dd>\n
17.11.2006 12:44 Uhr<\/dt>\n
Ich schreibe an Hetzner:
\nAuf diese Mail habe ich schon zwei mal geantwortet!
\nJA, der Server soll resettet werden! Er ist nämlich per SSH *NICHT* zu erreichen.<\/i><\/dd>\n
17.11.2006 13:06 Uhr<\/dt>\n
Ich schreibe an Hetzner:<\/dd>\n
Irgendwie scheinen bei Ihnen einige Mails verloeren gehen, deshalb also nochmal:
\nJa, Server bitte sofort resetten. Er ist seit heute morgen 1:40 nicht mehr per ssh zu erreichen!!<\/dd>\n
17.11.2006 13:29 Uhr<\/dt>\n
Ich schreibe an Hetzner:
\nVielleicht kommt ja auch nur jede dritte Mail bei ihnen an: bitte endlich den DB-Server von Blogger.de resetten! Es sind nun schon fast 5 Stunden, seit dem Auftrag vergangen :-(
\nUnd eine Antwort, wie mit dem offensichtlich defekten Server verfahren wird, wurde mir auch noch nicht gegegen.<\/i><\/dd>\n
17.11.2006 13:41 Uhr<\/dt>\n
Von Hetzner erreicht mich folgende Mail:
\nIn Ihrem System sind noch Maxtor-Platten verbaut. Diese haben das Problem, nach unbestimmter Zeit einfach aus dem System zu verschwinden.
\nVorgehen:
\n– wir tauschen sdb gegen ein anderes Model aus
\n– Sie machen via dd und rescuesystem ein abbild von sda auf sdb
\n– wir tauschen sda gegen sdb (neue Platte wird sda) und tauschen auch die zweite Maxtorplatte aus.<\/p>\n

<\/i><\/i>Sollten Sie beide Platten in verwendung haben tauschen wir erst eine Platte damit sie eine kopie machen koennen, Dann die anderen und haengen am Ende die beiden neuen Platten in das System.
\nWarum meine Kollegen die Maxtorplatten nicht gesehen haben bzw. Ihnen das Problem nicht mitgeteilt haben kann ich Ihnen nicht sagen.<\/i><\/dd>\n

17.11.2006 13:47 Uhr<\/dt>\n
Ich schreibe an Hetzner:
\nSoweit ich weiß, nutze ich sdb nicht. Zumindest wusste ich bis gerade nicht, dass da zwei Platten drin sind…
\nSie können also sdb austauschen und irgendwann in den nächsten Tagen werde ich versuchen, das System auf sdb zum Laufen zu bekommen – wie gesagt, dass ist der DB-Server von Blogger.de, da kann ich schlecht mal daran rumdoktern, vor allem habe ich zu solchen Spielen eigentlich nur am WE Zeit und kann dann nicht auf ihren Support zurückgreifen.
\nWenn das System dann irgendwann mal auf sdb läuft, kann auch die andere Platte ausgetauscht werden.<\/i><\/dd>\n
17.11.2006 14:32 Uhr<\/dt>\n
Ich schreibe an Hetzner:
\nDa ich auf meine letzte Mail keine Rückmeldung erhalten habe und der Server immer noch nicht zu erreichen ist, hier nochmal eine Mail für den Fall, dass tatsächlich Mails bei Ihnen verschwinden.
\nFast 6 Stunden sind nun seit dem ersten Reset-Auftrag vergangen…<\/i><\/dd>\n
17.11.2006 14:58 Uhr<\/dt>\n
Ich schreibe an Hetzner:
\nDa heute wohl wirklich nur jede dritte Mail ankommt, hier also noch einmal der Hinweis, dass der Server immer noch nicht erreichbar ist. Um 13:47 habe ich bereits dies hier geantwortet:
\n„Soweit ich weiß, nutze ich sdb nicht. Zumindest wusste ich bis gerade nicht, dass da zwei Platten drin sind…
\nSie können also sdb austauschen und irgendwann in den nächsten Tagen werde ich versuchen, das System auf sdb zum Laufen zu bekommen – wie gesagt, dass ist der DB-Server von Blogger.de, da kann ich schlecht mal daran rumdoktern, vor allem habe ich zu solchen Spielen eigentlich nur am WE Zeit und kann dann nicht auf ihren Support zurückgreifen.
\nWenn das System dann irgendwann mal auf sdb läuft, kann auch die andere Platte ausgetauscht werden.“<\/i><\/dd>\n
17.11.2006 15:31 Uhr<\/dt>\n
Ich schreibe an Hetzner:
\nZu ihrer Information: ich habe gerade noch einmal einen Reset in Auftrag gegeben, nachdem ich hier keine Rückmeldung erhalte, der Server immer noch nicht zu erreichen ist und im Robot-Interface das „Rest wird ausgeführt“ verschwunden war.
\nEinmal resetten reicht natürlich. Wäre aber nur schön, wenn ich nich noch einmal 7 Stunden darauf warten muss.<\/i><\/dd>\n
17.11.2006 16:07 Uhr<\/dt>\n
Von Hetzner erreicht mich folgende Mail:
\nWenn Sie wuenschen kann ich sdb morgen frueh austauschen und Sie koennen tagsueber die Kopie machen.
\nAm Problemlosesten ist es im Rescuesystem die Platten einfach mit Hilfe von dd zu spiegeln. In diesem Fall kann ich die Platten einfach gegeneinander austauschen, ohne das weitere Eingriffe am System noetig werden.
\nDas System ist uebrigends nach dem lezten Reset Problemlos neu gestartet.<\/i><\/dd>\n
17.11.2006 16:14 Uhr<\/dt>\n
Ich schreibe an Hetzner:
\nUm welche Uhrzeit morgen? Können Sie sich auch einloggen und die DB herunterfahren?
\nDen Server kann ich jedoch nicht pingen:
\n36 bytes from XXX.rz6.hetzner.de (XXX.XXX.XXX.XXX):
\nDestination Host Unreachable
\nVr HL TOS Len ID Flg off TTL Pro cks Src Dst
\n4 5 00 5400 060d 0 0000 39 01 415e XXX.XXX.XXX.XXX XXX.XXX.XXX.XXX<\/p>\n

<\/i><\/i>Per ssh komme ich somit auch nicht drauf…<\/i><\/dd>\n

17.11.2006 16:49 Uhr<\/dt>\n
Ich schreibe an Hetzner:
\nIch bin heute echt super ernüchtert worden. Keinen Hinweis darauf, ob alle meine Mails zwischendurch doch angekommen sind, oder nicht. Warum alles so lange dauert, vielleicht brennt bei Ihnen ja gerade wirklich was und die Sachen werden Schritt für Schritt abgearbeitet.
\nSo weiß ich nicht, ob meine Mail angekommen ist, dass der Server immer noch nicht läuft, was sehr, sehr enttäuschend ist, überschreiten wir doch gerade die achte Stunde, nach der ersten Bitte um einen Reset.
\nIn der Zeit hätte ich es ja sogar geschaft, zu ihnen ins Rechenzentrum zu fahren und selbst auf den Knopf zu drücken!
\nAlso bitte mehr Feedback! Ein paar tausend Blogger warten darauf, dass ihr Dienst wieder läuft!<\/i><\/dd>\n
17.11.2006 17:20 Uhr<\/dt>\n
Ich schreibe an Hetzner:
\nHallo? Jemand da? Kann sich mal bitte jemand meinen Server anschauen? Der wartet schon seit heute Morgen 8:42 Uhr darauf, resettet zu werden!<\/i><\/dd>\n
17.11.2006 17:36 Uhr<\/dt>\n
Ich eröffne ein weiteres Support-Tickt:
\nVielleicht mal auf diesem Weg. Denn seit heute morgen 8:42 Uhr warte ich darauf, dass obiger Server neu gestartet wird (siehe auch http:\/\/blogger.de).
\nEr ist immer noch nicht zu erreichen, die Antworten aus dem Support sind sporadisch und unvollständig. Die letzte Meldung von 16:07 Uhr war, dass der Server ohne Probleme neu gestartet wurde.
\nEr ist seitdem nicht einmal mehr anpingbar, was vorher noch ging. Nur der Rest war eingefroren.
\nEs sind nun also fast 9 Stunden rum und das Problem ist immer noch nicht gelöst. Mehrere tausend Blogger sind von ihrer Plattform abgeschnitten, falls ihnen zahlende Kunden nicht genügend Motivation sein sollten.<\/i><\/dd>\n
17.11.2006 17:53 Uhr<\/dt>\n
Von Hetzner erreicht mich folgende Mail:
\nIhr Server ist nach einem Reset wieder per SSH erreichbar!!<\/i><\/dd>\n
17.11.2006 gegen 18:30 Uhr<\/dt>\n
Nach einer weiteren kurzen Downtime, in der ich die Tabellen der Datenbank repariere, ist Blogger.de wieder online.<\/dd>\n
18.11.2006 23:53 Uhr<\/dt>\n
Axel<\/a> bemerkt, dass der DB-Server erneut steht und stellt die Fehlermeldung wieder um.<\/dd>\n
18.11.2006 13:25 Uhr<\/dt>\n
Ich eröffne bei Hetzner erneut ein Ticket für einen Hardware-Reset<\/dd>\n

To be continued…<\/b>
\nHinweis: Alle Tippfehler von mir und von Hetzner habe ich drin gelassen. Begrüßungs- und Schlußformulierungen habe ich herausgenommen. Die im Protokoll angegeben Zeiten sind korrekt, die aus meinen Mails nicht immer. Mir fehlte am Freitag die Zeit, um den Vorgang lückenlos zu protokollieren.<\/p>\n

Nachtrag 19.11.2006 16:17 Uhr:<\/b> Eine andere Sicht auf die Dinge im Forum von Hetzner<\/a>. Ich behaupte ja garnicht, dass Blogger.de 100% ausfallsicher ist. Ich wüsste, was dazu notwendig ist und kann es schlicht und einfach finanziell nicht stemmen. Also haben wir ein tägliches Backup aller Blogger.de Daten inklusive Datenbank. Dieses Backup liegt auf einem anderen Server, so dass wir ziemlich gut damit leben könnten, wenn ein Server ganz kaputt geht. Das ist alles kein Beinbruch, die Leute, die ihr Blog bei Blogger.de hosten wissen, dass sie dort kostenlos einen Service nutzen, der privat betrieben wird. Und entsprechend gnädig gehen sie mit Ausfällen um. Ich auch, solange kommuniziert wird, was los ist. Ich bin nicht sauer, weil der Fehler mit den Platten erst jetzt aufgefallen ist. Nein, ich bin froh, dass der Fehler überhaupt gefunden wurde, denn ich weiß, wie schwierig es sein kann, an einem defekten System die Ursache zu finden. Gerade wenn der Defekt nicht reproduzerbar auftritt. Nervig ist aber, wie mit dem Problem umgegangen wird. Ein „hier ist gerade Stress, wir schauen uns das so schnelll wie möglich an, weil wir lieber erst die Platte austauschen würden, als einen defekten Server online zu stellen“, wäre für mich vollkommen akzetabel gewesen (Der Grund ist rein hypotethischer Natur. Bis auf die hier protokollieren Mails ist nichts von Hetzner gekommen). Sowas kann ich auch den Bloggern mitteilen und alle sind froh, wenn sie zwei Tage später unbeschwert weiter bloggen können.<\/p>\n","protected":false},"excerpt":{"rendered":"

Der Beitrag ist inzwischen etwas unübersichtlich geworden. Hier geht es zum ursprünglichen Anfang. Nachtrag 20.11.2006 20:56 Uhr: Heute morgen, kurz nach dem offiziellen Supportbeginn bei Hetzner (7:30 Uhr), war der Blogger.de-Datenbankserver wieder erreichbar und eine Mail aus dem Ticketing-System lag … Weiterlesen →<\/span><\/a><\/p>\n","protected":false},"author":1,"featured_media":0,"comment_status":"open","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"footnotes":""},"categories":[2],"tags":[],"class_list":["post-783","post","type-post","status-publish","format-standard","hentry","category-augenblicke"],"_links":{"self":[{"href":"https:\/\/olbertz.de\/blog\/wp-json\/wp\/v2\/posts\/783","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/olbertz.de\/blog\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/olbertz.de\/blog\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/olbertz.de\/blog\/wp-json\/wp\/v2\/users\/1"}],"replies":[{"embeddable":true,"href":"https:\/\/olbertz.de\/blog\/wp-json\/wp\/v2\/comments?post=783"}],"version-history":[{"count":1,"href":"https:\/\/olbertz.de\/blog\/wp-json\/wp\/v2\/posts\/783\/revisions"}],"predecessor-version":[{"id":3185,"href":"https:\/\/olbertz.de\/blog\/wp-json\/wp\/v2\/posts\/783\/revisions\/3185"}],"wp:attachment":[{"href":"https:\/\/olbertz.de\/blog\/wp-json\/wp\/v2\/media?parent=783"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/olbertz.de\/blog\/wp-json\/wp\/v2\/categories?post=783"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/olbertz.de\/blog\/wp-json\/wp\/v2\/tags?post=783"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}