Googles Parser für robots.txt nun als Open Source verfügbar
Suchmaschinen-Gigant will REP zum offiziellen Standard machenGoogle will, dass die Internet Engineering Task Force (IETF) das Robots Exclusion Protocol (REP) zum offiziellen Internet-Standard macht. Dafür wurde nun ein Antrag bei der Organisation eingebracht, die für die technische Weiterentwicklung des World Wide Webs zuständig ist. Das REP gibt die Regeln vor, wie sich Webcrawler verhalten sollen. Das ist ein Computerprogramm, welches das Web automatisch durchsucht und die Inhalte analysiert. Kurzum: Ein unverzichtbarer Dienst für Suchmaschinenanbieter.
Und Google als Marktführer nahm hier eine Vorreiterrolle ein. Sein REP galt mehr oder weniger als inoffizieller Standard, auf dessen Regeln sich die Giganten Google, Microsoft und Yahoo geeinigt haben. Damit REP nun auch offiziell Standard wird, hat Google den Parser für robots.txt offengelegt. Der Parser übersetzt die Erkenntnisse des REP, um sie weiterverarbeiten zu können. Er ist unter GitHub künftig als Open-Source-Software verfügbar. Dabei gibt’s auch eine Funktion, mit der andere Webmaster ihre Regeln prüfen können.
Mehr dazu findest Du auf derstandard.at
Kurze URL:
Das könnte Dich auch interessieren:
In der Beta-Version der App gibt es bereits die Möglichkeit, sich auch Anrufe anzeigen zu lassen, die auf WhatsApp getätigt wurden.
In Googles neuem Feature Drop für seine Pixel-Smartphones bekommt das Pixel 7 Circle to Search. Außerdem gibt es Neues für die Pixel Watch.
Ähnliche News:
Apple will Googles KI in iPhones integrieren
In ein paar Wochen soll Googles KI wieder Bilder von Menschen erstellen
Gemini Business: Googles KI gibt es jetzt auch für den Unternehmenseinsatz
Gemini: Googles KI-Assistent für Android lässt sich bereits in Europa nutzen
US-Jury erklärt Googles Play Store zum illegalen Monopol
Alphacode 2: Googles neues KI-Programmiertool schlägt häufig Entwickler
Feature Drop: Googles Pixel-Geräte bekommen viele neue Features und eine Prise Gemini
Googles KI sagt das Wetter genauer voraus als je zuvor
Googles experimentelle KI-Suchmaschine gibt es jetzt fast überall – nur nicht in Europa
Googles Adblocker-Sperre könnte in der EU illegal sein
In ein paar Wochen soll Googles KI wieder Bilder von Menschen erstellen
Gemini Business: Googles KI gibt es jetzt auch für den Unternehmenseinsatz
Gemini: Googles KI-Assistent für Android lässt sich bereits in Europa nutzen
US-Jury erklärt Googles Play Store zum illegalen Monopol
Alphacode 2: Googles neues KI-Programmiertool schlägt häufig Entwickler
Feature Drop: Googles Pixel-Geräte bekommen viele neue Features und eine Prise Gemini
Googles KI sagt das Wetter genauer voraus als je zuvor
Googles experimentelle KI-Suchmaschine gibt es jetzt fast überall – nur nicht in Europa
Googles Adblocker-Sperre könnte in der EU illegal sein
Weitere News:
Tschechien meldet Enthüllung von russischem Propaganda-Netzwerk in EU
E-Auto-Hersteller Fisker steht vor der Pleite
Elon Musk warnt Tesla-Mitarbeiter: "Wir werden am Fließband schlafen"
Spezialeinheit stürmt falsches Haus wegen gestohlener AirPods
Google Pixel 9 soll in 3 Größen auf den Markt kommen
Bürgerkriege und Sanktionen: Starlink-Terminals werden oft illegal genutzt
Schon in diesem Jahr kommt jedes vierte Elektroauto in Europa aus China
EuGH schmettert Amazon-Klage gegen EU-Regulierung ab
Google blockierte 5,5 Milliarden Werbeanzeigen mit "betrügerischen Absichten"
GameStop-Abschied aus Österreich fix
E-Auto-Hersteller Fisker steht vor der Pleite
Elon Musk warnt Tesla-Mitarbeiter: "Wir werden am Fließband schlafen"
Spezialeinheit stürmt falsches Haus wegen gestohlener AirPods
Google Pixel 9 soll in 3 Größen auf den Markt kommen
Bürgerkriege und Sanktionen: Starlink-Terminals werden oft illegal genutzt
Schon in diesem Jahr kommt jedes vierte Elektroauto in Europa aus China
EuGH schmettert Amazon-Klage gegen EU-Regulierung ab
Google blockierte 5,5 Milliarden Werbeanzeigen mit "betrügerischen Absichten"
GameStop-Abschied aus Österreich fix
Einen Kommentar schreiben
Kommentare
Bitte bleibe sachlich und fair in deinen Äußerungen. Sollte dein Kommentar nicht sofort erscheinen, ist er in der Warteschlange gelandet und wird meist zeitnah freigeschaltet.
(0)
Bitte bleibe sachlich und fair in deinen Äußerungen. Sollte dein Kommentar nicht sofort erscheinen, ist er in der Warteschlange gelandet und wird meist zeitnah freigeschaltet.
Kommentare:
Du hast bereits für diesen
Kommentar angestimmt...
;-)
© by Ress Design Group, 2001 - 2024