Haupteingang

3692 readers

2 users here now

Die Standard-Community von feddit.de

In dieser Community geht es ausschließlich um alles rund um die Instanz!

Hast du Fragen? !fragfeddit@feddit.de

matrix chat: !feddit:tilde.fun

founded 3 years ago

MODERATORS

wintermute@feddit.de

favstarmafia@feddit.de

sexy_peach@feddit.de

Vorschlag: GPT-Crawler in robots.txt blocken (platform.openai.com)

submitted 1 year ago by the_third@feddit.de to c/main@feddit.de

10 comments fedilink hide all child comments

Moin. Was ich schrob: OpenAIs crawler berücksichtigt jetzt offenbar eine robots.txt. Gefühlt find ich es eine gute Idee, das Dingen von meinen Posts fernzuhalten. Meinungen?

you are viewing a single comment's thread
view the rest of the comments

[–] the_third@feddit.de 7 points 1 year ago (1 children)

Über die Föderation können sie auch einfach einen eigenen Server aufsetzen und sich da alles komplett runterladen, so dass die Sperre vermutlich eh keine Sinn ergibt.

Point taken. Stimmt.

[–] ChrisOboe@feddit.de 3 points 1 year ago (1 children)

Das wäre doch völlig absurd.

Entweder sie sind anständig und honorieren die robots.txt (und setzten keine eigene Instanz auf nur um das zu umgehen)

Oder sie sind unanständig, honorieren die robots.txt nicht und müssen keine eigene Instanz aufsetzten um das zu umgehen.

So oder so wird sicher niemand eine eigene lemmy Instanz aufsetzen nur um daten zu Farmen.