Haupteingang

3692 readers

2 users here now

Die Standard-Community von feddit.de

In dieser Community geht es ausschließlich um alles rund um die Instanz!

Hast du Fragen? !fragfeddit@feddit.de

matrix chat: !feddit:tilde.fun

founded 3 years ago

MODERATORS

wintermute@feddit.de

favstarmafia@feddit.de

sexy_peach@feddit.de

Vorschlag: GPT-Crawler in robots.txt blocken (platform.openai.com)

submitted 1 year ago by the_third@feddit.de to c/main@feddit.de

10 comments fedilink hide all child comments

Moin. Was ich schrob: OpenAIs crawler berücksichtigt jetzt offenbar eine robots.txt. Gefühlt find ich es eine gute Idee, das Dingen von meinen Posts fernzuhalten. Meinungen?

you are viewing a single comment's thread
view the rest of the comments

[–] scorpionix@feddit.de 10 points 1 year ago

Was du im Internet veröffentlichst, ist genau das: veröffentlicht. Auch wenn es von OpenAI nicht indiziert wird, landet es bei diversen anderen Crawler, die einen Pfiff auf die robots.txt geben.

Daher bessere Lösung: Poste nichts online, was du nicht auch der Dame an der Supermarktkasse erzählen würdest.