Wiki kaputt

[Mor Rioghain]

Seit gestern am Wiki gebastelt wurde, bekommen ich und einige andere die folgende Fehlermeldung:


Forbidden
You don't have permission to access this resource.
Apache/2.4.58 (Ubuntu) Server at fwwiki.de Port 443


Es scheint hauptsächlich das Handy zu betreffen.
______________
13:42:50  Legendäres Streitbier (Welt 7): spannend, mit handy komm ich net auf wiki, wird mir das gleiche angezeigt wie dir mor, am laptop geht alles

13:43:11  Mor Rioghain (Welt 1): danke!

13:43:56  Mor Rioghain (Welt 1): Laptop habe ich heute noch nicht getestez

13:44:22  Schmetterlingskind (Welt 1): Bei mir klappts am Handy auch nicht

13:44:50  Primo (Welt 13): komme unter ios (safari) chrome os (chrome) und windwos (firefox) rein

13:45:18  Primo (Welt 13): handy im selben wlan wie der laptop?

13:45:34  Legendäres Streitbier (Welt 7): bei mir ja

13:46:15  Primo (Welt 13): und wenn das handy im mobilen netz ist ?

[bwoebi]

Hmm, ist es jetzt besser?

Wir mussten leider blindlings Traffic auf das Wiki filtern, weil irgendwelche Scraper das Wiki schlicht überlastet hatten gestern.

[Mor Rioghain]

Danke, geht wieder.

[Air up there]

Bei mir funktioniert das Wiki auch nicht mehr.

[Galak]

Evtl. wäre es sinnvoll mal die https://fwwiki.de/robots.txt ein bisschen auszubauen. Zumindest gegen die halbwegs seriösen Bots hilft das auch ohne weitreichende IP-Sperrungen.

Ein crawl delay könnte solche Situationen schon etwas entspannen.

Code: Alles auswählen

Crawl-delay: 5

Es könnten statt 5 Sekunden natürlich auch 10 Sekunden oder Ähnliches sein.

Die weniger seriösen Bots/Crawler interessiert das natürlich nicht.

[kröpsi]

Bei mir funktioniert es (Firefox, MacOS) ebenfalls weiterhin nicht. Habe auch eine zusätzliche Anfrage über den Mod-Bereich erhalten bei der Person auch weiterhin die Fehlermeldung (ebenfalls MacOS) besteht.

[bwoebi]

Die weniger seriösen Bots/Crawler interessiert das natürlich nicht.

Genau, es sind ausschließlich unseriöse Bots mit randomisierten IPs und User-Agents.

@kröpsi: der Filter ist derzeit mal wieder deaktiviert. Hoffe es kracht nicht gleich wieder.

[Galak]

Die weniger seriösen Bots/Crawler interessiert das natürlich nicht.

Genau, es sind ausschließlich unseriöse Bots mit randomisierten IPs und User-Agents.

Für die unseriösen Bots wäre evtl. ein Filter mit Anubis vor dem Wiki möglich. Je nach Setting bemerken normale User das gar nicht und Bots werden gefiltert. Es ist eine Art lokale Alternative zu Cloudflare, gegen Angriffe mit extrem großem Volumen bringt das natürlich nichts, wenn das Netzwerk schon überlastet ist.