• De community van 'PiepComp Support - dat andere PC-Hulpforum' staat voor u klaar, om hulp bij computerproblemen te geven,
    zoals traagheid, malware, BlueScreensOfDeath, netwerkproblemen, crashes, updateproblemen en nog veel meer!

Vreemde zaak dat het forum voor een korte periode er uit lag

Abraham54

Administrator
Lid geworden
2 aug 2016
Berichten
12.761
Reaction score
1.727
Punten
113
Leeftijd
65
Een kleine tien minuten was dit forum onbereikbaar en ik heb geen flauw idee wat er aan de hand was.
Via de server heb ik het weberrorlog geraadpleegt - maar ook daar geen redenen gevonden.

En ook op https://status.antagonist.nl/ is het stil.

Ergo, een groot raadsel.
 

Abraham54

Administrator
Lid geworden
2 aug 2016
Berichten
12.761
Reaction score
1.727
Punten
113
Leeftijd
65
Ik heb ondertussen mijn bevindingen per e-mail aan Antagonist verstuurd en nu ineens is de site weer vrijwel normaal.
 

Rubensky

Moderator
Ondersteuning
Lid geworden
4 aug 2016
Berichten
2.131
Reaction score
138
Punten
63
Heb het ook gemerkt en had je daar al van op de hoogte gebracht. Vreemd; Maar geen verdere actie vereist lijkt mij.
 

Abraham54

Administrator
Lid geworden
2 aug 2016
Berichten
12.761
Reaction score
1.727
Punten
113
Leeftijd
65
Ik ben dan ook heel benieuwd naar wat ik van Antagonist ga horen.
Want mij is het nog steeds volkomen onduidelijk waarom dit gebeurde.
 

Abraham54

Administrator
Lid geworden
2 aug 2016
Berichten
12.761
Reaction score
1.727
Punten
113
Leeftijd
65
Mogelijk heeft de crawlbot genaamd SemrushBot bij de analyse van alles wat in "What's new" staat deze site in de knieën gekregen!
 

Abraham54

Administrator
Lid geworden
2 aug 2016
Berichten
12.761
Reaction score
1.727
Punten
113
Leeftijd
65
Op de server nu een robots.txt gezet om die SemrushBotcrawlers te weren van de server.
 

Rubensky

Moderator
Ondersteuning
Lid geworden
4 aug 2016
Berichten
2.131
Reaction score
138
Punten
63
Wat richt dit txt bestand uit dan?
 

Abraham54

Administrator
Lid geworden
2 aug 2016
Berichten
12.761
Reaction score
1.727
Punten
113
Leeftijd
65
Met een robots.txt in de root van de server kan je specifiek toegang voor een bot verbieden, of gedeeltelijk verbieden.
Dat zijn dus al een aantal mogelijkheden, maar er zijn er meer.
 

Abraham54

Administrator
Lid geworden
2 aug 2016
Berichten
12.761
Reaction score
1.727
Punten
113
Leeftijd
65
Martijn van Antagonist schreef dat het uitschakelen van die SemrushBotcrawlers mogelijk ook tot tempowinst leidt.
En inderdaad, dat is het geval - wat een vieze krengen!
 

Rubensky

Moderator
Ondersteuning
Lid geworden
4 aug 2016
Berichten
2.131
Reaction score
138
Punten
63
Dit forum heeft een prima tempo alhoewel ik niets merk van al die winsten die jij steeds boekt. En ik vermoed de gemiddelde gebruiker ook niet.
 

Abraham54

Administrator
Lid geworden
2 aug 2016
Berichten
12.761
Reaction score
1.727
Punten
113
Leeftijd
65
De laadtijd is verlaagd geworden en dat is ook winstpunt.
 

Black Tiger

Enthousiast
Lid geworden
6 aug 2018
Berichten
2.252
Reaction score
337
Punten
83
Website
www.satellitefun.org
Mogelijk heeft de crawlbot genaamd SemrushBot
Daar kun je van uit gaan.
Wat nog erger is, is dat Semrush zelf zegt dat ze niet zoveel doen en dat ze ook goed luisteren naar robots.txt maar dat is niet altijd het geval.
Ik heb op een gegeven moment via .htaccess de complete ip range van Semrush geblokkeerd en daarna is het naar enige tijd rustig geworden.
Semrush is echt een vies botje die voor overload kan zorgen.
 
Bovenaan Onderaan