Reaktionszeiten verbessern, Serverbelastung verringern: robots.txt

Mon, 23 Jan 2017 07:09:08 +0100 last edited: Mon, 23 Jan 2017 11:07:10 +0100

@Einer von Vielen
Bezogen auf deine Aussage Bitte leite nicht zu viele Besucher auf meinen Hub . Ich nehme mal an, dass den meisten Traffic nicht menschliche Besucher, sondern die Suchmaschinen verursachen, wenn mehrere Webseiten auf deinem Knoten indexiert werden.

Vlt. lässt sich die Serverbelastung verringern, wenn du eine https://digitalesparadies.de/robots.txt erstellst und dort passende Crawl-delay -Werte definierst?

@Deutschsprachige Nutzer+ #robotstxt #Reaktionszeit #Serverbelastung #Serverlast #Sichtbarkeit #Traffic

show all 6 comments

neue medienordnung plus

Mon, 23 Jan 2017 10:09:25 +0100

Frei nach https://the-federation.info/ sind da draussen aktuell über 300 Server bei denen sich der eigene Server synchronisieren kann, bzw. synchronisiert wird.

Die Dezentralität fordert so ihren Preis.

Tatsache ist, dass anhand eines vielversprechendes Konzepts, einer Vision entstandene Netzwerke, wie Diaspora, friendica oder http://www.yacy.de/ , um einige zu nennen, es nicht geschafft haben, breite Masse als Nutzer zu gewinnen.

Bei den beiden Projekten #YaCy und #Diaspora habe ich aus Entwicklerkreisen wahrgenommen, dass es ernstes Problem ist, eine Balance zwischen einer ausreichenden Suchreichweite und Performance herzustellen und zu halten.

Und es macht Sinn, im Hubzilla-Projekt dieses Balance-Problem ständig im Auge zu behalten. Sonst droht dem vielversprechenden Newcomer Hubzilla das Schicksal von YaCy und Diaspora - also zugänglich, handhabbar nur für fortgeschrittene Nutzer, die in der Lage sind die Hubzilla-Knoten einzurichten, zu warten und auf die jeweilgen Anforderungen zu justieren.

neue medienordnung plus

Mon, 23 Jan 2017 13:15:09 +0100 last edited: Mon, 23 Jan 2017 15:37:30 +0100

Zu diesem Thema gab es schon viele Diskussionen

Sind evtl. aus diesen Diskussionen auch HowTo's, Handlungsempfehlungen hervorgegangen?

Die Anwender ohne tiefgreifende IT-Kenntnisse, die einen Knoten betreiben, müssen dann sich doch mit sowas, wie Webstatistiken befassen, die Serverleistung, Serverlast zu beobachten, und in der Lage sein zumindest grob die Zusammenhänge zwischen der Serverlast und bestimmten Aktivitäten auf dem Server nachvollziehen zu können.

Die #Handlungsempfehlungen für häufige Konstellationen, Serverbelastung-Szenarien können dann Admin's mit Expertenkenntnissen entwickeln.

neue medienordnung plus

Mon, 23 Jan 2017 15:07:38 +0100 last edited: Mon, 23 Jan 2017 17:04:29 +0100

Gerade versuche ich selbst herauszufinden warum hubz.gacrux bis 4 Sekunden für eine Antwort braucht.

Anregung: Wenn es darum geht eine _Lösung_ zu finden, ohne dabei die Fehlerursache zu klären.

Wie wäre es beim gleichen Anbieter, im gleichen Tarif eine "frische" Hubzilla-Installation aufzusetzen und deinen Kanal dorthin zu importieren. Falls die Reaktionszeiten sich verbessern, dann hat man die Fehlerursache zumindest ein wenig eingegrenzt - am Provider liegt es nicht? Ob du dann den Aufwand/ das Risiko mit dem Kanal Export/ Import tatsächlich wagst, ist eine andere Baustelle :).

Ich mache immer wieder die Erfahrung:
1) Man kann vieles falsch machen
2) es viel Zeit kosten, die Fehlerursache zu suchen (wobei sicherlich nicht ausgeschlossen ist, dass man dabei lernt :)
3) es lohnt sich, den Blickwinkel zu wechseln und nach _Lösungen_ statt nach Fehlerursachen zu suchen.

neue medienordnung plus

Mon, 23 Jan 2017 15:22:38 +0100

Übrigens meine Hoffnung ist, dass - wenn mehr Nutzer zu Knoten-Betreibern werden - nach und nach ein Bewusstsein entsteht, dass die angeblich kostenlose Webanalytic-Leistungen bestimmter Anbieter nur deswegen möglich sind, dass man als Webspace-Nutzer u.a. ausreichend Rechen- und Stromleistung dem Webanalytic-Anbieter zur Verfügung stellt. Damit er die Webserver abgrasen kann.

Einer von Vielen

Mon, 23 Jan 2017 15:25:32 +0100

@Michael Meer Danke für Deine Erklärungen wie

Die Aufgabe des Pollers ist es Nachrichten jeglicher Art von den anderen Servern abzuholen und/oder welche abzugeben. Zusätzlich überprüft der Poller auch ob User oder Server schon lange nicht mehr online waren

Das muss man sich ab und zu in Erinnerung rufen.

@neue medienordnung plus Kann sein, dass durch Deine Anmeldung bei auf meinem Hub und die zusätzlichen Aktivitäten dadurch den "service temoporarily not available" verursacht haben, weil wahrscheinlich zu viel SQL-Anfragen gleichzeitig liefen. Interessant. So, und über Untersuchungen (wie von @Michael Meer ) kommt man dann zu neuen Erkenntnissen.

neue medienordnung plus

Mon, 23 Jan 2017 17:10:59 +0100

Wie häufig bei einem Meinungsaustausch - es kommt auf die Definition an "Was ist das Problem?" - und aus der Definition ergibt sich dann die Positionierung+Zielsetzung, die als Orientir dienen können bei der Bewertung "Habe ich mit einer Lösung oder mit einem Workaround zu tun?" :).