MatthiasHuehr
Avatar MatthiasHuehr
Themenersteller
Programmierer
Content Halbgott (705 Beiträge)

Appspot blockieren

am 22.12.2011, 12:31 Uhr eröffnete MatthiasHuehr folgenden Thread
.htaccess    7530 mal gelesen    21 Antwort(en).

Ich habe es mit beiden Einträgen in der htaccess versucht, bisher ohne Erfolg

deny from 174.129.252.226

RewriteCond %{HTTP_USER_AGENT} ^.appspot.*$ [NC]

RewriteRule /* appspot.com [L,R]



Hat jemand eine Idee wie ich das hinbekommen kann? Danke.


MV-Trip - mein Reiseführer für Mecklenburg-Vorpommern
insideGREIFSWALD - mein Newsmagazin über Greifswald

joerg
Avatar joerg
Fachinformatiker Anwendungsentwicklung
Content Gott (1941 Beiträge)
am 22.12.2011, 13:16 Uhr schrieb joerg

Hallo Matthias

Wenn es um die Mirror Dienste gehen sollte.

<IfModule mod_rewrite.c>
RewriteEngine on
RewriteCond %{HTTP_USER_AGENT} ^AppEngine-Google
RewriteRule ^(.*)$ - [F]
</IfModule>

IP Adresse funktioniert nicht da die immer wechselt. Also entweder globaler rangehen und nur einen Bereich definieren, dann dürfte aber die Vorschau bei Google auch nicht mehr funktionieren, weil die wohl auch über appspot.com läuft.

Gruß
Jörg


Zufällige Umleitung zu der Startseite einer meiner Domains
Meine ungewöhnlichen Tools

der_booker
Foren Moderator
selbständig
(2762 Beiträge)
am 22.12.2011, 15:06 Uhr schrieb der_booker

@Jörg: In diesem Zusammenhang ist mir allerdings aufgefallen, dass der Google-Bot auch nicht mehr crawlen kann. Laut WMT war der Zugriff gesperrt. Das kostete mich in einem SEO-Contest wertvolle Plätze. Welche Erfahrungen machtest Du bzw. Ihr?


Heiko Jendreck
personal helpdesk
http://www.phw-jendreck.de
http://www.seo-labor.com

joerg
Avatar joerg
Fachinformatiker Anwendungsentwicklung
Content Gott (1941 Beiträge)
am 22.12.2011, 16:43 Uhr schrieb joerg

Hallo Heiko

Also ich fahre jetzt die htacess auf 4 Domains um die Mirror Seiten auszusperren.

Hübsch sind dann das es gleichzeitig wohl zu einem 500er und zu einem 403er bei diesen Abfragen kommt, wenn sie über die Spiegelseiten laufen.

Und bei einer Domain gebe ich mit PHP alternative Inhalte aus. Mit htaccess komme ich zu keiner richtigen Lösung das auf eine Seite mit alternativem Inhalt umzuleiten.

Aufallend war nur das die Links, die mir jetzt dadurch entgehen am Ende eh wieder meiner Seite zugerechnet werden. Andererseits warum sollte ich es zulassen das die Mirrorseiten unnötigen Traffic verursachen.

Also ich vermute mal das die Spiegelseiten sich bei einigen Seiten positiv bemerkbar gemacht haben während des Wettbewerbes. Zusätzliche Links und halt eben eine Sperrfunktion für die Seiten die sich gegen eine Spiegelseite nicht behaupten können.

Das wird aber auch mit Geschwindigkeit und sowas zusammenhängen.
Ist deine Seite im Grunde sehr langsam dürfte sich das dann wieder negativ bemerkbar machen.

Also ich habe definitv keine Meldung in den WMT das der Zugang gesperrt wäre.

Gruß
Jörg


Zufällige Umleitung zu der Startseite einer meiner Domains
Meine ungewöhnlichen Tools

MatthiasHuehr
Avatar MatthiasHuehr
Programmierer
Content Halbgott (705 Beiträge)
am 22.12.2011, 18:14 Uhr schrieb MatthiasHuehr

@Jörg: danke es funktioniert

@Heiko: ich habe eben auch in dem WMT den Aufruf wie durch Googlebot gemacht und es gab keine Fehlermeldung


MV-Trip - mein Reiseführer für Mecklenburg-Vorpommern
insideGREIFSWALD - mein Newsmagazin über Greifswald

der_booker
Foren Moderator
selbständig
(2762 Beiträge)
am 22.12.2011, 21:00 Uhr schrieb der_booker

Okay, dann muss ich nochmal nachschauen, wo der Fehler genau lag bzw. liegt. Auffallend negativ ist, dass die Seiten doppelt und dreifach im SuMa-Index stehen. Das ist allerdings auch das einzige Störverhalten. Ob sich die Links positiv bemerkbar machten, kann ich noch nicht sagen, ließe sich aber in einem Test nachvollziehen. Jörg, was hattest Du genau gemacht?


Heiko Jendreck
personal helpdesk
http://www.phw-jendreck.de
http://www.seo-labor.com

lwulfe
Avatar lwulfe
Consultant
Content Halbgott (743 Beiträge)
am 22.12.2011, 21:36 Uhr schrieb lwulfe

Hallo,

mal eine ganz naive Frage: was ist appspot und warum sperrt ihr das aus?

Grüße
Lutz


der_booker
Foren Moderator
selbständig
(2762 Beiträge)
am 22.12.2011, 21:52 Uhr schrieb der_booker

lwulfe schrieb:

mal eine ganz naive Frage: was ist appspot und warum sperrt ihr das aus?



@Lutz: schau Dir mal diesen Link an:
ddweb69.appspot.com/www.seitenreport.de/forum/beitraege/htaccess/appspot_blockieren.html
(Link = deaktiviert, einfach die komplette Zeile in einen Browser übertragen)

Die Seite wird dupliziert und wenn es dumm läuft, dann wird die AppSpot-Seite ebenfalls im SuMa-Index als eigenständiges Ergebnis dargestellt. Das finde ich persönlich nicht nett. Wenn Du nun einen weiteren AppSpot davor schaltest und noch einen und noch einen, dann ergibt sich daraus eine gigantische Schleife. Jörg leistet auf diesem Gebiet Pionierarbeit und beobachtet(analysiert) das Verhalten schon seit einigen Wochen.


Heiko Jendreck
personal helpdesk
http://www.phw-jendreck.de
http://www.seo-labor.com

joerg
Avatar joerg
Fachinformatiker Anwendungsentwicklung
Content Gott (1941 Beiträge)
am 22.12.2011, 22:21 Uhr schrieb joerg

Hallo

Also Pionierarbeit wäre zuviel gesagt. Es war halt während des Wettbewerbes ein Test ob man durch duplizierte Seiten negative Einflüsse entwickeln kann. Fazit wohl eher nur sehr bedingt und nicht steuerbar. Links werden nach einiger Zeit der richtigen Seite zugeordnet.
Und die doppelten Inhalte können unter bestimmten Umständen vor die Original Seite gelangen.

Schlimm daran ist das Google selbst solche Dienste auf dieser Domain bereitstellt.

Ich habe es halt eben etwas forciert.

Aber das scheinen auch andere still und heimlich gemacht zu haben.

www.onkelseoserbe-news.de/seo-contest-kein-ueberaschendes-ende-von-onkelseoserbe/



Zumindest taucht da ein Spiegeldienst auf den ich nie angesprochen hatte.

Und die Suchergebnisse werden nach einiger Zeit mit dem Zusatz Google App Engine versehen.

Warum die überhaupt in den Suchindex gelangen trotz 405 weiss ich nicht.

www.seitenreport.de/forum/beitraege/google/http_405_im_index.html



So jetzt dürfte es nur eine Frage der Zeit sein bis Google auch erkennt durch Beschwerden oder sonstigen Anhaltspunkten das alle Seiten dieser Spiegelseiten nicht in den Index gehören.

Was die Links anbetrifft ich denke schon das die sich positiv bemerkbar gemacht haben.
Das habe ich mit meiner Seite und mit einer von Matthias getestet.
Zumindest sind diese beiden Seiten danach gestiegen.

Das kann aber auch andere Gründe gehabt haben.

@Heiko

Was meinst du denn damit was ich genau gemacht habe?

Gruß
Jörg


Zufällige Umleitung zu der Startseite einer meiner Domains
Meine ungewöhnlichen Tools

romacron
JDev Xer
Content Gott (1224 Beiträge)
am 23.12.2011, 13:14 Uhr schrieb romacron

Ich kann mich noch an eine hitzige Diskussion über die Abwehr von diesen Mechanismen erinnern.
Ein .cgi Skript hatte damals alle möglichen Seiten gespiegelt.

Nun bietet google einen ähnlichen Dienst an.
Für mich stellt sich da ein rechtliche Frage.
Meine Domain mein Content?
Spiegelt jemand meine Seiten und gibt sie unerlaubt mit seinem Domainnamen aus,
stellt dies eine Rechtsverletzung dar?

Wie geht es weiter mit diesem Dienst?
Je mehr Leute darüber ihre Seiten Hosten bzw. Entwickeln um so mehr geht die Eigenständigkeit des Netzes sowie auch der persönliche Handlungsrahm flöten.

Schleichend werden Tickets und Schaffner für die Webseiten eingeführt.
Die Welt dreht sich auch ohne Google und das Netz ebenso.

Ruhig mal aussperren die Jungs.

Ob der DC nun einspielt oder nicht, die Frage ist meiner Meinung nach zweitrangig.
Für mich sieht es im Endeffekt nach
"Tante G hat\'s gegeben, sie wirds auch wieder nehmen" aus.

Der generische Nutzen von gespiegelten Seiten bleibt so lange lustig bis erkannt wird was es eigentlich bewirkt. Abhängigkeit die selbst verschuldet wurde.

Fazit: die Diskussion über SE-Results und Side-effects in Bezug auf Ab-Sports ist an sich falsch.

edit: rächtschreibunk


MatthiasHuehr
Avatar MatthiasHuehr
Programmierer
Content Halbgott (705 Beiträge)
am 25.12.2011, 12:22 Uhr schrieb MatthiasHuehr

romacron schrieb:

Spiegelt jemand meine Seiten und gibt sie unerlaubt mit seinem Domainnamen aus,
stellt dies eine Rechtsverletzung dar?



Deine Frage kann man eindeutig mit ja beantworten. Die gespiegelte Seite stellt eine Kopie eines urheberrechtlich geschützen Werkes dar.


MV-Trip - mein Reiseführer für Mecklenburg-Vorpommern
insideGREIFSWALD - mein Newsmagazin über Greifswald



« zurück zu: .htaccess

Das Seitenreport Forum hat aktuell 5276 Themen und 36111 Beiträge.
Insgesamt sind 48364 Mitglieder registriert.