Die Google-Suche und das Forum auf der .org

Andynium · 19. November 2014 07:08

Vielleicht habt ihr es auch schon festgestellt - das Forum auf der .org ist bei Google ausgelistet!

Einfach mal in der Google Suche "site:forum.cmsmadesimple.org" eingeben ... außer ein paar unwichtigen Seiten wird da nichts mehr gelistet.

Bislang ist die Ursache dafür noch nicht bekannt ...

rage_all · 19. November 2014 10:10

Kann ich Dir sagen... big_smile

Besorg Dir für Firefox "User Agent Switcher" von Chris Pederick.
Dann schau nochmal drauf: Keine Inhalte.

Das kommt also von PHPbb. SEO-Optimierung? sad

Andynium · 19. November 2014 10:34

Hmm, hat Google seinen Algorithmus schon wieder geändert?

Ansonsten indiziert Google doch alles, was nicht bei drei auf den Bäumen ist ...

rage_all · 19. November 2014 10:57

Naja, ist halt folgende Frage: Wenn der Server beim UserAgent "Googlebot" leere Seiten zurückgibt, darf Google annehmen, dass der Seitenbetreiber einfach nicht will, dass die Seiten im Index auftauchen.
Auch wenn Google mit einem anderen UserAgent-String auf die Seite schaut und feststellt, dass doch Inhalte da sind, werden sie die Inhalte eben aus dem Index werfen wie - was aus der Sicht von Google zu vermuten ist - vom Seitenbetreiber beabsichtigt.

Ich vermute mal, dass Google nebenbei noch "anonym" indexiert, bzw. mit den Ergebnissen vom Crawl querprüft. Häufig genug ist es z.B. so dass wenn Google vor einer mit Malware verseuchten Seite warnt, diese Seite mit Googlebot Agent keinerlei Schadsoftware liefert, mit z.B. Chrome aber direkt draufhaut mit "Flash Player muss aktualisiert werden - sofort herunterladen", usw., usw.

Aber in diesem Fall:
- Googlebot: Keine Inhalte
- Regular Agent: 58767 Threads

Meine Entscheidung als Suchmaschine die Inhalte zu listen oder nicht wäre damit gemacht... smile

NaN · 19. November 2014 13:59

Wie blöd.
Ich kann mir nicht vorstellen, dass das beabsichtigt ist.
Scheint fast so als wäre der Googlebot in eine Bot-Falle getappt devil

rage_all · 19. November 2014 14:10

Vielleicht wollten sie einfach den Traffic von den ganzen Bots reduzieren - kann ja ganz schön am Kontingent und der Performance nagen. Und mit dem Ausschluss von ein paar hundert diversen Bots haben sie den Googlebot aus Versehen auch gekillt...

Argh! Sie haben das Internet gelöscht! big_smile

Oder das Dev-Team wollte dass man zwangsläufig die interne Forensuche verwendet und nicht zufällig von außerhalb auf eine Lösung stößt, obwohl man eigentlich ein Forenuser eines "unbeliebten" Landes ist... hmm
Herausfinden werden wir es wohl nicht.

Beitrag geändert von rage_all (19. November 2014 14:10)

NaN · 19. November 2014 14:41

Dann verstehe ich aber nicht, wieso es nur den Google-Bot trifft.
Bing, Yahoo oder iXQuick machen da z.B. keine Probleme.
Klingt eher nach einem Fehler.

mike-r · 19. November 2014 15:12

NaN schrieb:

Dann verstehe ich aber nicht, wieso es nur den Google-Bot trifft.
Bing, Yahoo oder iXQuick machen da z.B. keine Probleme.

Gerade mit:

Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp)
msnbot/1.1 (+http://search.msn.com/msnbot.htm)
Edit: Mozilla/2.0 (compatible; Ask Jeeves/Teoma)
Edit: Mozilla/5.0 (compatible; Exabot/3.0; http://www.exabot.com/go/robot)

getestet -> Keine Inhalte
Edit:

Mozilla/5.0 (compatible; bingbot/2.0 http://www.bing.com/bingbot.htm)
Baiduspider ( http://www.baidu.com/search/spider.htm)

Geht

Beitrag geändert von mike-r (19. November 2014 15:18)

rage_all · 19. November 2014 15:55

Wenn ich im UserAgent hin- und her switche habe ich:

Ask jeeves - keine Inhalte
Baiduspider - normal
Bingbot - normal
Exabot - keine Inhalte
FAST-Crawler - keine Inhalte
Google AdsBot - keine Inhalte
Googebot 2.1 - keine Inhalte
Google Imagebot - keine Inhalte
(so wie auch Google Video Bot, News Bot, etc., etc.)
Google Web Preview - normal
MSN Bot - keine Inhalte
Yahoo Slurp - keine Inhalte

Für mich ist das beabsichtigt, oder jemand wollte eigentlich etwas anderes erreichen und hat sich verklickt. Wohl gibt es bei den Permissions vom phpBB noch diverse Einstellungsmöglichkeiten: http://www.phpbb-seo.com/en/google-foru … e9012.html...

NaN · 19. November 2014 15:57

Tatsache.
Hab auf die Schnelle nicht mit anderen User-Agents sondern nur über andere Suchmaschinen gesucht und festgestellt, dass Beiträge aus dem .org-Forum dort noch indiziert sind.
Aber das hat ja nichts zu sagen.
Ist also nur noch eine Frage der Zeit, bis die Einträge auch bei anderen Suchmaschinen verschwinden.
Also scheinbar doch Absicht.

Naja, wenn's scheen macht ...

Andynium · 19. November 2014 20:02

Nach meinem Empfinden ist genau das einer der Worst Cases - aber scheinbar wird das anderswo nicht so dramatisch gesehen. Zumindest hat sich vom Dev-Team bislang noch niemand dazu geäußert

http://forum.cmsmadesimple.org/viewtopi … 06#p317606

Man bedenke dabei, in welch kurzer Zeit Google von den Verlagen die Gratis-Lizenz für Snippets hatte, nachdem die nur noch die Überschriften verlinkt hatten. Das deutet auf dramatische Geschäftseinbußen hin. Und das dürfte die .org genau so treffen.

Wobei - eigentlich müsste ich mich da ja zurücklehnen können ... wird doch dadurch unser Forum besser gelistet devil .

owr_web · 22. November 2014 23:47

paranoia kann wos schiachs sein roll

Andynium · 22. November 2014 15:41

cyberman schrieb:

Das deutet auf dramatische Geschäftseinbußen hin. Und das dürfte die .org genau so treffen.

Beim Springer-Verlag soll es ein Einbruch von 40% gewesen sein ...

owr_web · 22. November 2014 17:22

Auch wenn man nicht ganz genau vergleichen kann - im großen und ganzen spiegelt sich das ganze beim Einbruch ja aber auch trotzdem auch für ein cms-System wieder.

Warum man sämtliche "wichtigen" Bots einfach aussperrt ist wohl nur einem verständlich. Dass andere Teammitglieder bis dato noch kein Wort darüber verloren haben lässt imho erahnen, dass das nicht ganz ungewollt war.

Andynium · 22. November 2014 20:57

owr_web schrieb:

Warum man sämtliche "wichtigen" Bots einfach aussperrt ist wohl nur einem verständlich.

Das ist ja das kurriose - Bing geht.

owr_web · 23. November 2014 20:23

Vielleicht wurde bing nur vergessen - wenn man wenigstens davon ausgehen könnte, dass der Gedanke wäre, dass Bing in US/CA einen weit höheren Marktanteil als in eu/de hätte - aber auch wenns mehr ist, hat doch Google die Nase weit vorne.
Vielleicht sinds dann doch die 19 bzw. 5,8 im Gegensatz zu 2,5 bzw. 2 % cool

http://www.luna-park.de/blog/9452-suchm … rika-2014/

Beitrag geändert von owr_web (23. November 2014 20:23)

Andynium · 23. November 2014 20:59

Hmm, ich weiß nicht - so richtig kann ich mich mit dem Gedanken, dass da Absicht dahinter steckt, nicht anfreunden ...

owr_web · 24. November 2014 20:02

Falls es nur ein Versehen war: Re-indizieren dauert bei Google (und sicher auch den anderen) eine Ewigkeit - man kann also wahrscheinlich frühestens in Wochen erahnen, ob dies nur ein Versehen war. Schon ein kleiner Fehler und Google wirft dich bei der Suche um Welten retour.

Anderseits, du hattest es ja schon gesagt:

cyberman schrieb:

Wobei - eigentlich müsste ich mich da ja zurücklehnen können ... wird doch dadurch unser Forum besser gelistet .

gib mal auf Google die beiden Suchworte "cmsmadesimple.org" und "forum" ein - gestern war die .de noch an zweiter Stelle - Betonung auf war big_smile

Andynium · 24. November 2014 20:34

In meiner Google Suche war sie gerade eben auf 5.

Aber egal, haben das Forum ja hier nicht eröffnet, um mit der .org in Wettstreit zu treten, sondern lediglich den Support in bekannter Weise und so fortzuführen, wie Open Source zu verstehen ist - quelloffen und damit eigentlich auch zwingend diskussionsoffen ...

owr_web · 24. November 2014 21:24

Da hat dann jeder was davon - bei mir wars schon auf Platz 1. womit eigentlich eine andere Grundsatzfrage nach oben kommt - wird in verschiedenen Ländern (ich such ja über .at) verschiedene Gewichtung auf gleiche Ergebnisse gegeben? - Aber das ist wieder ein anderes thema

NaN · 25. November 2014 09:40

wird in verschiedenen Ländern (ich such ja über .at) verschiedene Gewichtung auf gleiche Ergebnisse gegeben?

Sicher.
Google versucht bevorzugt die Dir geografisch am nächsten gelegenen Resultate zu liefern.
Dabei kommt es darauf an, aus welchem Netz bzw. über welche TLD Du suchst.

Wenn ich z.B. unter .at nach "Grand Hotel" suche, steht auf Platz 1 das Grand Hotel in Wien.
Unter .de kommt zuerst Wikipedia und dann das Hotel in Augsburg gefolgt von Heiligendamm.
Und wenn ich mit einem US-Proxy-Server über .com suche, erhalte ich auf Platz 1 das auf Mackinac Island.

Habe übrigens gerade mal über einen US-Proxy-Server über .com nach diversen CMSMS Problemen gesucht. Unter den ersten 10 Plätzen waren nockenfells und Gorans Blog big_smile
Ansonsten nur Bugreports oder feature requests über die dev. Domain der .org.

gib mal auf Google die beiden Suchworte "cmsmadesimple.org" und "forum"

Wenn ich das über einen US-Proxy mache, kommt das de-Forum erst auf Seite 5 (Platz 53).
Von Einträgen aus dem .org-Forum fehlt bis dahin aber jede Spur. (Außer der Startseite und den "Announcements", aber die helfen einem ja nicht weiter)

mike-r · 03. Dezember 2014 23:11

Offenbar ham sies endlich mitbekommen. Oder mitbekommen, dass es ne absurde Scheissidee war. Keine Ahnung, scheint jedenfalls behoben.
Klasse, dass man im Forum bzw. dem entsprechenden Thread weiterhin den Kopf in den Sand steckt und keine administrative Äusserung bringt.

Edit: Eine semioffizielle Meldung! Nach nur 14 Tagen; das ich das noch erleben darf.

Beitrag geändert von mike-r (03. Dezember 2014 00:38)

Andynium · 03. Dezember 2014 00:46

Naja, seien wir mal nicht so streng wink - Velden hat sich ja mittlerweile dazu geäußert

http://forum.cmsmadesimple.org/viewtopic.php?f=2&t=71790&p=317971#p317971 schrieb:

Some actions have been taken to fix the indexing by search engines.

Ist ja nix neues, dass es anderenorts Probleme mit der Kommunikation gibt ...

Forum für CMS/made simple

#1 19. November 2014 07:08

Die Google-Suche und das Forum auf der .org

#2 19. November 2014 10:10

Re: Die Google-Suche und das Forum auf der .org

#3 19. November 2014 10:34

Re: Die Google-Suche und das Forum auf der .org

#4 19. November 2014 10:57

Re: Die Google-Suche und das Forum auf der .org

#5 19. November 2014 13:59

Re: Die Google-Suche und das Forum auf der .org

#6 19. November 2014 14:10

Re: Die Google-Suche und das Forum auf der .org

#7 19. November 2014 14:41

Re: Die Google-Suche und das Forum auf der .org

#8 19. November 2014 15:12

Re: Die Google-Suche und das Forum auf der .org

#9 19. November 2014 15:55

Re: Die Google-Suche und das Forum auf der .org

#10 19. November 2014 15:57

Re: Die Google-Suche und das Forum auf der .org

#11 19. November 2014 20:02

Re: Die Google-Suche und das Forum auf der .org

#12 22. November 2014 23:47

Re: Die Google-Suche und das Forum auf der .org

#13 22. November 2014 15:41

Re: Die Google-Suche und das Forum auf der .org

#14 22. November 2014 17:22

Re: Die Google-Suche und das Forum auf der .org

#15 22. November 2014 20:57

Re: Die Google-Suche und das Forum auf der .org

#16 23. November 2014 20:23

Re: Die Google-Suche und das Forum auf der .org

#17 23. November 2014 20:59

Re: Die Google-Suche und das Forum auf der .org

#18 24. November 2014 20:02

Re: Die Google-Suche und das Forum auf der .org

#19 24. November 2014 20:34

Re: Die Google-Suche und das Forum auf der .org

#20 24. November 2014 21:24

Re: Die Google-Suche und das Forum auf der .org

#21 25. November 2014 09:40

Re: Die Google-Suche und das Forum auf der .org

#22 03. Dezember 2014 23:11

Re: Die Google-Suche und das Forum auf der .org

#23 03. Dezember 2014 00:46

Re: Die Google-Suche und das Forum auf der .org

Fußzeile des Forums