Gelöst: Microsoft Bing sperrt Suchergebnisse aus dem Astrotreff

Moin zusammen,

ja, es scheint, der Astrotreff wurde aus der Suchmaschine Bing (Microsoft) entfernt.

Irgendwelche „KI“-Algorithmen tun das bei vermutetem Hate-Speech oder vermeintlichen Copyrightverletzungen.

Ich schau mal, ob man da was machen kann …

lg matss

Moin.

Das ist wirklich interessant. Und nicht schön. Google listet den Astrotreff zuverlässig an erster Stelle, DuckDuckGo, Bing und Yahoo listen ihn überhaupt nicht. Stattdessen werden astrotreff-deep-sky.de und astrotreff-südkurve.de an prominenter Stelle gelistet. Wobei der astrotreff-deep-sky auch in Safari auf dem iPad als nicht privat und Sicherheitsrisiko eingestuft wird. Auch „astrotreff.de“ wird nicht gefunden.

Lustigerweise klappt es mit einer Bildersuche. Wenn man darauf wechselt, werden einem jede Menge verschiedenster Bilder gezeigt, die in unserem Forum gehostet werden.

Dass DuckDuckGo und Bing den Astrotreff vergessen haben, finde ich bedenklich. Wir reden von mehreren Suchmaschinen, die anscheinend den gleichen Suchalgoritmus nutzen, der unser Forum schlicht bei der Textsuche ignoriert und stattdessen zwei deutlich kleinere Foren vorzieht, von denen eines sogar unsicher ist.

Das ist echt Mist. Woran könnte das liegen?

Verwundert:

Marcus

EDIT: uups, matss war schneller.

Es wird wohl ausschliesslich an Bing liegen, Duckduckgo benutzt Bing zur Suche.

Und ich hab keine Ahnung, was die Ursache sein könnte.

Vllt eine übereifrige „KI“, der man dort blind vertraut?

lg matss

Startpage ist wahrscheinlich an Google gekoppelt. Da wird nichts verborgen.

<satire> Das kommt davon, wenn "Verschwörungstheorieen" diskutiert werden, da springen manche KI-Algoritmen gleich drauf an.... </satire>

Wäre wirklich kritisch, wenn das keine Satire sein sollte, sondern Bing wirklich auf unsere Verschwörungstheoretiker und Klimawandel-Leugner anspringt.

Seltsam &Kurios wird von Google ja nicht indiziert. Gilt das auch für Bing?

Bis dann:

Marcus

Ja, aus genau diesem Grund muss man für die OT-Bereiche eingeloggt sein.

Keine Suchmaschine sollte die OT-Foren indizieren können.

lg matss

Servus,

ich bin nicht ein so Computerfreak, aber es ist nicht nur bei DuckDuckGo sonder auch bei

der Suchmaschine Ecosia, die ich auch ausprobiert habe, genauso. Beide benutzen Bing

Ich seh das bei den Cookies im CCleaner. Da ist dann immer Bing dabei, obwohl von mir nicht

angeklickt.

Geb schon seit gut einem halben Jahr im Suchfeld auf der Firefoxseite einfach Astrotreff.de

+Enter ein, es funktioniert tadellos und es ist so eigentlich noch bequemer.

Grüße Marwin

Hallo,

Zitat von Spica 44

Geb schon seit gut einem halben Jahr im Suchfeld auf der Firefoxseite einfach Astrotreff.de

+Enter ein, es funktioniert tadellos und es ist so eigentlich noch bequemer.

das liegt aber eher daran, dass die Adresse mehr oder weniger vollständig eingegeben wurde, oder sich der Firefox entsprechend den Einstellungen die zuletzt aufgerufene Seiten "gemerkt hat".

Um in diesem Feld eine reine Suche zu starten, müsste man "Astrotreff" ohne weitere Angaben (wie ".de") eintragen. Eventuell muss noch der automatisch vervollständigte Text gelöscht werden. Erst dann wird je nach Einstellung eine direkte Suche, über die auch hier jeweile Einstellung (über die Suchmaschine) gestartet.

Gruß Gerrit

Hallo,

Zitat von Spica 44

Geb schon seit gut einem halben Jahr im Suchfeld auf der Firefoxseite einfach Astrotreff.de

Das ist eine vollständige Webadresse und hat erst mal nichts mit einer Websuche zu tun.

In der Systemdatei .htaccess wird geregelt, ob eine Webseite als https://beispiel.de/ oder beispiel.de aufgerufen wird. In der .htaccess wird dazu eine 301 Weiterleitung gesetzt um einem "Duplicate Content" zu vermeiden.

Wenn im Suchfeld nur astrotreff eingegeben wird, wird der Astrotreff in der Tat nicht aufgelistet.

viele Grüße

Gerd

Zitat von CorCaroli

Wenn im Suchfeld nur astrotreff eingegeben wird, wird der Astrotreff in der Tat nicht aufgelistet.

Na, im Firefox über Google aber schon. Bei mir zumindest.

Die Suchmaschine kann man im Firefox einstellen, aber das dürfte ja allgemein bekannt sein.

Über Bing oder Duckduck nicht.

Gruß Gerrit

Hallo,

Zitat von Jickledy

Na, im Firefox über Google aber schon. Bei mir zumindest.

Das ist in der Form auch hier schon geschrieben geworden:

Zitat von Mettling

Google listet den Astrotreff zuverlässig an erster Stelle

Es geht hier aber um die Probleme mit "Bing" basierten Suchmaschinen. In denen wird der Astrotreff nicht gelistet.

Jetzt wäre es schon interessant wieso das so ist. Liegt es an manchen Themen, das der Astrotreff nicht gelistet wird, einer Einstellung in einer Systemdatei? Eventuell wird ein Suchroboter ausgesperrt, vielleicht durch einem (fehlerhaften) Eintrag in der robots.txt.

Viele Grüße

Gerd

Hallo Gerd,

ich denke so ist es. Astrotreff.de in die Suchzeile bei Firefox (oder ähnlich) plus Enter und

"Schwubbs" da ist er auf dem Bildschirm, der Astrotreff.

Bei Google als Startseite gewählt genügt bereits ein einfaches a, weiter kommt man nicht

weil die Seite zum anklicken schon schon da steht. Aber ich brauch halt Google dazu.

und bei der "Tante" kommt man sich schon mal verfolgt und kontrolliert vor.

Grüße Marwin

Hallo zusammen,

Zitat von CorCaroli

Jetzt wäre es schon interessant wieso das so ist. Liegt es an manchen Themen, das der Astrotreff nicht gelistet wird, einer Einstellung in einer Systemdatei? Eventuell wird ein Suchroboter ausgesperrt, vielleicht durch einem (fehlerhaften) Eintrag in der robots.txt.

alle mehr oder wenig bekannten Suchmaschinen dürfen hier die öffentlichen Bereiche lesen - und sie tun das auch.

Hier ein Status von vor 1-2 min:

Und Bing ist auch dabei ...

lg matss

Zitat von CorCaroli

Hallo,

Das ist in der Form auch hier schon geschrieben geworden:

Ich weiß.

Aber da Du den Beitrag über den Firefox zitiert, und geschrieben hast dass es nicht funktioniert, habe ich Dir widersprochen, weil es für mich in dieser Form um den Firefox ging - welcher ja richtig anzeigt.

Ich hatte nur auf die Nachricht von Marwin /Spica geantwortet, was Du ja auch gemacht hast.

Sollen wir nicht auf Beiträge antworten, welche nicht unbedingt zum Thema gehören? Dann hättest Du aber auch nicht schreiben sollen. Das verwirrt mich jetzt etwas.

Gruß Gerrit

Moin,

da könnte schon Problem #1 liegen. Es gibt keine robots.txt … es kommt der Error Code 404 mit entsprechender Weiterleitung.

Das wäre aber noch das kleinere Übel, sollte aber mal behoben werden. Die Trolle, mit ihren Verschwörungstheorien und die Tatsache diese nicht zu ignorieren, sondern massenweise zu kommentieren, bevor der Beitrag verschoben werden kann, könnte einer der Gründe für das Phänomen sein.

CS & VG

Stefan

Ne, so ein Algorithmus liest nicht dämlichen Inhalt.

Da wird schon eher geguggt, ob nach Anklicken des Astrotreff genügend Clicks beim Bezahlkunden eingehen ... So wird Geld draus.

Wenn Bing den Astrotreff für unspannend oder nicht lohnend halten würde, verschwändet er aber nicht sondern würde in den Ergebnissen nach unten rutschen. Aber selbst nach einer gezielten Suche nach der Webadresse „http://www.astrotreff.de“ wird das Forum von Bing nicht aufgelistet. Entweder Bing hat vergessen, dass es uns gibt oder wir sind gezielt blockiert worden.

Und da Bing das Forum noch durchsucht, kennt es uns noch. Also bleibt nur eine Sperre. warum auch immer.

Ich habe mal in den Logs geschaut, wie alt das Problem ist:

Oktober 2021:

Oktober 2022:

Aktueller Monat - November 2022:

Für mich sieht das nach einem erst seit sehr kurzer Zeit auftretenden Problem aus. Zugriffe via Bing waren diesen Monat sogar höher, als normalerweise ...

Na, wir werden bald wissen, woran es liegt ...

lg matss

Hallo zusammen,

es fehlt nicht nur die robots.txt, sondern auch die Datei sitemap.xml auf dem Server. Beide werden von den Suchmaschinen gelesen und ausgewertet. Normalerweise sollten die beiden Dateien durch eure Foren-Software erstellt werden. Falls ihr Backups habt, könnt ihr ja mal schauen, seit wann die weg sind und nachvollziehen warum.

Des Weiteren gibt es für Google die Search-Console. Dafür muss eine Datei "google<random>.html" im Server-root abgelegt werden und ihr könnt nachschauen, womit Google Probleme bei astrotreff.de hat. Für Bing gibt es equivalent Webmaster-Tools, das kenne ich aber nicht. Hier noch ein Beispiel für eine robots.txt:

Sitemap: https://astrotreff.de/sitemap.xml

User-Agent: *
Disallow: /bitte/nicht/indexieren

Wenn die sitemap.xml in der robots.txt steht, muss sie natürlich auch da sein.

Gruß

Jörg

Zitat von Mettling

Und da Bing das Forum noch durchsucht, kennt es uns noch. Also bleibt nur eine Sperre. warum auch immer.

Erstaunt mich auch.

Aber doch noch soviel dazu. Mit einer Google Email-Adresse, wie ich sie hier hatte, gab es keine Benachrichtigungen zu neuen Beiträge in "verfolgten" Threads: link . Sowas hatte ich noch in keinem Forum (mit gmail Adressen), und ich war schon in manchen. Matss hat sich dazu geäussert zwar, so ganz überzeugend fand ich es aber nicht. Wenn eine domain wie astrotreff.de derart unter "Beschuss" ist, dass sie auf der Paria-Liste landet, steht es vielleicht doch eher in Zusammenhang mit eben der Domain, was der 0815 User hier nicht beurteilen kann, und weniger mit der "Bösartigkeit" dieser Konzerne. Und dass jene Konzerne sowas wie Filter hätten, die nach "Unseriösität" von Beiträgen und dergleichen selektiveren würde, wäre mir auch neu, angesichts des sonstigen Mülls, der dort "durchschlüpft".

Gruss

Hi Jörg,

eine robots.txt ist nicht zwingend, bisher gab es da nie Probleme,

Die Sitemap.xml existiert seit 03/2021 (neue Forensoftware) und ist zB Google auch bekannt.

Aber extra für Bing hab ich eben ne robots.txt in die Webserer-Root gelegt und auch gleich angegeben, wo die Sitemap.xml liegt.

maguggn ...

.

Zitat von Mettling

Und da Bing das Forum noch durchsucht, kennt es uns noch. Also bleibt nur eine Sperre. warum auch immer.

Das scheint mir auch am wahrscheinlichsten.

Es ist kein techn. Problem.

lg matss