Visit und Bot – Statistiken im Web

Der Zusammenhang zwischen Visit und Bot

Traue keiner Besucher Statistik einer Webseite. Warum stelle ich diese These auf? Immer wieder höre und lese ich Berichte und Besucherzahlen (Visits) von diversen Webseiten. Wer also seine Visits mit den Bot-Zugriffen veröffentlicht, der hat natürlich höhere Besucherzahlen als wenn man ein Tool benutzt bei dem man die Besucherzahlen ohne Bots ermitteln kann.

Jede Webseite nutzt ein anderes Statistik-Tool, ob nun Statify, WP Statistics, Matomo (ex Piwik) oder Google Analytics.

Problem beim Zählen der “Visits” auf einer Webseite ist, was gezählt wird. Wenn eine Webseite bereits längere Zeit genutzt wird, dann wird diese nicht nur von echten Besuchern aufgerufen sondern auch von diversen Bot. Unter einem Bot, englisch robot‚ Roboter, wird ein Computerprogramm verstanden, das weitgehend automatisch sich wiederholende Aufgaben abarbeitet, ohne dabei auf eine Interaktion mit einem menschlichen Benutzer angewiesen zu sein.

Liste der mir bekannten Bots

Auf meinen Webseiten konnte ich im Jahr 2018 folgende Bot als Besucher identifizieren:
007ac9, 5bot, A6Indexer, AbachoBOT, accoona, AcoiRobot, AddThis.com, ADmantX, AdsBotGoogle, advbot, AhrefsBot, aiHitBot, alexa, alphabot, AltaVista, AntivirusPro, anyevent, appie, Applebot, archive.org_bot, Ask Jeeves, ASPSeek, Baiduspider, Benjojo, BeetleBot, bidswitchbot, bingbot, bitlybot, Blekkobot, blexbot, bot, BrandONbot, bubing, Butterfly, cbot, clamantivirus, cliqzbot,clumboot, coccoc, crawler, CrocCrawler, crowsnest.tv, datagnionbo, dbot, dl2bot, dotbot, DomainStatsBot, downloadbot, duckduckgo, Dumbot, EasouSpider, eStyle, EveryoneSocialBot, Exabot, ezooms, facebook.com, facebookexternalhit, FAST, Feedfetcher-Google, FeedlyBot, feedzirra, finbot, findxbot, Firfly, FriendFeedBot, froogle, GDPR-Bot, GeonaBot, Gigabot, GigablastOpenSource, girafabot, gimme60bot, glbot, Googlebot, GroupHigh, IABot,
ia_archiver, IDBot, ImplisenseBot, InfoSeek, inktomi, IstellaBot, jetmon, Kraken, Leikibot, linkapediabot, linkdexbot, LinkpadBot, LinqiaMetadataDownloaderBot, LoadTimeBot, looksmart, ltx71, Lycos, Mail.RU_Bot, Me.dium,meanpathbot, mediabot, medialbot, Mediatoolkitbot, Mediapartners-Google, mindUpBot, MJ12bot, msnbot, MojeekBot, monobot, moreover, MRBOT, NationalDirectory, NerdyBot, Netcraf, SurveyAgent, niki-bot, nutch, Openbot, OrangeBot, OutclicksBot, owler, p4Bot, PaperLiBot, pageanalyzer, agesInventory, Pimonster, porkbun, pr-cy,proximic, pwbot, r4bot, rabaz, Rambler, RankingBot2, Rankivabot, revip, riddler, rogerbot, RSSIncludeBot, SafeDNSBot, Scooter, Scrubby, scrapy.org, SearchmetricsBot, sees.co, SeobilityBot, SemanticBot, SemrushBot, SeznamBot, sfFeedReader, shareaholic-bot, Sisabot, SiSch-BA-Bot, sistrix, SiteExplorer, Slackbot-LinkExpanding, Slurp, Socialradarbot, SocialSearch, Sogou web spider, Spade, spbot, SpiderLing, SpuhexBot, SputnikBot, sstbot, Superfeedr, SurveyBot, TechnoratiSnoop, TECNOSEEK, Teoma, trendictionbot, TweetmemeBot, Twiceler, Twitterbot, Twitturls, u2bot, uMBot-LN, uni5download, unrulymedia, UptimeRobot, URL_Spider_SQL,Vagabondo, vBSEO, WASALive-Bot, WebAlta Crawler, WebBug, WebFindBot, WebMasterAid, WeSEE,wonderbot, Wotbox, wsowner, wsr-agent, www.galaxy.com, x100botXoviBot, xzybot, yacybot, yandex, Yahoo, Yammybot, YoudaoBot your-search-bot, ZyBorg, ZemlyaCrawl, ZoominfoBot

Was wollten die Bots auf meinen Webseiten?

Die genannten Bot besuchten und besuchen meine Webseite in unregelmäßigen Abständen und speichern deren Inhalte. Was sie damit machen, ist mir unbekannt. Obwohl ich mit Facebook nichts zu tun habe, keinen Facebook-Button habe, greift Facebook ungeniert meine Inhalte ab.

Es sind nicht nur Suchmaschinen, die Inhalte sammeln, sondern viele Bot sammeln auch e-Mail-Adressen, um diese für Spam-Nachrichten zu verwenden. Also muss man seine e-Mail-Adressen auf der Webseite verschlüsseln. Dazu gibt es auch eine WP Plugin Email Address Encoder. Ärgerlich ist auch, dass diese Bot Ressourcen des Host-Servers nutzen, die eigentlich zum großen Teil nur darin bestehen fremde Daten abzugreifen.