Informationen über Bloggsi
Crawler
bloggsi.com ist die neue Blogsuchmaschine für Deutschland. Ziel von Bloggsi ist, einen guten Überblick über die aktuellen Themen in den hiesigen Blogs zu geben und eine einfache Recherche zu ermöglichen.
Der Crawler ist bereits fleißig unterwegs und hört auf den
Namen Bloggsi. Wenn Sie meinen Crawler, was ich sehr bedauern würde,
ausschließen möchten, verwenden Sie bitte folgende Syntax in der
robots.txt-Datei:
User-Agent: Bloggsi
Disallow: /
Weitere Infos zur Verwendung der robots.txt-Konvention finden Sie
auf robotstxt.org und in der
Wikipedia.