ivday.ru 
ivday.ru - портал г. Иваново Новости, афиша, автомобили, работа и недвижимость на ИвДэй.ру
Новости
HTTP/1.1 200 OK
Server: nginx
Date: Sat, 28 Jan 2012 03:52:14 GMT
Content-Type: text/html; charset=utf-8
Connection: keep-alive
X-Powered-By: PHP/5.2.17
Set-Cookie: SESS2187af79382b124901d62da2b7135207=gjrrfe1r9m6d4rfnahjn31eqb4; expires=Mon, 20-Feb-2012 07:25:28 GMT; path=/; domain=.ivday.ru
Expires: Sun, 19 Nov 1978 05:00:00 GMT
Last-Modified: Sat, 28 Jan 2012 03:52:08 GMT
Cache-Control: store, no-cache, must-revalidate
Cache-Control: post-check=0, pre-check=0
195.248.234.190
# $Id: robots.txt,v 1.9.2.1 2008/12/10 20:12:19 goba Exp $
#
# robots.txt
#
# This file is to prevent the crawling and indexing of certain parts
# of your site by web crawlers and spiders run by sites like Yahoo!
# and Google. By telling these "robots" where not to go on your site,
# you save bandwidth and server resources.
#
# This file will be ignored unless it is at the root of your host:
# Used: http://example.com/robots.txt
# Ignored: http://example.com/site/robots.txt
#
# For more information about the robots.txt standard, see:
# http://www.robotstxt.org/wc/robots.html
#
# For syntax checking, see:
# http://www.sxw.org.uk/computing/robots/check.html
User-agent: *
Crawl-delay: 10
# Directories
Disallow: /includes/
Disallow: /misc/
Disallow: /modules/
Disallow: /profiles/
Disallow: /scripts/
Disallow: /sites/all
Disallow: /sites/default/default.settings.php
Disallow: /sites/default/settings.php
Disallow: /sites/default/test.php
Disallow: /themes/
# Files
Disallow: /CHANGELOG.txt
Disallow: /cron.php
Disallow: /INSTALL.mysql.txt
Disallow: /INSTALL.pgsql.txt
Disallow: /install.php
Disallow: /INSTALL.txt
Disallow: /LICENSE.txt
Disallow: /MAINTAINERS.txt
Disallow: /update.php
Disallow: /UPGRADE.txt
Disallow: /xmlrpc.php
# Paths (clean URLs)
Disallow: /admin/
Disallow: /comment/reply/
Disallow: /contact/
Disallow: /logout/
Disallow: /node/add/
Disallow: /search/
Disallow: /user/register/
Disallow: /user/password/
Disallow: /user/login/
# Paths (no clean URLs)
Disallow: /?q=admin/
Disallow: /?q=comment/reply/
Disallow: /?q=contact/
Disallow: /?q=logout/
Disallow: /?q=node/add/
Disallow: /?q=search/
Disallow: /?q=user/password/
Disallow: /?q=user/register/
Disallow: /?q=user/login/
по Менеджер по Менеджер Иваново Специалист отдела на менеджер Инженер промышленность Специалист по Начальник отдела Новости → Главный Январь → Новости по внедрению Консультант по дело Оператор право Консультант по внедрению call center Инженер по оборудование ПО производство для → Город Новости → Город Начальник служба Работа работа услуги для женщин по закупкам по логистике Эксплуатация зданий Директор по Главный инженер баз данных Бухгалтерский учет Бытовая техника чем встречать Системный администратор физических лиц начальника отдела Заместитель начальника
Country: UKRAINE (UA)
City: (Unknown city)
IP: 195.248.234.190
199765 Bytes
2012-01-28 03:44:52