Есть такой плагин «Вебмастер SAPE» для лисички (фаерфокс).

Тулза полностью делает работу вместо вас — проверяет на проиндексированность страницы в Яндексе и Гугле — автоматом, и помечает зеленым и красным цветами ссылки. Также автоматически проверяет проиндексированность ссылки в Яндексе.

И это еще не все

Интерфейс оптимизатора

1. Проверка YAP, YAL, GC непосредственно в интерфейсе биржи
2. Возможность отображения актуального PageRank купленных страниц и ТИЦ сайтов не дожидаясь пересчета
3. Проверка на склейку ТИЦ и PageRank страниц с размещенными ссылками. (Клей PageRank определяется при проверке GC как дополнительная информация о результате)
4. Выборочный экспорт размещенных ссылок в текстовый файл (экспортируются отмеченные галочки ссылки)
5. Контроль URL купленных страниц и новых заявок

Интерфейс вебмастера

1. Проверка проиндексированности страниц сайта в Яндексе
2. Проверка актуального значения PageRank страниц сайта
3. Экспорт оптимизаторских ссылок в текстовый файл и форма быстрой расстановки галочек по списку URL на странице с размещенными ссылками
4. Проверка проиндексированности страниц, на которые ссылаются оптимизаторские ссылки в Яндексе
5. Возможность отображения значение ТИЦ оптимизаторских сайтов
6. Показ текущего курса доллара и валютный калькулятор на странице вывода средств
7. Контроль URL страниц перед модерацией площадки (отметка страниц с сессиями, профилями, страниц поиска и т.д.)
8. Быстрый отсев спам заявок с помощью набора соответствующих фильтров на странице с новыми заявками

Фильтры заявок

Быстрое выделение и отметка следующих типов заявок:

— С двумя одинаковыми словами подряд
— С тремя одинаковыми словами в тексте
— В которых присутствует две пары одинаковых слов
— Длиннее 50 символов
— Длиннее 75 символов
— Без русских букв
— Только из заглавных букв
— Которые начинаются не с буквы или цифры (точки в начале и т.д.)
— Сдвоенные, неразрывны пробелы, которые содержат и символы табуляции
— Любой другой предназначен для пользователя фильтр, заданный регулярным выражением

Для фильтров, использующих сравнение слов, можно использовать их нестрогое сравнения (когда слова отличаются в окончании).

Также есть возможность составить свой собственный набор часто используемых фильтров и повесить их последовательный вызов на одну кнопку.

Для всех видов проверок, занимающих продолжительное время, предусмотрена возможность задавать таймаут между запросами, всплывающие подсказки о начале / конце проверки и звуковые оповещения (по желанию).

Дополнительные кнопки позволяют снять отметки со всех заявок, открыть SAPE или форум и быстро переключать видимость панели.

Советую вам обратить свое внимание на данный плагин.

Еще в конце 2005 года на конференции в Чикаго по обсуждению стратегий поисковых систем был задан вопрос присутствующим представителям четырех крупнейших поисковых систем — Google, Yahoo!, MSN и Ask. «Возможно ли показывать роботам ПС ссылки, отличные от тех, которые видны пользователям, но которые удобнее для индексирования?». Представители всех поисковых систем ответили: «Без проблем», а Чарльз Мартин с Google поднялся с места и воскликнул: «Сделайте это, пожалуйста».

По первоначальным определением, клоакинг — это демонстрация роботам поисковых систем url-ссылок, отличных от тех, которые показываются посетителям. До тех пор, пока клоакинг касается лишь упрощения ссылок ради удобства роботов ПС, поисковые системы поощряют его. Речь идет об удалении из адресов идентификаторов пользователей и сессий, стоп-символов и других фрагментов, которые затрудняют переход робота.

В сети существуют сайты, которые показывают разным пользователям разные версии одного сайта. Это также является клоакинг, поскольку пользователь и поисковый робот видят разные варианты страницы (а часто и различные сайты вообще — об этом будет ниже .

Робот не может корректно обработать AJAX, Javascript, DHTML, которые присутствуют на сайте, поэтому содержание страницы от него скрывается.

«Преступной» разновидностью клоакингу поисковые системы считают намеренную демонстрацию одного смыслового наполнения сайта поисковому боту и совсем другое — пользователям. Например, Googlebot-у и не только ему, можно подавать насыщенную определенными ключевыми словами страницу, а вот простые пользователи увидят совсем другой вариант или даже другой сайт.

Как увидеть замаскированую от юзера страницу, которую проиндексировал робот?

Если маскировка контента базируется на параметре «user-agent», то проблема решается за минуту: надо просто самому притвориться ботом ВС 

Варианты просмотра сайта как робот ПС: 

1. Можно воспользоваться сервисом SEO-browser.com — поддерживаются боты Гугл, Яху и MSN. (Если бы еще для Yandexbot кто придумал такую тулзу — цены б ему не было)
2. Также можно эмулировать робота Google Bot, используя плагин User Agent Switcher для Mozilla Firefox. Для этого нужно выбрать в меню браузера пункт Tools, затем User Agent Switcher> Options> Options> Googlebot/2.1. Теперь вы можете видеть страницы в том виде, в котором их индексирует робот Google. Жаль, что в Опере такого нет

Иногда сервер определяет, какой вариант сайта следует показать пользователю, не по параметру user-agent, а по IP-адресу.

Зная адреса, с которых обычно заходят индексаторы поисковых систем, веб-мастер может сделать показ определенного содержимого страницы роботу, и совсем другого контента — юзеру. Но и в этом случае можно увидеть то, что предназначено только для поискового робота.

Здесь поможет переводчик сайтов Google Translate, а по сути — тот самый бот Google, только не для индексации, а для перевода. Если администратор сайта, используя клоакинг, не уточнил, какой материал следует показывать поисковому боту, а какой — боту-переводчику — пользователь утилиты Google Translate увидит скрытое от него содержание.

Не все виды клоакинга направлены на обман пользователей и поисковых систем. Есть трюки с показом различных вариантов страницы индекс-боту и пользователю (клоакерство как отдельная SEO-квалификация), полезное для поисковых систем упрощения синтаксиса ссылок, которое совсем не повредит позиционированию сайта.

Если у Вас вылетел сайт из индекса, то есть ни одной его страницы в индексе нет, не волнуйтесь и не рвите на голове волосы

Скорее всего, с сайтом все хорошо, это обычный глюк, который повторяется с некоторыми моими сайтами еженедельно.

Для начала просто добавьте сайт в панель добавления: http://webmaster.yandex.ru/ .

Примерно за неделю сайт должен снова появиться.

Если сайт долгое время не появляется — спросите у Платона. Думаю, многим известно о мифическом персонаже — Платоне Щукине.

Пишем ему плаксивое письмо: http://feedback.yandex.ru/ с описанием проблемы. Он непременно должен ответить.

Советую сначала добавить сайт в панель вебмастера, потому, что письмо все равно не ускорит процесс — Платон будет разбираться некоторое время.

Ускорение индексации в поисковых системах стало доступно для блоггеров.

Сервисы для пинг — это сервисы, которые информируют поисковые системы о том, что на вашем блоге появилась очередная публикация. В результате роботы поисковых систем быстрее узнают о том, что вы написали новую статью и заходят на ваш блог, чтобы ее проиндексировать.

Если у вас блог WordPress, зайдите в Настройки — Создание Службы оповещения (внизу) .

Вставляем http://ping.blogs.yandex.ru/RPC2 и будет вам счастье