Решил перепроверить в принципе уже известные факты о том, как ведут себя Яндекс и Google при запрете страниц в robots.txt. Хотя на самом деле речь в основном пойдет про Google, потому что поведение Яндекса вполне просто и прямолинейно. Есть два варианта: 1) Страница, страницы или разделы уже существуют и проиндексированы, после чего они закрываются от [...]

Запись опубликована (не)?путевые заметки. Please leave any comments there.

Пересобрал PHP из портов под FreeBSD, перед этим проапдейтил сами порты. Для установки PHP-extensions потребовалось еще найти и обновить пару системых скриптов. И при чем здесь интернет-маркетинг? Отпускаю бороду и начинаю разнашивать толстый свитер.

Запись опубликована (не)?путевые заметки. Please leave any comments there.

19 сентября исполнилось 10 лет с момента моей регистрации на форуме Searchengines.Ru, что можно считать официальным началом работы в области поисковой оптимизации сайтов. Помнится в тот момент меня интересовали проблемы с индексацией одного сайта, а отвечал на мои вопросы Александр Садовский, тогда еще в Яндексе не работавший. Яндекс тогда не индексировал домены в com, а Гугл обновлялся один раз в месяц и называлось это Google Dance. Веселое было время!

За эти 10 лет на ниве SEO, интернет-маркетинга и рекламы я познакомился с огромным количеством интересных людей, которые направляли, помогали, содействовали, сотрудничали и сопереживали. За что всем им большущее спасибо!

Запись опубликована (не)?путевые заметки.Вы можете оставить комментарии здесь или тут

Что же нужно сделать для правильной склейки зеркал сайта в Яндексе? Последовательность действий по склейке зеркал будет зависеть от текущей ситуации с зеркалами, ее надо выяснить прежде всего и здесь нам поможет форма добавления нового сайта – http://webmaster.yandex.ua/addurl.xml. При добавлении сайта в форму делается автоматическая проверка на “зеркальность” и если сайт является не главным зеркалом, то будет указано главное: “Указанный вами сайт является неглавным зеркалом сайта notes.webartsolutions.com” (и правда является, сейчас переклеиваю).
Если зеркала никак пока не склеены, то это самый идеальный случай, нужно сделать следующие шаги:

1. Прописать директиву Host в robots.txt, где указать главное зеркало, после всех прочих директив в секции для Яндекса написать “Host: chernyshov.kiev.ua” без http, просто адрес. Лучше всего это сделать именно в отдельной секции Яндекса, потому что кроме Яндекса директиву Host никто не поддерживает.
2. Максимум ссылок ставить именно на главное зеркало, при возможности отредактировать существующие ссылки, чтобы тоже вели на главное зеркало.
3. Можно поставить 301-й редирект на главное зеркало, а можно этого не делать, смотря как индексируются зеркала и сколько посетителей ходит на них. При установке 301-го редиректа тот сайт, откуда стоит редирект, скорее всего выпадет из индекса.
4. Набраться терпения и ждать.

В случае Яндекса 301-м редиректом пользоваться следует осторожно, поскольку в случае неправильной склейки зеркал, когда главным зеркалом уже выбран неправильный адрес, 301-й редирект скорее навредит.
В помощи Яндекса по этому поводу имеется интересная фраза в разделе как склеить зеркала:

С помощью серверного редиректа со страниц старого домена на соответствующие им страницы нового. Этот способ рекомендуется использовать в том случае, если новый домен не является неглавным зеркалом.

На практике получается, что склеивать зеркала с помощью 301-го редиректа в Яндексе можно только в том случае, когда главным зеркалом должен стать новый адрес, еще не склеенный ни с чем. Я проверил, действительно работает: адреса site.ru и www.site.ru были зеркалами, а newsite.ru надо было сделать новым главным зеркалом. Host, редирект, полтора месяца ожидания и – вуаля!

Если же зеркала уже склеены, но склеены неправильно и их надо переклеить или свапнуть, то тут надо немного изменений и очень много… терпения:

1. Выключаем редирект, если он был.
2. Прописываем директиву Host в robots.txt, где указываем главное зеркало.
3. По возможности ставим новые ссылки на главное зеркало и меняем на старое.
4. Ждем

Ждать придется несколько месяцев так точно, поэтому склейку зеркал лучше не откладывать.

Запись опубликована (не)?путевые заметки.Вы можете оставить комментарии здесь или тут

15-го июня известный деятель Рунета Герман Клименко запустил новый сервис статистики Webomer.Ru. Сервис позволяет оценивать аудиторию сайтов без установленных на страницах сайта счетчиков и есть возможность отсортировать сайты по украинской аудитории. Теоретически В теории сервис меряет аудиторию гибридным методом – как со стороны сайтов с помощью счетчиков, так и со стороны пользователей с помощью тулбаров. [...]

Запись опубликована (не)?путевые заметки. Please leave any comments there.

Сборная поисковиков против сборной социальных сетей. По количеству визитов, а не аудитории.

Согласно данным сервиса Experian Hitwise в мае 2010 впервые на рынке Великобритании количество визитов пользователей в социальные сети и сервисы превысило количество визитов на сайты поисковых систем:

За год доля визитов на сайты социальных сетей увеличилась с 10% до 11,88%, , а доля визитов на сайты поисковых систем уменьшилась с 12% до 11,33%.

При этом самым посещаемым сайтом в Британии остается Google. Facebook генерирует 55% “социального” трафика, что втрое больше трафика Youtube. А Twitter, самый быстрорастущий сервис два последних года, вышел на 3 место среди социальных сетей, оставив позади бывших лидеров – Myspace и Bebo.

Что касается рекламы, тот же Facebook в марте текущего года сгенерировал 21 млрд. рекламных показов только жителям Великобритании, что составило 30% всех рекламных показов в этом месяце.

via

Запись опубликована (не)?путевые заметки.Вы можете оставить комментарии здесь или тут

Вернее не к ROI, а к измерению ROI (возврат инвестиций). Опрос западных маркетологов показал некоторую нестыковку маркетинговых метрик и невозможность в онлайн-рекламе эффективно применять классическую покупательскую воронку (Purchase funnel). Наиболее важными были названы такие параметры, как marketing cost, количество и средний объем заказов, показатели конверсии. При этом в онлайне измеряются чаще всего визиты, показы страниц, CTR.

Аналогичные проблемы наблюдаются в измерении активностей в мобильном, социальном и видео- каналах.

В целом 80% опрошенных говорят о необходимости измерять ROI и при этом только около 31% могут эффективно это делать.

Под катом таблица с результатами опроса о важности измерения разных параметров рекламы в онлайне:

Запись опубликована (не)?путевые заметки.Вы можете оставить комментарии здесь или тут

Динамику роста наиболее популярных социальных сетей с 2008 демонстрирует Нильсен. Снова таки по США.

Как видно из диаграммы, их Одноклассники – Classmates Online – показывают отрицательную динамику по сравнению с прошлым годом, как впрочем и LinkedIn с MySpace. Растут только Twitter и Facebook, причем Facebook по аудитории вырос почти вдвое по сравнению с прошлым годом и почти в 5 раз по сравнению с позапрошлым.

Кроме всего прочего время, проводимое пользователем в социальных сетях за последний год выросло с 3,5 до 6 часов в месяц:

Запись опубликована (не)?путевые заметки.Вы можете оставить комментарии здесь или тут

The Wall Street Journal описывает ситуацию с показами и доходами медийной рекламы на рынке США по сравнению с основными крупными конкурентами – Yahoo и Microsoft. Цифры взяты из данных Comscore, которые будут опубликованы на этой неделе.

По показам рекламы Facebook уже обогнала своих конкурентов – 176,3 млрд. баннеропоказов (16,2% от всех показов), при этом Yahoo отработала 131,6 млрд. баннеропоказов (без рекламной сети), а Майкрософт – 60,2 млрд. показов.

Однако по выручке Facebook еще есть куда расти – в 2009 году социальная сеть заработала немногим более 500 млн. долларов и по прогнозам заработает около 1 млрд. долларов в 2010, при этом Yahoo в 2009 получили 6,5 млрд. долларов, в основном за счет рекламы.

Nielsen по апрельским данным не отдает Facebook пальму первенства по показам – 20% всех баннеропоказов по сравнению с 34% у Yahoo (однако заметное расхождение данных по показам у Нильсена относительно Comscore!).

В топ-25 рекламодателей Facebook числятся такие рекламодатели как Verizon Communications Inc., Toyota Corp. and Ford Motor Corp.

В статье отмечается, что наблюдается рост затрат на медийную рекламу по мере возвращения в онлайн бюджетов и разработки новых методов оценки эффективности медийной рекламы. Количество баннеропоказов на рынке США выросло до 1,1 триллиона в первом квартале 2010 по сравнению с 944 млрд. показов в первом квартале 2009.

Запись опубликована (не)?путевые заметки.Вы можете оставить комментарии здесь или тут

Запись опубликована (не)?путевые заметки.Вы можете оставить комментарии здесь или тут

Минимум три года не отслеживал изменения в применении и директивах robots.txt. За это время и заметки в архиве блога о robots.txt и статья несколько устарели. Из справки Яндекса можно судить об изменениях: обрабатываются спецсимволы “*” и “?”, директива ограничения частоты запросов Crawl-Delay, впервые появившаяся у Yahoo в 2006-м году, как и Allow, а также незнакомая мне ранее Clean-param.

Насчет обработки спецсимволов для замены последовательностей и директивы Crawl-Delay – все вроде бы понятно, “звездочку” всегда использовали для замены последовательностей символов, ограничение частоты запросов, особенно для крупных сайтов тоже вещь полезная. А вот Allow и Clean-param вроде и понятны, но есть нюансы. В частности то, что в последовательности Allow/Disallow в рамках одной секции учитывается первая, если несколько директив могут применяться к определенному URL. Особенно пугает Allow: без ничего, запрещающая индексацию всего сайта (аналог Disallow: /). В случае Clean-Param хотелось бы понять, как обрабатываются ссылки на такие страницы и рассматриваются ли страницы как дубли?

А вообще интересно до чего дошел прогресс!