Кто стучится в дверь ко мне?

Юрий Коберский

Что такое лог-файл

Не забудьте о сookies

Немного о поисковых роботах

Что такое файл robots.txt

Рейтинг Web-сайта

Заключение

Сюрприз от Яndex

Одним из важнейших достоинств электронного маркетинга является возможность моментально получать результат и обратную связь от всех видов онлайновой деятельности. Это, конечно же, требует отслеживания статистики посещений.

тобы понять, насколько важна статистическая информация о посещениях вашего Web-сайта, представьте себе следующую ситуацию: вы сидите в кабине самолета и видите, что пилот пользуется только одним прибором. Вы спрашиваете его:

— Что измеряет этот прибор?

— Высоту.

— А как же остальные приборы?

— Во время этого перелета мы не будем их использовать. Я концентрирую свое внимание только на показателях высоты.

— А скорость ветра?

— Я уже использовал этот прибор в прошлый раз, а сегодня хочу попробовать что-то другое.

— А компас?

— Не сегодня.

— А индикатор горючего?

— Обойдемся!

Информация о том, кто, когда и как посещает ваши Web-страницы, необходима вам так же, как разные приборы нужны пилоту самолета, чтобы безопасно долететь до места назначения. Не просматривать статистику посещений своего Web-сайта — это все равно что водить машину с закрытыми глазами или никогда не проверять свой банковский счет и не знать, сколько на нем денег.

Продаете ли вы продукты и услуги, предлагаете ли посетителям сайта подписаться на рассылку или хотите, чтобы они скачали демо-версию вашей программы, — во всех этих случаях вам нужен разрекламированный и оптимизированный, или, другими словами, раскрученный, Web-сайт.

Очень важную роль в продвижении сайта играют его дизайн и нюансы архитектуры: удобство, навигация, содержание и т.д. Но ключ к успеху сайта лежит в Web-оптимизации (SEO, тонкая настройка Web-сайта, позволяющая ресурсу получить высокие позиции в результатах поиска поисковых машин по определенным ключевым словам) и в постоянном анализе того, насколько хорошо ваш сайт убеждает посетителей совершить то или иное нужное вам действие. Как же можно проанализировать все эти факторы?

Ваш Web-сайт содержит уникальную информацию, о которой вы можете и не догадываться, — статистику посещений сайта, записанную в лог-файлах. Если вы научитесь расшифровывать ее, то сможете использовать эту информацию для увеличения трафика, а следовательно, и для повышения продаж.

С помощью лог-файлов можно отследить эффективность своих действий и точно определить, какие из них работают, а какие нет. Вооружившись этими знаниями, вы сможете сделать необходимые изменения и усовершенствования, а затем продолжить отслеживание и снова повторить процесс, чтобы добиться максимальной отдачи от усилий, направленных на продвижение Web-сайта.

Хотите научиться быстро и точно определять эффективность каждого из мероприятий по раскрутке вашего сайта? В этой статье мы попытаемся помочь вам в этом.

Что такое лог-файл

ог-файл (или просто лог) — это главный источник информации о поведении посетителя на вашем Web-сайте. Когда кто-то заходит на сайт, лог-файл записывает, например, какие ключевые слова он использовал, чтобы найти ваш ресурс, какие страницы посетил, насколько там задержался и т.д.

Если вы рекламируете свой сайт с помощью баннера, то лог-файл поможет узнать, сколько людей видели баннер и пришли через него на ваш сайт. Вы также сможете определить количество результативных посетителей с этого баннера (то есть тех, кто заполнил анкету, зарегистрировался и т.д.) и даже сколько из них стали счастливыми покупателями ваших товаров и услуг.

Каждый Web-сайт «сидит» на сервере, а каждый сервер, в свою очередь, физически находится в одном из двух возможных мест: либо располагается на собственной рабочей станции компании (при этом размещение называется местным, внутренним или собственным хостингом), либо находится у Интернет-провайдера или хостинг-провайдера. В последнем случае сервер может иметь несколько специфических конфигураций, но в этой статье мы не будем на них останавливаться. Главное, что нужно знать, — где находится сервер.

Как только вы определили физическое местонахождение Web-сайта, можно начинать собирать необходимую статистику посещений сайта. Все серверы автоматически и непрерывно записывают такие данные в лог-файлах. Анализ этих файлов вручную — очень трудоемкое занятие, заниматься которым и врагу не пожелаешь. Логи представляют собой очень длинные списки разного рода информации: IP-адрес каждого посетителя, реферал (Web-сайт по ссылке с которого посетитель пришел на ваш сайт), время и дата визита и многое другое.

Обычная запись лог-файл выглядит приблизительно так:

194.154.91.25 - - [08/Sep/2003:04:21:12 -0500] “GET /reg/3A5FA347F09AC3DD23EE512457DE5241BA7 856674300B969D9B3025D3C876947D7/news/message HTTP/1.1” 200 599 “-” “Mozilla/3.0 (compatible)” “www.yoursite.com”

С одним файлом разобраться, пожалуй, несложно, но не забывайте, что каждый день ваш Web-сайт генерирует тысячи, а возможно, и больше подобных записей. К счастью, существуют программы-помощники, которые могут выполнить эту рутинную работу за вас. Наиболее популярной из них в Рунете является LogAnalyzer (http://net-promoter.com/ru/robots-txt/) из пакета NetPromoter (http://net-promoter.com/ru/netpromoter/). Вы «скармливаете» ей лог-файлы своего сервера, а она предоставляет вам всю соответствующую информацию в читабельном виде. Кроме высокого профессионального уровня, к несомненным достоинством программы следует отнести то, что это единственная русская программа и, естественно, с русской поддержкой (что немаловажно). Она входит в число мировых лидеров среди программ данной направленности, к которым также можно отнести следующие англоязычные программы: WebTrends (http://www.webtrends.com/), Web Log Explorer (http://www.exacttrend.com/weblogexplorer/, Advanced Log Analyzer (http://www.abacre.com/ala/).

В случае если ваш ресурс «живет» на сервере хостинговой компании, вы можете попросить у нее загружать лог-файлы через FTP и работать с ними локально, а можете попросить провайдера обеспечить Web-интерфейс для работы со статистикой посещений в онлайне. Большинство провайдеров предоставляет подобные услуги.

Какую же информацию можно почерпнуть из лог-файла и какие записи являются наиболее важными? Информация важна всякая. Допустим, вы определяете проблему с навигацией сайта или обновили содержимое домашней страницы — лог-файл поможет отследить результаты любых сделанных изменений, но для этого нужно изучить практически все статистические параметры. Чтобы лучше разобраться с записями в лог-файлах, сначала ознакомьтесь с терминами, которыми вы будете оперировать при работе с логами.

Отдельный (уникальный) визит — посещение сайта одним человеком или роботом поисковой машины (неважно, сколько он пребывал на сайте или сколько страниц просмотрел) считается уникальным визитом. Если посетитель покинул сайт, а затем снова зашел на него — это еще одно посещение. Почти половина всех посещений Web-сайта приходится на спайдеров — автоматических роботов поисковых машин. С помощью специальной программы вы сможете отфильтровать из множества посетителей людей и роботов.

Количество просмотров страниц — другой важный параметр активности на сайте. Если пользователь заходит на десять страниц вашего сайта, генерируется десять просмотров. Можно сравнивать этот показатель за определенные периоды времени (например, как изменяется активность посетителей на протяжении суток) и эффективно использовать данную информацию для точной настройки сайта и рекламных кампаний.

Среднее количество страниц, просмотренных за визит, — другими словами, это «глубина» каждого визита. Большинство посетителей, перед тем как перейти на другой сайт, просматривают только одну страницу (обычно домашнюю страницу). Это нормально: Web-пользователи, как правило, знают, что ищут. Они сканируют Web-ресурсы, чтобы узнать, содержат ли они нужную информацию, а если не находят ее, идут дальше. Посетители, просмотревшие несколько страниц, явно зпроявляют интерес и ваша задача — превратить их из обычных Интернет-путешественников в покупателей, подписчиков и т.д.

Наиболее (и наименее) популярные страницы — отслеживая эту статистику, можно сделать Web-сайт более удобным и легким в навигации. Если страница, которая очень важна для вашего бизнеса, посещается реже, чем хотелось бы, можно попробовать решить эту проблему, например изменить навигацию или размещение соответствующих ссылок, а затем проанализировать результаты своих действий.

Реферал — Web-страница, по ссылке с которой посетитель пришел на сайт. Каждый раз, когда кто-то посещает ваш сайт, вы можете узнать, откуда пришел посетитель. Это поможет определить, кто ссылается на ваш сайт и какими поисковыми машинами пользуются посетители, чтобы вас найти. Данный показатель тоже помогает отслеживать эффективность раскрутки ресурса. Рефералы увеличивают трафик и улучшают показатели индекса цитирования у поисковых машин.

Ключевые слова и фразы — это те слова, по которым посетители находят ваш сайт. Обратите особое внимание на ключевые слова и фразы, которые попадают (или не попадают, но должны попадать) в статистические данные лог-файлов. Такая информация поможет не только лучше продавать продукты и услуги целевой аудитории, но и получить более высокий рейтинг сайта на поисковиках. Список ключевых слов необходимо постоянно расширять и адаптировать по мере того, как развивается ваша Web-оптимизационная кампания. Лог-файлы и в этом случае являются одним из богатейших источников поиска новых ключевых слов и отсеивания неэффективных.

Теперь вы вооружены большим количеством полезной информации. Лог-файлы действительно обеспечивают владельца Web-сайта всей необходимой информацией о посещении Web-сайта и отдельных его страниц. Но как определить эффективность отдельных маркетинговых мероприятий, если вы одновременно проводите несколько из них и все они направляют трафик на домашнюю страницу? Например, если вы рассылаете электронные сообщения определенной целевой аудитории (потенциальным покупателям) и предлагаете им посетить вашу домашнюю страницу, то как узнать, какие е-mail работают, а какие нет? Конечно, можно получить об этом общее представление, проанализировав повышение трафика в день рассылки писем или в день размещения нового баннера (но даже для этого вам потребуется статистика посещений сайта). Но ведь вам нужна точная информация, а не общее представление о ней!

Некоторые сайты, размещающие баннеры, могут предложить вам счетчики заходов с баннера. Большинство почтовых служб тоже предлагает подобные сервисы за определенную плату. А если они не дают такой статистической информации? Или, что еще хуже, вы не доверяете их отчетам? Не расстраивайтесь — это тоже можно выяснить. В таких случаях создавайте страницы, специально предназначенные для отслеживания отдельных рекламных кампаний — это не очень трудно. Создайте для каждого онлайнового рекламного мероприятия отдельную html-страницу, которая будет направлять Web-пользователей (которые клюнули на вашу рекламу) на домашнюю или на другую важную страницу вашего сайта. После завершения этого мероприятия вы сможете просмотреть лог-файлы и узнать, сколько и каких визитов было на каждой такой странице. Например, вы разослали тысячу рекламных электронных писем, в тексте которых имеется ссылка «Для регистрации щелкните здесь». Данная гиперссылка указывает на специально созданную для этой цели страницу, чтобы отследить, скольких из этой тысячи получателей электронное рекламное письмо «уговорило» зарегистрироваться на вашем сайте. В таком случае невозможно будет попасть на эту страницу каким-либо другим способом.

Допустим, вы назвали страницу email-rassylka1.htm. После завершения рассылки электронных писем (через два-четыре дня) можно просмотреть статистику email-rassylka1.htm и узнать точное количество заходов на эту страницу. Допустим, заходов было 200 — значит, каждый пятый получатель зашел на вашу регистрационную страницу по ссылке с полученного электронного сообщения.

С помощью статистики лог-файлов вы можете получить и другую необходимую информацию. Это позволит определить, насколько успешной была каждая кампания по раскрутке сайта и нужно ли что-то менять.

Если вы не удовлетворены результатами, можно создать новый баннер или разослать модифицированные электронные письма. Вы можете отлаживать рекламу до бесконечности, пока не получится идеальная комбинация дизайна, содержания и пр. Это одно из чудес Интернета. Но в таком случае придется разбираться с цифрами, а их будет очень много — это я вам гарантирую. Даже небольшой сайт генерирует огромное количество данных, и, чтобы с ними справиться, вам не обойтись без программы-помощника — LogAnalyzer (http://net-promoter.com/ru/robots-txt/), WebTrends (http://www.webtrends.com/) или подобной им.

Не забудьте о сookies

нализ статистики посещений можно облегчить, если активировать cookies на вашем сервере. Попросите вашего хостинг-провайдера включить cookies для вашего сайта или сделайте это сами, если Web-сайт находится на вашем внутреннем сервере. Это позволит отслеживать отдельные посещения еще точнее. С помощью cookies вы можете следить за отдельным посетителем сайта на протяжении любого периода времени. Вы сможете узнать, когда он заходит на сайт и покидает его, какие страницы просматривает и когда делает покупку или подписывается на вашу рассылку. Это дает возможность переключаться с анализа общих тенденций на анализ отдельных пользователей. Комбинируя cookies с лог-файлами, вы можете отслеживать каждую маркетинговую стратегию с почти безупречной точностью. Например, вы будете знать, обеспечило ли участие в клик-аукционе новых покупателей или подписчиков.

Немного о поисковых роботах

адумывались ли вы, как глубоко изучают ваш сайт автоматические роботы поисковых машин? Регулярно ли приходят к вам роботы поисковика, на котором вы зарегистрировались на платной основе? С помощью анализатора лог-файлов (LogAnalyzer, WebTrends, Advanced Log Analyzer и т.п.) вы сможете выяснить, когда и какие роботы посещают ваш сайт и по каким страницам они «ползают». При создании новых страниц вы сможете моментально узнать, когда и какие поисковые роботы найдут и проиндексируют их. Если робот не нашел одну из ваших страниц, то, возможно, следует создать дополнительные ссылки на нее со страниц, которые робот посещает чаще. А может быть, эта страница запрещена для посещения роботами? Тогда вам нужно отредактировать robots.txt.

Что такое файл robots.txt

айл robots.txt — это простой текстовый файл, который запрещает роботам посещать определенные страницы или области вашего сайта. Например, если у вас есть область сайта, предназначенная для внутреннего пользования сотрудниками компании, вы можете запретить роботам посещать и анализировать ее, сделав соответствующие записи в robots.txt. Если вы пробовали создать этот файл вручную, то знаете, насколько это утомительно и как легко сделать ошибку. Кроме того, время от времени нужно его редактировать. Такой файл лучше всего создавать автоматически с помощью специальных программ, например Page Promoter (http://net-promoter.com/ru/pagepromoter/), Robot-Manager (http://www.websitemanagementtools.com/robot-manager/), которые могут генерировать и редактировать robots.txt.

Рейтинг Web-сайта

так, мы разобрали что такое лог-файлы, как можно их использовать для анализа посещений сайта пользователями и поисковыми роботами. С помощью статистики посещения можно отследить даже эффективность Web-маркетинговых рекламных действий. Но такой анализ включает только поведение посетителей, а нужно еще узнать, как эти действия влияют на позиции Web-сайта в результатах поиска, или, другими словами, нужно узнать рейтинг вашего сайта на поисковых машинах.

У каждой машины есть свой алгоритм оценки популярности сайта. Yahoo!, например, предоставляет систему рейтингов популярности страниц среди пользователей панели инструментов Yahoo Companion, которая очень напоминает подобную систему Google — счетчик PageRank, показывающий, насколько популярна страница, основываясь на количестве и качестве ссылок на нее на других страницах. Пользователи панели инструментов Yahoo Companion получают доступ к системе рейтингов Web Rank. Скорее всего, компания не против, чтобы вокруг рейтингов Web Rank поднялся такой же ажиотаж, как это было с Google. Если у вас нет панели Yahoo Companion, можно воспользоваться онлайн-вариантом рейтинга по адресу: http://www.digitalpoint.com/tools/webrank/. Некоторые другие поисковые машины также предоставляют подобные онлайновые анализаторы.

Но поверьте, что даже в случае с одним сайтом и с одной ключевой фразой для оценки рейтинга потребуется очень много времени. А проверка рейтинга сразу нескольких сайтов по нескольким ключевым словам на пяти основных поисковых машинах займет как минимум полдня. К тому же такие проверки нужно осуществлять регулярно.

К счастью, ранкинговые программы могут сделать эту работу вместо вас. Они исследуют разнообразные поисковые сайты, выведут в удобной форме результаты проверки позиций и тенденций изменений во времени и даже предоставят для сравнения информацию о ваших конкурентах. Однако при этом следует быть осторожным и не переусердствовать. Такие поисковики, как Google и All theWeb, не любят, когда их драгоценный трафик используется подобным образом. Поэтому следует делать запросы с разумной периодичностью и запрашивать проверку небольшого количества ключевых слов. Среди наиболее известных решений по определению рейтинга следует выделить такие программы, как Agent Web Ranking (http://www.agentwebranking.com/) и Page Promoter (http://net-promoter.com/ru/pagepromoter/). Первая — мощный узкоспециализированный программный продукт, созданный специально для работы с ранкингом. Вторая — более многофункциональная программа из пакета NetPromoter (http://net-promoter.com/ru/netpromoter), содержащая более десятка всевозможных функций по продвижению сайта. Помимо утилиты определения рейтинга есть также модуль определения количества ссылок на ваш сайт с других сайтов. Аналогичные модули содержатся во всех основных программах раскрутки, которые легко найти в Сети, а потом выбрать из них наиболее подходящую для себя.

Таким образом, рейтинг Web-сайта вы проверили. Если вы не удовлетворены результатом, нужно повышать индекс цитирования (link popularity), то есть количество сайтов, содержащих ссылки на ваш сайт. Сегодня это наиболее важный (хотя и не основной) фактор, влияющий на рейтинг Web-сайта у поисковых машин. Чем больше ссылок на ваш сайт с других сайтов, тем выше ваш рейтинг. Сейчас практически все поисковые системы в том или ином виде пользуются этим алгоритмом. Также большое значение имеет текст ссылок на ваш сайт, а также текст, расположенный около ссылки, тип сайта, на котором размещена ссылка. Ссылка на ваш сайт с популярного сайта будет оценена намного выше, чем ссылка с нескольких малоизвестных сайтов. При этом ссылки с FFA-сайтов (фермы ссылок), фри-хостов и форумов оцениваются минимально. Ясно, что этот показатель очень трудно искусственно увеличить. Русскоязычные поисковые системы тоже применяют индекс цитирования в вычислении релевантности страницы. Анализатор цитирования вышеупомянутой программы Page Promoter поможет вам оценить текущие показатели. А как увеличить индекс цитирования Web-сайта — это уже тема для отдельной статьи. Скажу лишь, что нужно обмениваться ссылками с другими сайтами, а самый эффективный метод — это сделать содержание сайта интересным и уникальным, тогда другие будут охотно сами ссылаться на вас, да и поисковые машины высоко оценят ваш ресурс.

Заключение

онечно, в одной статье сложно рассмотреть все аспекты статистики Web-сайта, но и приведенной информации вполне достаточно для того, чтобы проанализировать рекламные и Web-оптимизационные мероприятия, проверить рейтинг и популярность сайта. Лог-файлы содержат ценную информацию о сайте, которая помогает принимать наиболее эффективные бизнес-решения. А с помощью специальных программ можно сделать раскрутку Web-сайта наиболее эффективной. И это огромное преимущество для любого бизнеса. Вы обязательно оцените его, пожиная плоды высокого рейтинга и увеличения количества покупателей ваших товаров и услуг, и удивитесь, как вы могли до этого принимать маркетинговые онлайн-решения, не до конца отслеживая их эффективность.

КомпьютерПресс 5'2004