Технічні аспекти в пошуковій оптимізації
« Від розкручування сайту - до інтернет-маркетингу | Мовна картина інтернету Можливі методики дослідження на прикладі Уанета »
Яким чином можна відстежити роботів пошукових систем? Оскільки роботи не запрошують зображень, та більшість широко поширених лічильників тут безсилі. Відстежити роботів можна за допомогою аналізу журналів доступу веб-сервера (лог-файлов.
Кожен робот має унікальне ім’я, по якому його можна ідентифікувати, наприклад GoogleBot - робот пошукової системи Google, StackRambler - робот Рамблера, BigmirSpider - Бігміра. Деякі пошукові системи мають декілька роботів, наприклад у Яндекса їх не меншого 6-ти, причому кожен виконує певні завдання.
Окрім того робота можна визначити по запитах файлу виключень - robots.txt.
Аналіз поведінки роботів на сайті може дати відповіді на багато питань: чому сайт не індексується пошуковими системами, чому рідко оновлюється інформація в базі пошукача, які частини сайту індексуються в більшому об’ємі, а які - майже не індексуються. Крім того, такий аналіз допомагає визначити проблемні області в програмній частині сайту.
Управління індексацією сайту
Поведінкою роботів пошукових систем в межах сайту можна управляти. Розглянемо деякі методи управління роботами пошукових систем.
Заборони індексації
Можна заборонити індексацію окремих сторінок, цілих розділів сайту, а в деяких випадках всього сайту повністю. Інструкції про заборону індексації розміщують або в спеціальному файлі виключень - robots.txt, або в спеціальному мета-теге . У кожного методу є свої переваги і недоліки.
За допомогою інструкцій у файлі robots.txt можна заборонити як одну сторінку, так і групу сторінок або навіть розділи сайту з сотнями або тисячами документів, при цьому роботи пошукових документів навіть не запрошуватимуть з сервера ці документи. Управління за допомогою мета-тегов гнучкіше, можна заборонити індексацію, але дозволити слідувати по посиланнях.
Мінусом використання мета-тегов можна вважати те, що у будь-якому випадку робот запрошуватиме документи з сервера.
Tags: документ, робот, сервер, система, сторінка
Інтернет-маркетинг
Схожі записи
- Глибокий опит Частина 19 (26.02.2008)... п. Мета досліджень, направлених на виявлення причинно-наслідкових залежностей, - перевірка гіпотез про причинно-наслідкові відносини на ринку конкретного товару. Наприклад, як зміниться об'єм продажів автомобілів вітчизняного і іноземного виробництва при збільшенні митних зборів на імпорт іномарок. Для організації будь-якого з цих досліджень можуть застосовуватися описані вище методи. Але, очевидно, форми і зміст технічних документів повинні ...
- ІСТОРІЯ МЕРЕЖЕВОГО Маркетінгародоначальником мережевого маркетингу вважається Америка (13.04.2008)... Запропонував поліцейським м. Бостона включитися в його пірамідальну структуру. Для цього потрібно було вкласти 1$ і через тиждень отримати 2$. Щоб з'явився прибуток, необхідно було запросити хоч би одну людину. Ця система довго не проіснувала. Назва - M-мульти - много,L - льовен - лінія, рушійний для M-маркетингу товар або багаторівневий маркетинг доводитися на 1934г. ...
- Глибокий опит Частина 14 (23.02.2008)... Спробуйте сформулювати проблему, що має місце у вашій організації або в організації, яку ви добре знаєте, і намітити шляхи її рішення, тобто визначте круг даних (вторинних і первинних), які необхідно зібрати, сформулюйте критерії для оцінки, набір альтернатив і здійсните вибір прийнятного рішення. Кожне маркетингове дослідження повинне документально оформлятися. Окрім технічних документів (анкет, ...
- Центральне питання яке так часто питають інженери продажів водоохолоджуючого устаткування (16.03.2008)... І все! Але тільки цих даних не може бути досить! Як треба робити в цьому випадку? Але, як правило,, скільки пластика (кількість в одиницю часу) проводять через машину, знають з великою точністю для будь-якої машини, а також температуру на вході в устаткування і температури після охолоджування. Таких вимірів також буде вище за дах для ...
- Доекспозіционниє враження (25.03.2008)... Роздивляючись під мікроскопом експозиції по темі «Інформаційні технології» в Поволжськом регіоні, досліджувала сайт виставки «Інфоком-2007». Дуже адекватний ресурс, практично всю потрібну інформацію, у тому числі і по минулих роках, можна легко знайти. У переліку документів традиційного розділу «Умови участі» я із здивуванням виявила нетрадиційний документ під назвою «Маркетингове керівництво Інфоком - 2007». Звичайно, відразу ...
