Можливі кілька причин, за якими сайт не індексується.
- Минуло недостатньо часу з моменту заповнення форми додавання сайту. Найшвидший робот у Яндекса. Якщо він не завантажений, то додається сторінка з'являється в результатах пошуку вже через 3 години. Більшість сторінок потрапляють в індекс не пізніше ніж через тиждень з моменту додавання. У решти пошукачів час поновлення індексу істотно більше - можна починати турбуватися місяці через півтора.
У момент візиту робота пошуковика сайт був недоступний або мав дуже великий час відгуку. Якщо сервер "гальмує" не завжди, то рано чи пізно сайт потрапить в пошуковик. Через якийсь час - див. Пункт 1.
Некоректна настройка сервера. Найпоширеніша помилка серед любителів використовувати .htaccess - в результаті застосування директив ErrorDocument або RewriteRule робот пошукача при зверненні до robots.txt отримує від сервера код відмінний від 200 (OK) або 404 (Not Found). Деяких роботів (Rambler) це вводить в ступор і індексація не відбудеться до тих пір, поки не помилка не буде виправлена. Як уникнути помилки: в разі використання ErrorDocument завжди створювати robots.txt хоча б і порожній, в разі використання RewriteRule бути акуратним і завжди перевіряти код відповіді сервера.
користувач / blabla.html локальний robots.txt працювати не буде, а в загальному robots.txt призначені для користувача сторінки можуть бути заборонені до індексації для зменшення навантаження на сервері. Як уникнути помилки? Завжди перевіряти правильність складання robots.txt.
Проблеми у пошукача. Серйозні збої рідкісні, але трапляються, і якщо надмірність апаратури виявляється недостатньою, частина індексу втрачається. Крім того, проблеми можуть бути пов'язані з кластерної структурою пошукача.
Сайт знаходиться в Неіндексований зоні. У кожного пошукача є своя "область дії", наприклад, Яндекс і Рамблер охоплюють російськомовну частину інтернету. Тому, якщо сайт не входить до відповідних доменні зони (наприклад, su, ru, am, az, by, ge, kg, kz, md, tj, ua, uz для Яндекса; ru, su, ua, by, kz, kg , uz, ge для Рамблера), то автоматична індексація може не пройти. В такому випадку необхідно написати лист в службу підтримки пошукача з проханням про включення сайту в індекс.
Багато великих пошуковики цураються безкоштовних хостинг ів з сотнями тисяч сайтів, так само як і редіректнимі служб (таких, як da.ru) і якщо ваша сторінка розташована на одному з подібних хостингів, індексації можна чекати вічно.
Схожі статті