ShopForBux.com
Всё обо всём

Оптимизация wordpress (файл robots.txt)

95 29
user avatar
Пользователь
На сайте 15 лет
Сообщений : 50
Репутация : 0
10 лет назад #4981
Здравствуйте, меня очень интересует вопрос настройки robots.txt. На разных сайтах разная информация, интересует какие директории стоит закрывать, а какие лучше наоборот открыть. Расскажите кто что об этом вообще думает.
user avatar
Пользователь
На сайте 15 лет
Сообщений : 341
Репутация : 0
10 лет назад #4982
ZION,
тут и думать не нужно.
Берёшь, и закрываешь всё бесполезное для пользователя, и всё.
Например на ВП вообще много одинаковых страниц, со временем зайди в выдачу - посмотри страницы без контента, одинаковые, и откровенно говоря не оптимизированные.
У меня, к примеру, открыты лишь статьи, 1-3 страница в каждой категории, главная, и всё. Остальной шлак - к чёрту.
user avatar
Пользователь
На сайте 15 лет
Сообщений : 50
Репутация : 0
10 лет назад #4983
Flint, беда в том что гугл игнорит основную часть закрытых ссылок. Особенно теги. Мне в принципе все равно что он будет индексировать, важно только чтобы он стремился в топ попасть)
user avatar
Пользователь
На сайте 13 лет
Сообщений : 1859
Репутация : 0
10 лет назад #4984
по умолчанию в ворпрес уже сделаны самые оптимальные настройки этого файла и ничего менять не нужно. Вы считаете себя умнее, тысячнего круга разработчиков опенсоурес ? Я так не думаю, так что не занимайтесь хуйней.

Цитата: ZION
стремился в топ попасть

а тут уже не от робота зависит, а от количества уникального контента на сайте и числа запросов по этому контенту в поисковиках.
user avatar
Пользователь
На сайте 15 лет
Сообщений : 50
Репутация : 0
10 лет назад #4985
Цитата: Pretorian
а тут уже не от робота зависит, а от количества уникального контента на сайте и числа запросов по этому контенту в поисковиках.
Слушай, не мог бы рассказать по подробнее про то как сайт попадает в топ, и как уходит оттуда. Какие действия нужно проделать (все что от меня зависит) чтобы для поисковиков сайт что-то значил? Заранее очень благодарен!
user avatar
Пользователь
На сайте 14 лет
Сообщений : 223
Репутация : 0
10 лет назад #4986
Цитата: Pretorian
по умолчанию в ворпрес уже сделаны самые оптимальные настройки этого файла и ничего менять не нужно. Вы считаете себя умнее, тысячнего круга разработчиков опенсоурес ?

В вп хрен его знает какой там стандартный... но лучше закрыть все кроме тех страниц, какие тебе нужны (я так считаю), зачем поисковикам нужно индексировать страницу входа, регистрации и т.д. я хз как теперь они к этому относятся, думаю им пофигу, но все равно чтобы бяка не получилась лучше прикрыть.

Цитата: Pretorian
а тут уже не от робота зависит, а от количества уникального контента на сайте и числа запросов по этому контенту в поисковиках.


Зависит, он например может нечаянно прописать запрет в роботсе на продвигаемую страницу, еще зависит самое главное то забыл, от конкурентов.

Кидай сайт в тему тс гляну если время будет
user avatar
Пользователь
На сайте 15 лет
Сообщений : 50
Репутация : 0
10 лет назад #4987
Цитата: moskit
Кидай сайт в тему тс гляну если время будет

да я вроде на сайте все настроил, просто видел много споров о том что надо закрывать, а что не надо.
вот например я себе прописал вот такой код в роботе:
User-agent: *
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: */trackback
Disallow: */feed
Disallow: /feed/
Disallow: /tag
Host: strakhovka-ua.ru
Sitemap: http://strakhovka-ua.ru/sitemap.xml

User-agent: Yandex
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: */trackback
Disallow: */feed
Disallow: /feed/
Disallow: /tag

User-agent: Googlebot
Disallow: /tag


Есть ли что-то лишнее?
user avatar
Пользователь
На сайте 15 лет
Сообщений : 341
Репутация : 0
10 лет назад #4988
ZION,
по факту, не стоит писать юзер агентов для Yandex и Googlebot (конкретно в твоём случае, т.к. страницы закрываемые у тебя - НЕ индивидуальны), ты итак для них всё закрыл в первой части. но некоторые сео-дрочеры так делают, так что каждый по своему.
user avatar
Пользователь
На сайте 15 лет
Сообщений : 50
Репутация : 0
10 лет назад #4989
Flint, короче как я понял, никто не знает как правильно создавать этот файл) И вот у меня еще беда, сайт с уникальным контентом частично попал под фильтр гугл http://www.cy-pr.com/analysis/strakhovka-ua.ru (пишет что 5% страниц под фильтром), нужно ли что-то предпринимать?
user avatar
Пользователь
На сайте 15 лет
Сообщений : 341
Репутация : 0
10 лет назад #4990
Цитата: ZION
никто не знает как правильно создавать этот файл)

https://support.google.com/webmasters/answer/15618
4?hl=ru

https://support.google.com/webmasters/answer/18366
8?hl=ru


не сказал бы, что никто не знает...


никакого фильтра нет: гугл отображает больше страниц, чем яша. советую каждое значение с подобных сервеисов - проверять руками.
\"Оптимизация
user avatar
Пользователь
На сайте 13 лет
Сообщений : 1859
Репутация : 0
10 лет назад #4991
всего то навсего нужно создать уникальный сайт, интересный людям. И не придется ломать голову с сео оптимизацией. Да оно и правильно зачем создавать сайты дубликаты если там нет денег.
user avatar
Пользователь
На сайте 12 лет
Сообщений : 215
Репутация : 0
10 лет назад #4992
ZION,
Напиши сам, сделай заказ на уникальные статьи для сайта, и будешь смотреть как оно все движется. Любой текст какой даже на главной (уникален) много что значит и дает толк. Видел, другие регистрируют авторство статьи на гугле и яндексе, от сайтов какие тупо копируют твои ун. ст.
user avatar
Пользователь
На сайте 15 лет
Сообщений : 50
Репутация : 0
10 лет назад #4993
Цитата: Pretorian
всего то навсего нужно создать уникальный сайт, интересный людям.

какие претензии к моему сайту? Я статьи пишу все сам, они все на 100% уникальные. Сайт нужен для приобретения клиентов.
Цитата: Mr.Pibadi
Напиши сам, сделай заказ на уникальные статьи для сайта, и будешь смотреть как оно все движется.

весь кайф же вывести сайт в топ своими силами. Я не хочу заказывать какие либо статьи у копирайтеров, хочу просто правильно создать сайт, чтобы не было никаких ошибок. И потом просто писать статьи раз в день и все)

Я только уже долго ломаю голову как проверить какие запросы вводят уникальные посетители в поисковиках. Потому что https://wordstat.yandex.ua походу показывает вообще количество запросов)
user avatar
Пользователь
На сайте 15 лет
Сообщений : 341
Репутация : 0
10 лет назад #4994
Цитата: Pretorian
всего то навсего нужно создать уникальный сайт, интересный людям. И не придется ломать голову с сео оптимизацией. Да оно и правильно зачем создавать сайты дубликаты если там нет денег.

Не пиши, пожалуйста, ничего в этой теме. Спасибо.

Цитата: ZION
как проверить какие запросы вводят уникальные посетители в поисковиках

Встань на место пользователя, и реши, что тебе нужно. Дальше действуй по подсказкам ПСов и Вордстата.

Советую к прочтению http://blogarbik.ru/?p=6576, там ещё много чего полезного найдёшь на сайте.

P.S - на детородном органе лично я вертел эту 100% уникальность*
user avatar
Пользователь
На сайте 15 лет
Сообщений : 50
Репутация : 0
10 лет назад #4995
Цитата: Flint
P.S - на детородном органе лично я вертел эту 100% уникальность*

ахахах полностью согласен) был у меня сайт на тему кс 1.6 и я тупо все посты забирал с разных сайтв (года 3-4 назад) и у меня было 150-200 посетителей в день стабильно. Но сегодня все стало гораздо сложнее.
Цитата: Flint
Советую к прочтению http://blogarbik.ru/?p=6576, там ещё много чего полезного найдёшь на сайте.

спасибо за совет, обязательно прочитаю)
Кстати, не слышал про программу key collector? От нее вообще толк есть?
user avatar
Пользователь
На сайте 15 лет
Сообщений : 341
Репутация : 0
10 лет назад #4996
Цитата: ZION
Кстати, не слышал про программу key collector? От нее вообще толк есть?

Да, но с коллектором ты будешь работать скорее на кол-во, чем на кач-во. Хотя, смотря как использовать. Лишним, думаю, не будет.

Расскажу мини-историю из своего опыта, связанную как раз с копипастом и коллектором. Есть тут не безызвестный Москит, мы с ним когда-то делали сайт, на 100% на копипасте, и он как раз собирал ключи через кей-коллектор.
Собирали ключи, нанимали пару копипастеров, которые любой текст по теме вставляли. Уже через пару недель траф доходил до 3000 человек, и продержался так более 6 месяцев, а затем сайт был продан.
И тут мы плавно перемещаемся к теме "траст сайта"...
user avatar
Пользователь
На сайте 15 лет
Сообщений : 50
Репутация : 0
10 лет назад #4997
Flint,
Короче смысл набора посетителей такой: открываешь ворд и начинаешь писать кучу статей на свою тематику и несколько раз в день выкладываешь на сайте, тем самым люди будут потихоньку подтягиваться и сайт в поисковиках будет подниматься?
user avatar
Пользователь
На сайте 15 лет
Сообщений : 341
Репутация : 0
10 лет назад #4998
Цитата: ZION
Короче смысл набора посетителей такой: открываешь ворд и начинаешь писать кучу статей на свою тематику и несколько раз в день выкладываешь на сайте, тем самым люди будут потихоньку подтягиваться и сайт в поисковиках будет подниматься?

Не-не-не, ни в коем случае.
Хотя, схем реально много, и это может быть одной из них.
В статье что я скинул - отличный метод продвижения описан. Можешь по нему действовать.
Мне кажется, у тебя же не проект-однодневка, и тебе же на него не по*уй, верно? Тебе лучше работать не на количество, а на качество. Всё правильно, работать со статьями, но основополагающим фактором должна являться не уникальность, а юзабилити, интересность, и в следствии чего - высокие поведенческие факторы. В помощь тебе метрика и вебвизор. Впрочем, я даже не знаю, зачем пишу сюда, в статье это затронуто*)
user avatar
Пользователь
На сайте 14 лет
Сообщений : 223
Репутация : 0
10 лет назад #4999
Цитата: Flint
сть тут не безызвестный Москит, мы с ним когда-то делали сайт, на 100% на копипасте, и он как раз собирал ключи через кей-коллектор.
Собирали ключи, нанимали пару копипастеров, которые любой текст по теме вставляли. Уже через пару недель траф доходил до 3000 человек, и продержался так более 6 месяцев, а затем сайт был продан.

помню-помню) только там не один был коллектор, еще конкурентов запросы пиз**ли помнишь)

Цитата: ZION
Кстати, не слышал про программу key collector? От нее вообще толк есть?

Я слышал, у меня была, продал правда по глупости до НГ по дешевке, кстати если купишь кей стукни мне, нужно будет 1500 запросов пробить я скажу что и как кей управится с этим за 1-2 часа, заодно в качестве благодарности проконсультирую по сайту)
user avatar
Пользователь
На сайте 13 лет
Сообщений : 1859
Репутация : 0
10 лет назад #5000
Цитата: Flint
Не пиши, пожалуйста, ничего в этой теме. Спасибо.

это еще почему?
Автор темы
author avatar
ZION
Пользователь
На сайте 15 лет
Сообщений 50
Тем 12
Репутация 0
Теги темы
Автор не добавил тегов для этой темы
Ответить
Написал(а):