Jump to content

Recommended Posts

  • Administrator

Как ни странно, но данная система баннов, очень быстренько так попадает в поисковик Яндекс. Заметил я это очень давно, но конкретное внимание обратил только сейчас, когда появилось время на это.

Скришот страницы Яндекса с результатами по SourceBans++

На мой взгляд, каждый уважающий себя, SEO оптимизатор, админ, в общем тот человек, у которого есть доступ к файловой системе сайта, должен избавляться от подобных проблем в кратчайшие сроки. Ведь, пока Яндекс робот тратит время на то, чтобы проиндексировать страницы без контента и добавить их в поиск, у него нет времени, чтобы проиндексировать действительно нужные страницы. Попробуем избавиться от данной проблемы.

К примеру, у нас есть сайт https://l4d2noob.ru/ и скажем наша система банов лежит по следующему пути https://l4d2noob.ru/sourcebans++/, соответственно этот путь надо полностью запретить добавлять в поиск. Для этого в FileZilla FileZillaPortable_NODELETE.rar идем в корневую папку сайта, там обычно лежит файл robots.txt.

Если у вас действительно есть уже сформированный robots.txt, то вам нужно открыть его текстовым редактором Notepad_NODELETE.rar стереть в нем все строки, которые как то связаны с вашим SourceBans++, и вместо них добавить следующую строку:

Disallow: /sourcebans++/

Эта строка запрещает индексировать все содержимое, что находится в разделе https://l4d2noob.ru/sourcebans++/.


Но может быть и такое, что у вас нет еще сформированного файла robots.txt. Тогда вам надо его создать самостоятельно в корневой папке сайта.

Вот шаблон robots.txt, который запрещает поисковикам индексировать директорию /SourceBans++/ но при этом все остальное роботам индексировать можно.

User-agent: *
Disallow: /sourcebans++/
Sitemap: Вставьте ссылку на ваш sitemap.xml здесь

Сохраняете, и ждете. Не молниеносно, но со временем, ненужные страницы начнут исчезать из поисковиков.

Я не ищу ничего логичного, например денег. Меня нельзя купить, запугать, аргументировать или договориться со мной. Я просто хочу смотреть, как горит мир.

Link to post
  • 8 months later...
  • Administrator

Сейчас, спустя того как прошло много времени, и у нас появилось немного опыта, я не рекомендую закрывать Sourcebans++ от индексации. С помощью того, что страницы попадают в Sourcebans++ в тот же Яндекс, возможно и кстати очень удобно искать информацию по людям, которых ты хочешь проверить, с помощью Steam ID и IP адресов.

  • Sad 1

Я не ищу ничего логичного, например денег. Меня нельзя купить, запугать, аргументировать или договориться со мной. Я просто хочу смотреть, как горит мир.

Link to post

Join the conversation

You are posting as a guest. If you have an account, sign in now to post with your account.
Note: Your post will require moderator approval before it will be visible.

Guest
Reply to this topic...

×   Pasted as rich text.   Paste as plain text instead

  Only 75 emoji are allowed.

×   Your link has been automatically embedded.   Display as a link instead

×   Your previous content has been restored.   Clear editor

×   You cannot paste images directly. Upload or insert images from URL.

  • Similar Content

    • By Ry@N
      Подписывайтесь на наш Яндекс Дзен, ведь я уверен, что вы совсем не против попытаться помочь нам продвинуть наш сайт в массы Яндекс Блогеров!
      https://zen.yandex.ru/id/609cc5d463b0a06b3fc84ccc
      https://zen.yandex.ru/id/609cc5d463b0a06b3fc84ccc
      https://zen.yandex.ru/id/609cc5d463b0a06b3fc84ccc
    • By Ry@N
      В этой теме буду писать свои мысли по поводу индексации вашего ну или нашего сайта поисковыми системами. Первая мысль:
      Стоит добавить в правую колонку (Сайдбар) в темах блок с последними темами, это помогает быстрее индексировать темы поисковым системам.

    • By Ry@N
      Вам надо изменить иконку клуба, дело в том что на иконке видно как человек курит сигарету. Так как Яндекс утверждает, что наш сайт безопасен для детей, таких иконок быть не должно... Спасибо.
    • By Ry@N
      Такой дорогой движок, а файловое хранилище у него, словно это поделка семиклассника на уроке информатики. Мне не понравилось что все данные хранятся вперемешку в папке Uploads, где единственная сортировка, это сортировка по месяцам. И в папке с месяцем могут хранится как и файлы вложений, и аватарки и файлы стилей. Это не очень удобно, особенно если ты ищешь потерянные вложения, и боишься удалить что то лишнее.
      И лучше это сделать на начальном этапе, когда твой сайт мало весит, чем мучатся в разы дольше потом.
      Для начала разберемся с аватарками пользователей. Сделаем так, что аватарка не будет генерироваться из первой буквы ника, потому что такая аватарка, это тоже одна jpg картинка. Сделаем так, что бы у нового пользователя была заранее установленная аватарка.
      Идем по пути:
      Система > Пользователи > Профили > Настройка Профиля В разделе "Стандартные Аватары" выбираем первый пункт "Использовать стандартный аватар стиля", нажимаем сохранить.
      Теперь отключаем дополнительные методы входа. Это вход через Steam, Facebook и так далее. Суть в том, что аватарки, которые обновляются в сообществе, если пользователь поменял аватарку скажем в Steam, они не отображаются удаленно, они импортируются к вам на сервер. И ладно бы, если пользователь поменяет аватарку и старая аватарка удалится. Нет, она остается лежать мертвым грузом у вас на сервере.
      Идем по пути:
      Система > Вход и регистрация Удаляем все методы входа, кроме стандартного.
      Так же по пути:
      Система > Приложения Система > Плагины Не забудьте удалить все приложения и плагины, которые отвечали за дополнительные методы входа. В них теперь нет необходимости.
      Двигаемся дальше, по пути:
      Система > Файлы > Настройки хранения Для каждого раздела, который вы видите в настройках хранения, мы будем в FTP доступе создавать отдельную папку. Причем не в директории uploads, создадим для этого отдельный каталог  и назовем его например downloads. И уже в этой директории для аватарок создаем папку avatar, для реакций папку reactions, и так далее.
      У меня например получилось 20 папок.
      После создания папок, в настройках хранения файлов переходим на вкладку конфигурация. Нажимаем кнопку "Создать", метод хранения выбираем "Файловая система", а в строке директория, вместо окончания ссылки upload мы напишем downloads/Avatars. Потом нажмем сохранить, и так надо повторить для каждой созданной папки.
      Когда вы создали кучу методов хранения, возвращаемся обратно на вкладку "Методы Хранения". И уже смайлам выбираем файловую систему для смайлов. Аватарам, файловую систему для аватаров. Ну вы поняли.
      Когда все файловые системы указали, нажимаем на кнопку "Сохранить" внизу. Начнется процесс перемещения файлов. Этот процесс длительный, займет времени как минимум полчаса. Можете отдохнуть.
      Помимо этого на сайте вы сможете видеть битые ссылки / изображения, пока перемещение не будет завершено. Не переживайте, все будет хорошо, в конце.
      Когда процесс перемещения завершится, делаем резервное копирование вашей папки uploads, что бы в случае фатальной ошибки, у вас была возможность все исправить. А после резервного копирования, в папки uploads оставляем 2 файла - index.html, .htaccess и папку logs, а остальное просто удаляем с сервера. Не бойтесь, вы же сделали резервную копию!
      Затем в разделе:
      Система > Поддержка Пару тройку раз чистим кеш.
      Я вот еще и перемещенные файлы снес, в папках avatars, различных Cover папках. Поэтому вы сейчас у нас в сообществе, большую часть профилей видите с битыми картинками.
      Но в теории, данная операция очистит ваше дисковое пространство на 40%. В ТЕОРИИ! Я не знаю как вы пользуетесь файловым хранилищем.
      Спасибо за внимание!
    • By Ry@N
      Пришло время почистить мой компьютер. Это удобнее всего делать вручную, чистив реестр, удаляю программы которые давно не запускал и выполняя поиск по жесткому диску.
      Тебе кстати тоже рекомендую почистить свой комп! Тогда CS лагать меньше будет!
  • Recently Browsing   0 members

    No registered users viewing this page.

  • Сколько должно быть тебе лет; прежде чем можно будет сказать; что ты умер от старости?

×
×
  • Create New...