.htaccess - блокируем доступ к сайту от определенных User-Agent (веб-браузеров или ботов)

Практика

Вот кусок файла .htaccess, в котором заблокированы несколько User-Agent (веб-браузеров; ботов, на самом то деле).

SetEnvIfNoCase User-Agent "^Titan" bad_bot
SetEnvIfNoCase User-Agent "^Wget" bad_bot
SetEnvIfNoCase User-Agent "^SiteSnagger" bad_bot
SetEnvIfNoCase User-Agent "^WebAuto" bad_bot
SetEnvIfNoCase User-Agent "^NetAnts" bad_bot
SetEnvIfNoCase User-Agent "^WebZip/4.0" bad_bot
SetEnvIfNoCase User-Agent "^httplib" bad_bot

<Limit get="" post="" head="">
Order Allow,Deny
Allow from all
Deny from env=bad_bot
</Limit>

Список "плохих" User-Agent здесь очень мал и приведен только как пример.

Актуально для: Apache 2.x

Комментарии

Оставить комментарий

Если у вас есть какое-либо предложение, идея, благодарность или комментарий, не стесняйтесь писать. Мы очень ценим отзывы и рады услышать ваше мнение.

To reply

Comment

Для того, чтобы подтвердить, что вы не бот, ответьте:

Name

Email(not published)

Оценить

Лекции и учебник по "Выполнение скриптов на стороне сервера PHP (LAMP) NodeJS (Backend) "

Термины: Выполнение скриптов на стороне сервера PHP (LAMP) NodeJS (Backend)

Циклические ссылки и сборщик мусора PHP

файловые и сетевые сокеты.

Объектно-ориентированное программирование (ООП) в PHP Интерфейсы, классы, абстрактные классы, объекты

Сессии в PHP связь с cookies

PHP вопросы и ответы для собеседований

PHP дополнительные вопросы и ответы для собеседований

Полиморфизм классов в PHP

Наследование классов в PHP, примеры, цепочка вызовов методов

вопросы и ответы на собеседование по JavaScript и PHP на английском

Применение замыканий анонимных функций и calback в PHP

Problem A. BibTEX and solve by C++ && PHP

PHP вывод фразы по кругу в текстовом режиме

php направление текста сверху вниз Лиличка

Диаграмма классов (class diagram) PHP применяемые в ООП

Сравнение производительности PHP Фреймворков

Назначение интерфейса CGI. CGI приложения

HTTP Методы GET и POST, DELETE, PUT , REST API архитектура (с и без Laravel) и тестами для самопроверки

Переменные окружения CGI

Заголовки HTTP и способы их отправки.

Коды ответов HTTP

Типы MIME

PHP и CGI

Синтаксис PHP

Типы данных языка PHP

Двоичные данные (Boolean) В PHP

Целые числа (Integer) в PHP

Числа с плавающей точкой (Float) в PHP

Строки string в PHP- особенности и функции над ними

Массивы (Array) в PHP

Объекты (Object) в PHP

Специальный тип Resource (ресурсы) в PHP

Специальный тип Null (пустой тип) в PHP, Оператор безопасного null (Nullsafe operator)

Псевдотип Mixed (смешанный) в PHP

Псевдотип Callback (обратный вызов) в PHP

Манипуляции с типами данных PHP

Переменные языка PHP

Локальные переменные в PHP

Глобальные переменные в PHP

Статические переменные в PHP

Внешние переменные (переменные вне PHP) Использование PHP из командной строки

Операции с переменными PHP (операторы) Выражения в PHP

Переменные переменные (символические ссылки)

Предопределенные переменные и Суперглобальные переменные PHP

Серверные переменные $_SERVER в PHP

Константы в PHP .Предопределенные константы PHP

Операторы PHP

Операторы исполнения внешних команд в PHP

Операторы для работы с массивами PHP

Операторы управления ошибками PHP @ at-sign

Операторы классов PHP Оператор проверки принадлежности к классу

Управляющие конструкции PHP

Условные операторы в PHP

Циклы в PHP

Конструкции выбора в PHP

Конструкции объявления в PHP Конструкция declare Директива tick

Конструкции возврата значений Конструкция return

Конструкции включений в PHP

Альтернативный синтаксис управляющих конструкций PHP

Ссылки в PHP

Знакомство с функциями в PHP

Математические функции в PHP

Работа с файлами. в PHP

Работа с базой данных и основы SQL в PHP

Работа с датой и временем PHP

Взаимодействие с различными серверами по различным протоколам на PHP CURL

GD - работа с изображениями на строне сервера (PHP)

Красивый скрипт или стили программирования в PHP

Безопасное программирование в PHP

Установка в Ubunutu 20 и LAMP (Apache 2.4 , PHP 7.0 (mod or FastCGI) и Mysql 5.7.) + SSH+ FTP (proftpd)+Mailserver Postfix

О регулярных выражениях. в PHP

Поддержка и ежедневное использование LAMP Linux (Ubunutu), решение проблем возникающих из-за ошибок, мониторинг системы на сервере

LAMP набор (комплекс) серверного программного обеспечения

Преимущества и недостатки PHP FastCGI и mod_php ( php как модуль apache или FastCGI ),CGI-программы

Анализ медленного выполнения скриптов php

Отправка почты средствами PHP в linux или windows

файл настроек Apache htaccess

PHP Namespace & use & MVC

PHP vs Nodejs сравнение возможностей языков программирования

Аргументы функций , типизированные аргументы, массив аргументов в PHP

Варианты настройки MPM для apache mpm-prefork(mpm-worker)с mod_php(php-fpm) + nginx reverse proxy и их сравнение

SSL Сертификаты. Установка купленного и самозаверенного SSL сертификата на для Nginx и Apache. Настройка HTTPS

Индивидуальные настройки PHP для сайтов

конфигурация Postfix Ubunutu - почтового сервера

Установка Laravel и Nginx на Ubuntu и Windows

Что такое HTTP_RAW_POST_DATA?

Запись наборов данных в общую (разделяемую) память с помощью PHP

Jpegtran -оптимизация JPEG изображений, установка и массовые операции

Приложения реального времени и Polling ,Long Polling , WebSockets, Server-Sent Events SSE, WebRTC

Вопросы на собеседовании по PHP

Null-коалесцентный оператор - php Два знака вопроса ??

Анонимные классы PHP

PHP право-ассоциативный оператор **, обозначающий возведение в степень (два умножения)

PHP Оператор spaceship (космический корабль) меньше равно больше

PHP Ожидания assert()- предположения с нулевой стоимостью в промышленном коде

PHP 7 Декларация скалярных типов в параметрах и в возвращаемых значений

PHP 5.6 три точки Функции с переменным количеством аргументов используя синтаксис ... Развертывание аргументов с помощью ...

Статические переменные, статические свойства и методы и позднее статическое связывание в PHP и особенности ООП

Регулярные выражения в php и других языках.Регулярные выражения: поиск с инверсией

Как правильно работать с composer и чем отличается composer install vs update?

АЛГОРИТМЫ ВЫБОРА БЛОКОВ SERVER И LOCATION В NGINX

Обработка исключительных ситуаций try-catch, в чем разница между исключениями и ошибками?

Как настроить Docker + Docker compose Windows 10 используя WSL 2 Ubunutu 20

Что нового в PHP 8

Simple Object Access Protocol — простой протокол доступа к объектам). Различия REST и SOAP

Как включить логи на DNS-сервере Bind (Named) на Debian

Ошибка: DB Error: [Error message: extension mysql is not compiled into PHP]

Ошибка journal rollforward failed: journal out of sync with zone XYZ

CentOS и httpd - ошибка 403 и SELinux

Свои DDNS (Dynamic DNS) сервер и клиент на базе Debian

Apache: установка опций и параметров PHP для отдельных сайтов

PHP: запись (ведение) лога ошибок в файл

PHP: не получается загрузить файл больше 8 МБ (max_upload_filesize стоит больше)

Установка и настройка второго (slave) DNS-сервера на CentOS/RedHat (BIND/named)

Где лежит файл настроек PHP - php.conf (php.ini) в Linux Debian, CentOS/RedHat и FreeBSD

Смотрим статус (состояние, процессы и соединения) сервера Apache через mod_status в CentOS / RedHat

Смотрим статус (состояние, процессы и соединения) сервера Apache через mod_status в Debian

HTMLPurifier не пропускает (удаляет) якори (anchors) в результирующем HTML документе

.htaccess - блокируем доступ к сайту от определенных User-Agent (веб-браузеров или ботов)

nginx: Блокируем доступ с определенных IP (модуль ngx_http_access_module)

Где взять phpize (phpize : command not found) - для Debian, CentOS, ubuntu или RedHat

nginx: Редирект (перенаправление) с одного домена на другой

nginx: ошибка "could not build the server_names_hash, you should increase server_names_hash_bucket_size"

Apache: закрываем дырку по заголовкам Range и Request-Range (через RequestHeader)

Apache: где находятся файлы конфигурации в Debian, CentOS, FreeBSD, ubuntu и RedHat

Apache: где прописать общие для всех virtualhost настройки (для всех виртуальных хостов опции)

Команды управления DNS сервером bind (named) - rndc. Перезагрузка, трансфер зон. Сброс кеша.

Установка phpMyAdmin на CentOS (RedHat) и Apache

Установка LAMP (Apache + MySQL + PHP 5.3) в CentOS 5.x (RedHat 5)

Установка MySQL + Apache + PHP на FreeBSD (тот-же веб-сервер LAMP на FreeBSD)

Apache: "httpd: Could not reliably determine the server's fully qualified domain name, using 127.0.0.1 for ServerName"

Установка и настройка DNS сервера BIND (named) в CentOS (RedHat)

Ошибка "unknown option 'zone'" в bind (named)

Установка и настройка DNS-сервера BIND (named) на Linux Debian

Установка PHP в IIS 7 на Windows Server

Как изменить время жизни сессии PHP

Склеиваем www. и без-www. в один домен - редирект 301 через mod_rewrite

Последний PHP 5.3 в Debian Squeeze

Установка PHP 5.3 в Debian Lenny (последних версий)

Последний PHP 5.2 в Debian Lenny

Rewrite Engine не воспринимает url-кодированные строки

Установка LAMP на Debian

webalizer - как поменять язык

Включаем SSL в Apache (Debian или Ubuntu)

Включаем SSL в Apache (FreeBSD)

Apache: ошибка "out of memory: kill process"

.htaccess - Применение и синтаксис

Кирилистические домены и IDNA - как их настраивать

Как проверить все сообщения пользователя на опасные символы перед сохранением?

Узнать сколько свободного и занятого места диске php html linux

coin-slider не работают ссылки при наведении на картинку слайд ?

Функция скрипт на PHP для определения попадания точки в многоугольник

модификатор формата даты twig

КАК получить дамп переменных TWIG

после переноса на другой домен opencart Notice: unserialize() [function.unserialize]: Error at offset index.php on line 45 header.php on line 43 index.php on line 61

как на PHP узнать полную и свободную Оперативная память сервера RAM ОЗУ

Порядок слайдов картинок в слайдшоу в банере OpenCart

как добавить пункт меню opencart?

cms made simple пишет что произошли проблемы при загрузке списка модулей в менеджере модулей

как в smarty создать массив с значениями и как сделать склонение в родит падеж месяцев

flex flash HTTP Service передать параметры в http запрос

Как сделать сопроводительный label кликабельным со сменой checkbox на противоположный ?

Не передается переменная смарти из Head Body

Как в Wordpress вывести новости из определенной категории? cat не помогает

Сравнение хостингов в Украине

в Opencart в админке не отображаются картинки в менеджере файлов, возможно из за русских букв

Как на PHP обрезать текст, оставляя нужное количество строк(оставив определенное число переносов)

Как в CMS Made Simple сделать автоматический sitemap для новостей

opencart повторно после заказа оформить второй заказ не возможно

месяц в новостях на русском языке, CMS Made Simple

в WordPress не назначается шаблон определенной странице

Как сделать навигационную цепочку в CMS Made Simple™

Fatal error: Class Gdn not found in vanilla forums

Из-за чего виснет браузер?

КАк в OpenCart показать массу и артикул на странице с товаром?

MS IE 8 не работет реффер $_SERVER['HTTP_REFERER'] PHP

Как в Opencart добавить новый признак товара что это новинка

Как отключить режим отладки в sympony framework

Программное склонение существительных по числу на php

файлы cache.category удалил кеш /system/cache/, теперь не работает opencart

Подскажите где можно найти набор маленьких png иконок?

Как в smarty вывести текущий год?

а как изменить корневую папку для sympony с помощью .htaccess

Как в modx получить count ресурсов (getResources) еще до его вывода

при создании Entity из командной строки Doctrine в Symfony 2 появляется ошибка Warning: date_default_timezone_get(): It is not safe to rely on the system t imezone settings.

убрать гиперссылки в посте wordpress

console.log(55); ни чего не сообщает, не работает. вместо этого undefined

В joomla 1.5 2.5 в админпанеле не сохраняются общие настройки

В логах сервера много ошибок с делением на ноль, где они могут быть?

Как opencart изменить сортировку по-умолчанию товаров по цене

появляется GET pending и canceled при использовании audio и video html тегов в chrome

opencart товар не найден (на сайте) но он есть в админке

Почему нету антилаек в социальных сетях Facebook и вконтакте?

не работает session_start(); и не сохраняется $_SESSION['emailsend']

Как в OpenCart добавить поле комментарий при оформлении заказа

Opencart после переноса на другой хостинг Fatal error: Call to a member function getId() on a non-object in /catalog/controller/common/header.php on line 43

opencart модуль filterpro не работает пагинация не читается переменная page

Как сделать в Opencart что бы при нажатии + или - возле кнопки "добавить в корзину" или заказать или купить прибавлялось значение количества для заказа, а не "1"?

Какие параметры php ini влияют на размер и время загрузки файлов на сервер?

opencart правильные ссылки у дочерних категорий при не существующем seo url

как в Symfony 2 создать action onbefore?

как перевести координаты из сферических в декартовы на плоскую карту

как сделать заглушку при отсутсвии картинок в opencart (noimage)

Как программно рассчитать заказ товара для менеджера?

Simplify_SystemException with message System error occurred processing a request

CMS Made Simple как вставить картинку в новость?

Не назначается переменная Unexpected token "name" of value "as" ("end of statement block" expected)

Upload android ipad ipod Как загрузить файл на сайт через веб браузер мобильных устройств?

Как в symphony можно выводить шаблоны из action? как вывести рендер нескольких шаблонов?

не работает select первый option ONCHANGE molilla window.location.href=?r=+this.options[this.selectedIndex].value;

Регулярное выражение PHP определить что нет русских букв

Не сохраняется значение куков, ее срок действия истекает 1970 год 1 января 3часа 0 минут 12секунд

как в php сделать implode для двумерного массива?

КАк в OpenCart восстановить пароль к админке и не работающей почте , пароль с солью

Как в OpenCart удалить index.php?route= из всех ссылок?

DDD отзывы или что вы думаете о Domain-driven design?

Как в OpenCart убрать во всех местах возврат товара

Какие отличия shell_exec system exec обратных кавычек и passthru?

Как работать установить и настроить CMS MS Made Simple

как для imagestring обвести (сделать тень)текст php

как перенаправить пути к папкам для apache напрмер ко всем картинкам

CMS Made Simple: ошибка  не работает модуль

дамп переменных smarty какие есть модификаторы чтобы посмотреть содержимое переменных

кто заполняет ns запись в DNS?

Как в OpenCart сделать чтобы в заказе сохранялся источник покупателя HTTP_REFERER

Как проверять уникальность посетителя сайта?

Есть ли в шаблонизаторе twig Breack continue в циклах?

Как в правильном падеже вывести прошедшее время между моментами (в зависимости от числительных)используя PHP

Что такое Redemption Period? когда освобождается домен?

Opencart при просмотре товара и добавления в корзину всегда 1 как сделать больше одного товара

twig превращает html текст сущности, при этом вместо переноса строки выводится <br>

ошибка при Merge with local- Mercurial says =abort: outstanding uncommitted changes

windows 8 закончилось место на диске после просмотров фильмов онлайн

как на smarty проверить что выведена переменная с текущей датой (числом)

Opencart не правильно работает поиск по тегам (регистр и кодировка неправильные)

как включить чпу для url для CMS Made Simple

tvFilters modx in array (has one) выбрать один из списка

Не работает shell_exec(cd /home/user/scripts/; sudo su ./testsh.sh); NULL

как в symfony после авторизации редирект на последний прежний урл отключить

ubunutu - apache mkdir php 775

Как на php узнать количетво строк в блоке с заданной шириной, то есть определить число переносов

Как установить сервер Apache в картинках

ошибка в PHP fatal error call-time pass-by-reference has been removed in On line ***

как opencart сделать письма с уведомлением о заказе администратору с полными данными так и заказчику?

Fatal error: Class Gdn not found in ..... vanilla forums

КАк в OpenCart сделать filterpro чтобы показывались все категории

как выровнять по центру невидимый элемент или как узнаить ширину и высоту невидимого элемента?

Как checkbox fasebook выбрать всех друзей одним кликом при рассылке пригложъшеий

не работает двойной слеш или пустой символ в RewriteRule

Как в Wordpress изменить заголовок title на главной странице и убрать разделители если установлено модуль All in One SEO Pack

Fatal error: Call to undefined function bcscale() php7

Wordpress как перевести тему, плагин через Loco Translate ?

How to install certbot at UBUNTU 16 только сертификат для Nginx

Нет передается куки (не работают cookies)

Ошибки NGINX [alert] 1 open socket left in connection [alert] aborting

Opencart SEO url в базе данных для категорий и товаров

не передается заголовок Last-Modified из любого файла на хостинге, в том числе из тестового

Работаем с коллекцией продуктов (Product Collection) в Magento

Шаблоны программирования в CMS Magento

Что такое Google Trends и как с ним работать

СЕО основные понятия

Какая польза от react-dom пакетом?

Sort laravvel collection by arrays ids

Как сделать транспонирование коллекции на laravel (Transpose collection Laravel)

Валидация ид через запятую -регулярное выражение

Добавление суффикса: st, nd, rd или th для порядковых числительных на PHP на английском языке

Bounded context DDD, структура папок с классами по DDD

Причины ошибки и способы решения - connect() to unix:/run/php-fpm/www.sock failed (Resource temporarily unavailable) while connecting to upstream)

Лучшая практика использования Dependency Injection для класса со статическими методами в php

letsencrypt Certbot Error .plugins.selection:Selected authenticator None and installer None [решено]

Эволюция часовых зон в PHP: что добавлено, что удалено и зачем — от PHP 5.6 до PHP 8

Различие между Entity, Domain Model, DataModel в контексте DDD

PHP история и основы серверного языка

Какими способами организовать порционную обработку данных в PHP?

Авторизация в онлайн сервисах. Политики и гейтсы в Laravel - Тесты с ответами для самопроверки

OAuth 1 и 2 авторизация сущность и примеры

Принцип работы WebSocket в Laravel приложения реального времени с использованием з Echo / Reverb

Способы создания асинхронных ответов на чистом PHP или на Laravel (/backend)

Как уменьшить размер проекта Js Electron ?