ພວກເຮົາກໍານົດ bots "ຊົ່ວຮ້າຍ" ທີ່ມີທ່າແຮງແລະສະກັດພວກເຂົາໂດຍ IP

ມື້ທີ່ດີ! ໃນບົດຄວາມຂ້າພະເຈົ້າຈະບອກທ່ານວ່າຜູ້ໃຊ້ຂອງໂຮດຕິ້ງປົກກະຕິສາມາດຈັບທີ່ຢູ່ IP ທີ່ເຮັດໃຫ້ເກີດການໂຫຼດຫຼາຍເກີນໄປໃນເວັບໄຊທ໌ແລະຫຼັງຈາກນັ້ນສະກັດພວກເຂົາໂດຍໃຊ້ເຄື່ອງມືໂຮດຕິ້ງ, ຈະມີ "ເລັກນ້ອຍ" ລະຫັດ php, ສອງສາມຫນ້າຈໍ.

ການປ້ອນຂໍ້ມູນ:

1. ເວັບໄຊທ໌ທີ່ສ້າງຂຶ້ນໃນ CMS WordPress
2. Hosting Beget (ນີ້ບໍ່ແມ່ນການໂຄສະນາ, ແຕ່ພາບຫນ້າຈໍຂອງກະດານ admin ຈະມາຈາກຜູ້ໃຫ້ບໍລິການໂຮດຕິ້ງນີ້ໂດຍສະເພາະ)
3. ເວັບໄຊທ໌ WordPress ໄດ້ຖືກເປີດຕົວຢູ່ບ່ອນໃດຫນຶ່ງໃນຕົ້ນປີ 2000 ແລະມີບົດຄວາມແລະວັດສະດຸຈໍານວນຫລາຍ
4. PHP ເວີຊັ່ນ 7.2
5. WP ມີສະບັບຫລ້າສຸດ
6. ສໍາລັບບາງເວລາໃນປັດຈຸບັນ, ເວັບໄຊທ໌ໄດ້ເລີ່ມສ້າງການໂຫຼດສູງໃນ MySQL ອີງຕາມຂໍ້ມູນໂຮດຕິ້ງ. ທຸກໆມື້ມູນຄ່ານີ້ເກີນ 120% ຂອງມາດຕະຖານຕໍ່ບັນຊີ
7. ອີງຕາມ Yandex. ເວັບໄຊທ໌ Metrica ແມ່ນໄປຢ້ຽມຢາມ 100-200 ຄົນຕໍ່ມື້

ກ່ອນອື່ນ ໝົດ, ນີ້ແມ່ນເຮັດໄດ້:

1. ຕາຕະລາງຖານຂໍ້ມູນໄດ້ຖືກເກັບກູ້ຂີ້ເຫຍື້ອສະສົມ
2. ປັ໊ກອິນທີ່ບໍ່ຈໍາເປັນຖືກປິດໃຊ້ງານ, ພາກສ່ວນຂອງລະຫັດທີ່ລ້າສະໄຫມໄດ້ຖືກລຶບອອກ

ໃນເວລາດຽວກັນ, ຂ້າພະເຈົ້າຢາກຈະດຶງດູດຄວາມສົນໃຈຂອງທ່ານກັບຄວາມຈິງທີ່ວ່າທາງເລືອກຖານຄວາມຈໍາ (caching plugins) ໄດ້ຖືກພະຍາຍາມ, ການສັງເກດການໄດ້ຖືກເຮັດ - ແຕ່ການໂຫຼດຂອງ 120% ຈາກເວັບໄຊທ໌ຫນຶ່ງແມ່ນບໍ່ປ່ຽນແປງແລະພຽງແຕ່ສາມາດເຕີບໂຕໄດ້.

ການໂຫຼດໂດຍປະມານຢູ່ໃນຖານຂໍ້ມູນໂຮດຕິ້ງເບິ່ງຄືແນວໃດ

ຢູ່ເທິງສຸດແມ່ນເວັບໄຊທ໌ໃນຄໍາຖາມ, ພຽງແຕ່ຂ້າງລຸ່ມນີ້ແມ່ນເວັບໄຊທ໌ອື່ນໆທີ່ມີ cms ດຽວກັນແລະປະມານການຈະລາຈອນດຽວກັນ, ແຕ່ສ້າງການໂຫຼດຫນ້ອຍ.

Анализ

• ຄວາມພະຍາຍາມຫຼາຍຢ່າງໄດ້ເຮັດດ້ວຍທາງເລືອກໃນການເກັບຂໍ້ມູນ, ການສັງເກດການໄດ້ດໍາເນີນໃນໄລຍະຫຼາຍອາທິດ (ໂຊກດີ, ໃນເວລານີ້ hosting ບໍ່ເຄີຍຂຽນຫາຂ້ອຍວ່າຂ້ອຍບໍ່ດີແລະຈະຖືກຕັດການເຊື່ອມຕໍ່)
• ມີການວິເຄາະແລະການຄົ້ນຫາແບບສອບຖາມທີ່ຊ້າ, ຫຼັງຈາກນັ້ນໂຄງສ້າງຖານຂໍ້ມູນແລະປະເພດຕາຕະລາງໄດ້ຖືກປ່ຽນແປງເລັກນ້ອຍ
• ສໍາລັບການວິເຄາະ, ພວກເຮົາຕົ້ນຕໍໃຊ້ AWStats ທີ່ມີການກໍ່ສ້າງ (ໂດຍວິທີທາງການ, ມັນຊ່ວຍຄິດໄລ່ທີ່ຢູ່ IP ທີ່ຮ້າຍແຮງທີ່ສຸດໂດຍອີງໃສ່ປະລິມານການຈະລາຈອນ.
• Metric - metric ສະຫນອງຂໍ້ມູນພຽງແຕ່ກ່ຽວກັບຄົນ, ບໍ່ແມ່ນກ່ຽວກັບ bots
• ມີຄວາມພະຍາຍາມທີ່ຈະໃຊ້ plugins ສໍາລັບ WP ທີ່ສາມາດກັ່ນຕອງແລະສະກັດຜູ້ມາຢ້ຽມຢາມເຖິງແມ່ນວ່າປະເທດຂອງສະຖານທີ່ແລະການປະສົມປະສານຕ່າງໆ
• ວິທີການທີ່ຮຸນແຮງຢ່າງສົມບູນໄດ້ກາຍເປັນການປິດເວັບໄຊທ໌ສໍາລັບມື້ຫນຶ່ງດ້ວຍບັນທຶກ "ພວກເຮົາຢູ່ພາຍໃຕ້ການບໍາລຸງຮັກສາ" - ນີ້ແມ່ນເຮັດໄດ້ໂດຍໃຊ້ plugin ທີ່ມີຊື່ສຽງ. ໃນກໍລະນີນີ້, ພວກເຮົາຄາດຫວັງວ່າການໂຫຼດຈະຫຼຸດລົງ, ແຕ່ບໍ່ແມ່ນຄ່າສູນ, ເພາະວ່າອຸດົມການ WP ແມ່ນອີງໃສ່ hooks ແລະ plugins ເລີ່ມຕົ້ນກິດຈະກໍາຂອງພວກເຂົາເມື່ອ "hook" ເກີດຂື້ນ, ແລະກ່ອນທີ່ "hook" ເກີດຂື້ນ, ການຮ້ອງຂໍກັບຖານຂໍ້ມູນສາມາດ ເຮັດແລ້ວ

Idea

1. ການຄິດໄລ່ທີ່ຢູ່ IP ທີ່ເຮັດໃຫ້ການຮ້ອງຂໍຫຼາຍໃນໄລຍະເວລາສັ້ນໆ.
2. ບັນທຶກຈໍານວນ hits ກັບເວັບໄຊທ໌
3. ຂັດຂວາງການເຂົ້າເຖິງເວັບໄຊທ໌ໂດຍອີງໃສ່ຈໍານວນ hits
4. ບລັອກໂດຍໃຊ້ "ປະຕິເສດຈາກ" ຢູ່ໃນໄຟລ໌ .htaccess
5. ຂ້ອຍບໍ່ໄດ້ພິຈາລະນາທາງເລືອກອື່ນ, ເຊັ່ນ iptables ແລະກົດລະບຽບສໍາລັບ Nginx, ເພາະວ່າຂ້ອຍກໍາລັງຂຽນກ່ຽວກັບການເປັນເຈົ້າພາບ.

ຄວາມຄິດໄດ້ປະກົດຂຶ້ນ, ສະນັ້ນມັນຈໍາເປັນຕ້ອງໄດ້ປະຕິບັດ, ໂດຍບໍ່ມີການນີ້ ...

• ການສ້າງຕາຕະລາງເພື່ອສະສົມຂໍ້ມູນ

  CREATE TABLE `wp_visiters_bot` (
  	`id` INT(11) NOT NULL AUTO_INCREMENT,
  	`ip` VARCHAR(300) NULL DEFAULT NULL,
  	`browser` VARCHAR(500) NULL DEFAULT NULL,
  	`cnt` INT(11) NULL DEFAULT NULL,
  	`request` TEXT NULL,
  	`input` TEXT NULL,
  	`data_update` DATETIME NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP,
  	PRIMARY KEY (`id`),
  	UNIQUE INDEX `ip` (`ip`)
  )
  COMMENT='Кандидаты для блокировки'
  COLLATE='utf8_general_ci'
  ENGINE=InnoDB
  AUTO_INCREMENT=1;
  

  CREATE TABLE `wp_visiters_bot_blocked` (
  	`id` INT(11) NOT NULL AUTO_INCREMENT,
  	`ip` VARCHAR(300) NOT NULL,
  	`data_update` DATETIME NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP,
  	PRIMARY KEY (`id`),
  	UNIQUE INDEX `ip` (`ip`)
  )
  COMMENT='Список уже заблокированных'
  COLLATE='utf8_general_ci'
  ENGINE=InnoDB
  AUTO_INCREMENT=59;
  

  CREATE TABLE `wp_visiters_bot_history` (
  	`id` INT(11) NOT NULL AUTO_INCREMENT,
  	`ip` VARCHAR(300) NULL DEFAULT NULL,
  	`browser` VARCHAR(500) NULL DEFAULT NULL,
  	`cnt` INT(11) NULL DEFAULT NULL,
  	`data_update` DATETIME NULL DEFAULT CURRENT_TIMESTAMP ON UPDATE CURRENT_TIMESTAMP,
  	`data_add` DATETIME NULL DEFAULT CURRENT_TIMESTAMP,
  	PRIMARY KEY (`id`),
  	UNIQUE INDEX `ip` (`ip`)
  )
  COMMENT='История всех запросов для дебага'
  COLLATE='utf8_general_ci'
  ENGINE=InnoDB
  AUTO_INCREMENT=1;
  

• ໃຫ້ສ້າງໄຟລ໌ທີ່ພວກເຮົາຈະວາງລະຫັດ. ລະຫັດຈະບັນທຶກໃນຕາຕະລາງຜູ້ສະຫມັກທີ່ຂັດຂວາງແລະຮັກສາປະຫວັດການດີບັກ.

  ລະຫັດໄຟລ໌ສໍາລັບການບັນທຶກທີ່ຢູ່ IP

  <?php
  
  if (!defined('ABSPATH')) {
      return;
  }
  
  global $wpdb;
  
  /**
   * Вернёт конкретный IP адрес посетителя
   * @return boolean
   */
  function coderun_get_user_ip() {
  
      $client_ip = '';
  
      $address_headers = array(
          'HTTP_CLIENT_IP',
          'HTTP_X_FORWARDED_FOR',
          'HTTP_X_FORWARDED',
          'HTTP_X_CLUSTER_CLIENT_IP',
          'HTTP_FORWARDED_FOR',
          'HTTP_FORWARDED',
          'REMOTE_ADDR',
      );
  
      foreach ($address_headers as $header) {
          if (array_key_exists($header, $_SERVER)) {
  
              $address_chain = explode(',', $_SERVER[$header]);
              $client_ip = trim($address_chain[0]);
  
              break;
          }
      }
  
      if (!$client_ip) {
          return '';
      }
  
  
      if ('0.0.0.0' === $client_ip || '::' === $client_ip || $client_ip == 'unknown') {
          return '';
      }
  
      return $client_ip;
  }
  
  $ip = esc_sql(coderun_get_user_ip()); // IP адрес посетителя
  
  if (empty($ip)) {// Нет IP, ну и идите лесом...
      header('Content-type: application/json;');
      die('Big big bolt....');
  }
  
  $browser = esc_sql($_SERVER['HTTP_USER_AGENT']); //Данные для анализа браузера
  
  $request = esc_sql(wp_json_encode($_REQUEST)); //Последний запрос который был к сайту
  
  $input = esc_sql(file_get_contents('php://input')); //Тело запроса, если было
  
  $cnt = 1;
  
  //Запрос в основную таблицу с временными кондидатами на блокировку
  $query = <<<EOT
      INSERT INTO wp_visiters_bot (`ip`,`browser`,`cnt`,`request`,`input`)
          VALUES  ('{$ip}','{$browser}','{$cnt}','{$request}','$input')
           ON DUPLICATE KEY UPDATE cnt=cnt+1,request=VALUES(request),input=VALUES(input),browser=VALUES(browser)
  EOT;
  
  //Запрос для истории
  $query2 = <<<EOT
      INSERT INTO wp_visiters_bot_history (`ip`,`browser`,`cnt`)
          VALUES  ('{$ip}','{$browser}','{$cnt}')
           ON DUPLICATE KEY UPDATE cnt=cnt+1,browser=VALUES(browser)
  EOT;
  
  
  $wpdb->query($query);
  
  $wpdb->query($query2);
  
  

  ໂດຍເນື້ອແທ້ແລ້ວຂອງລະຫັດແມ່ນເພື່ອເອົາທີ່ຢູ່ IP ຂອງຜູ້ເຂົ້າຊົມແລະຂຽນມັນເຂົ້າໄປໃນຕາຕະລາງ. ຖ້າ ip ຢູ່ໃນຕາຕະລາງແລ້ວ, ພາກສະຫນາມ cnt ຈະຖືກເພີ່ມຂຶ້ນ (ຈໍານວນຄໍາຮ້ອງຂໍໄປຫາເວັບໄຊທ໌)

• ດຽວນີ້ສິ່ງທີ່ ໜ້າ ຢ້ານ ... ດຽວນີ້ພວກເຂົາຈະເຜົາຂ້ອຍ ສຳ ລັບການກະ ທຳ ຂອງຂ້ອຍ :)
  ເພື່ອບັນທຶກແຕ່ລະຄໍາຮ້ອງຂໍໄປຫາເວັບໄຊທ໌, ພວກເຮົາເຊື່ອມຕໍ່ລະຫັດໄຟລ໌ກັບໄຟລ໌ WordPress ຕົ້ນຕໍ - wp-load.php . ແມ່ນແລ້ວ, ພວກເຮົາປ່ຽນໄຟລ໌ kernel ແລະຊັດເຈນຫຼັງຈາກຕົວແປທົ່ວໂລກ $wpdb ມີຢູ່ແລ້ວ.

ດັ່ງນັ້ນ, ຕອນນີ້ພວກເຮົາສາມາດເຫັນໄດ້ວ່ານີ້ຫຼືທີ່ຢູ່ IP ຖືກຫມາຍຢູ່ໃນຕາຕະລາງຂອງພວກເຮົາເລື້ອຍໆເທົ່າໃດແລະດ້ວຍຈອກກາເຟທີ່ພວກເຮົາເບິ່ງຢູ່ທີ່ນັ້ນທຸກໆ 5 ນາທີເພື່ອເຂົ້າໃຈຮູບພາບ.

ຫຼັງຈາກນັ້ນ, ພຽງແຕ່ຄັດລອກ IP ທີ່ "ເປັນອັນຕະລາຍ", ເປີດໄຟລ໌ .htaccess ແລະເພີ່ມມັນໃສ່ໃນຕອນທ້າຍຂອງໄຟລ໌.

Order allow,deny
Allow from all
# start_auto_deny_list
Deny from 94.242.55.248
# end_auto_deny_list

ນັ້ນແມ່ນ, ຕອນນີ້ 94.242.55.248 - ບໍ່ມີການເຂົ້າເຖິງເວັບໄຊທ໌ແລະບໍ່ໄດ້ສ້າງການໂຫຼດໃນຖານຂໍ້ມູນ.

ແຕ່ທຸກໆຄັ້ງທີ່ຄັດລອກດ້ວຍມືແບບນີ້ບໍ່ແມ່ນວຽກທີ່ຊອບທໍາຫຼາຍ, ແລະນອກຈາກນັ້ນ, ລະຫັດແມ່ນມີຈຸດປະສົງເພື່ອໃຫ້ເປັນເອກະລາດ.

ໃຫ້ເພີ່ມໄຟລ໌ທີ່ຈະຖືກປະຕິບັດຜ່ານ CRON ທຸກໆ 30 ນາທີ:

ລະຫັດໄຟລ໌ດັດແກ້ .htaccess

<?php

/**
 * Файл автоматического задания блокировок по IP адресу
 * Должен запрашиваться через CRON
 */
if (empty($_REQUEST['key'])) {
    die('Hello');
}

require('wp-load.php');

global $wpdb;

$limit_cnt = 70; //Лимит запросов по которым отбирать

$deny_table = $wpdb->get_results("SELECT * FROM wp_visiters_bot WHERE cnt>{$limit_cnt}");

$new_blocked = [];

$exclude_ip = [
    '87.236.16.70'//адрес хостинга
];

foreach ($deny_table as $result) {

    if (in_array($result->ip, $exclude_ip)) {
        continue;
    }

    $wpdb->insert('wp_visiters_bot_blocked', ['ip' => $result->ip], ['%s']);
}

$deny_table_blocked = $wpdb->get_results("SELECT * FROM wp_visiters_bot_blocked");

foreach ($deny_table_blocked as $blocked) {
    $new_blocked[] = $blocked->ip;
}

//Очистка таблицы
$wpdb->query("DELETE FROM wp_visiters_bot");

//echo '<pre>';print_r($new_blocked);echo '</pre>';

$file = '.htaccess';

$start_searche_tag = 'start_auto_deny_list';

$end_searche_tag = 'end_auto_deny_list';

$handle = @fopen($file, "r");
if ($handle) {

    $replace_string = '';//Тест для вставки в файл .htaccess

    $target_content = false; //Флаг нужного нам участка кода

    while (($buffer = fgets($handle, 4096)) !== false) {

        if (stripos($buffer, 'start_auto_deny_list') !== false) {
            $target_content = true;
            continue;
        }

        if (stripos($buffer, 'end_auto_deny_list') !== false) {
            $target_content = false;

            continue;
        }

        if ($target_content) {
            $replace_string .= $buffer;
        }
    }
    if (!feof($handle)) {
        echo "Ошибка: fgets() неожиданно потерпел неудачуn";
    }
    fclose($handle);
}

//Текущий файл .htaccess
$content = file_get_contents($file);

$content = str_replace($replace_string, '', $content);

//Очищаем все блокировки в файле .htaccess
file_put_contents($file, $content);

//Запись новых блокировок
$str = "# {$start_searche_tag}" . PHP_EOL;

foreach ($new_blocked as $key => $value) {
    $str .= "Deny from {$value}" . PHP_EOL;
}

file_put_contents($file, str_replace("# {$start_searche_tag}", $str, file_get_contents($file)));

ລະຫັດໄຟລ໌ແມ່ນຂ້ອນຂ້າງງ່າຍດາຍແລະ primitive ແລະແນວຄວາມຄິດຕົ້ນຕໍຂອງມັນແມ່ນການເອົາຜູ້ສະຫມັກສໍາລັບການສະກັດແລະໃສ່ກົດລະບຽບການສະກັດໃນໄຟລ໌ .htaccess ລະຫວ່າງຄໍາເຫັນ.
# start_auto_deny_list ແລະ # end_auto_deny_list

ໃນປັດຈຸບັນ IPs "ອັນຕະລາຍ" ຖືກບລັອກດ້ວຍຕົນເອງ, ແລະໄຟລ໌ .htaccess ມີລັກສະນະຄ້າຍຄືນີ້:

# BEGIN WordPress
<IfModule mod_rewrite.c>
RewriteEngine On
RewriteBase /
RewriteRule ^index.php$ - [L]
RewriteCond %{REQUEST_FILENAME} !-f
RewriteCond %{REQUEST_FILENAME} !-d
RewriteRule . /index.php [L]
</IfModule>

# END WordPress

Order allow,deny
Allow from all

# start_auto_deny_list
Deny from 94.242.55.248
Deny from 207.46.13.122
Deny from 66.249.64.164
Deny from 54.209.162.70
Deny from 40.77.167.86
Deny from 54.146.43.69
Deny from 207.46.13.168
....... ниже другие адреса
# end_auto_deny_list

ດັ່ງນັ້ນ, ຫຼັງຈາກລະຫັດນີ້ເລີ່ມເຮັດວຽກ, ທ່ານສາມາດເບິ່ງຜົນໄດ້ຮັບໃນກະດານໂຮດຕິ້ງ:

PS: ເອກະສານແມ່ນຂອງຜູ້ຂຽນ, ເຖິງແມ່ນວ່າຂ້ອຍໄດ້ເຜີຍແຜ່ສ່ວນຫນຶ່ງຂອງມັນຢູ່ໃນເວັບໄຊທ໌ຂອງຂ້ອຍ, ຂ້ອຍໄດ້ຮັບສະບັບທີ່ຂະຫຍາຍຫຼາຍຂຶ້ນໃນ Habre.

ແຫຼ່ງຂໍ້ມູນ: www.habr.com