HTTP
HTTP HTTP - протокол передачі гіпертексту, спосіб передачі інформації через Інтернет.

HTTP - протокол передачі гіпертексту (hyper text transfer protocol), спосіб передачі інформації через Інтернет. Був створений для передачі HTML файлів, проте зараз майже вся інформація з веб сайтів (аудіо, відео, зображення і тд) завантажується за допомогою цього протоколу. Протокол HTTP має кілька методів - для перевірки сайту, завантаження даних з цнього або ж для відправки певної інформації на сервер. Більше про методи можна дізнатись з цієї статті. Протокол HTTP має захищену версію - HTTPS

Цей протокол використовується клієнтами для перегляду веб сторінок. Таким чином, для перевірки сайту, слід також ним скористатись. Сервіси моніторингу веб сайтів, наприклад, HostTracker, здійснюють перевірки HTTP щоб відслідкувати роботу сайту.

  • CM.Glossary.WebsiteMonitoring
  • CM.Glossary.HTTPS
  • CM.Glossary.HTTPMethods
більше глосарій
Секрети моніторингу появи небажаного контенту на Вашому сайті

Сервіс ХостТрекер пропонує функцію моніторингу доступності веб-сторінки та її контенту. Цей вид моніторингу допоможе Вам перевіряти повноцінність завантаження сторінок зі складною структурою. Також Ви дізнаєтесь:

▶ В чому суть опції «Перевірка контенту»;

▶ ​Як її налаштувати;

▶ Методи запиту.

 

 

Сервіс ХостТрекер пропонує функцію моніторингу доступності веб-сторінки та її контенту. Цей вид моніторингу допоможе Вам перевіряти повноцінність завантаження сторінок зі складною структурою. Також існує і «обернена перевірка», яка стане у пригоді, якщо на сторінці періодично з'являються якісь помилки.

В чому суть?

Опція «Перевірка контенту» дає можливість відстежувати наявність ключових слів на конкретній сторінці, тобто перевіряти цілісність сайту. Однак у роботі, цього недостатньо і повсякчас можуть виникати такі питання: «А чи повністю завантажилися дані з бази? А чи немає на моєму сайті шкідливих скриптів?» тощо. Відповіді на ці питання криються у використанні спеціальних скриптів на стороні сервера. Саме серверні скрипти допомагають бути в курсі будь-яких змін у роботі веб-ресурсу, тобто вони можуть, наприклад, виводити Ок, якщо на диску достатньо місця або якщо в цілому все добре на думку розробника. Якщо так трапиться, що сайт нібито доступний користувачам, але насправді при завантаженні видає помилку, наприклад, «Error connect to mysql», то для цього слід налаштувати моніторинг на відсутність слова, наприклад, «Error». Також, як показує практика, дану функцію можна використовувати як тимчасове рішення для відстеження появи нецензурних слів у коментарях, вірусного коду тощо. Зокрема шкідливу активність можна виявляти за появою ключових слів скриптів. А як відомо, «Немає нічого більш постійного, ніж тимчасове».

Величезним плюсом є те, що перевірка дуже легко і швидко налаштовується, і не вимагає встановлення ніяких додаткового програмного забезпечення. Крім того, ця ж перевірка перевірить Ваш веб-сайт на доступність по http-протоколу, паралельно збираючи статистику по відповідних даних. Разом з цим, Ви маєте можливість вимірювати час відгуку і швидкість ресурсу, а також перевіряти веб-сайт на потрапляння в чорні списки DNSBL.

Налаштування, яке не займе багато часу

Ви вже готові здійснити перевірку контенту Вашої веб-сторінки? Тоді поїхали! Спершу Вам потрібно ввести URL сайту у відповідне поле (або ж натиснути «Додати список» - якщо буде потреба одночасної перевірки декількох веб-ресурсів). Зверніть увагу на поле «Перевірка контенту», адже саме в ньому через кому слід вказати всі необхідні слова для моніторингу. Більш того, в разі появи/зникнення відповідних виразів або будь-яких змін, Ви будете негайно проінформовані повідомленням на визначені адреси і/або телефони.

Також у наявності є опція розширеної перевірки контенту. Що ж вона собою являє? По-перше, дає можливість обрати тільки ті слова або фрази, які ви хочете/не маєте бажання бачити на Вашому сайті. По-друге, якщо ключових слів визначено багато, помилкою буде як зникнення всіх слів одночасно, так і якогось одного. Галочка напроти поля «Переходити по редиректу»  буде вказувати на те, що запиту дозволено слідувати до кінцевої сторінки на яку вказує редирект.

Методи запиту

Якщо натиснути на «Додаткові налаштування», Вам відкриється ряд додаткових опцій. Наприклад, метод перевірки: за замовчуванням для налаштування завдання встановлюється GET. Він дозволяє отримувати від сервера http-відповідь з тілом сторінки, яке потрібне для пошуку ключових слів. Також є метод POST, який може бути обраний для перевірки працездатності форми на сторінці. Тобто можливий такий сценарій: форма завантажується, заповнюється наперед визначеними значеннями, відправляється, отримується сторінка - на ній шукається відповідне слово. Таким чином можна перевіряти коректність роботи форми. Інші методи при перевірці контенту не використовуються.

 

більше блог
Благодарим за внимание к нашему сервису!
 
Вхід
Зареєструватись
Ціни та пакети
Наша мережа моніторингу
Home > Blog > part1

Чому існує така необхідність в моніторингу доступності сайтів і як він може стати у нагоді при тестуванні сайтів і серверів? Цей огляд дає вам відповіді на ці всі запитання, а також можливість переконатись, як просте бажання оптимізувати свою роботу, може перетворитися на корисний для інших продукт. Більш того, ви дізнаєтесь як не втратити дух стартаперства в сучасних умовах і завжди бути на одній хвилі зі своїми клієнтами.

Однією з лідерів на ринку серед компаній, які надають послуги моніторингу, є компанія ХостТрекер. Намагаючись йти в ногу зі всіма сучасними тенденціями і трендами, компанія володіє більшістю сучасних інструментів, які вона постійно удосконалює.

Як цю компанію заснували? Чому існує така необхідність в моніторингу і як він може стати у нагоді при тестуванні сайтів і серверів? Цей огляд дає вам відповіді на ці всі запитання, а також можливість переконатись, як просте бажання оптимізувати свою роботу, може перетворитися на корисний для інших продукт. Більш того, ви дізнаєтесь як не втратити дух стартаперства в сучасних умовах і завжди бути на одній хвилі зі своїми клієнтами.

Вступ та історія стартапу

Кожний програміст хоч раз стикався у своїй роботі з проблемою неочікуваної відмови у роботі нібито ідеально налаштованих серверів (сайтів, баз, програм, мереж тощо). На пошук цієї проблеми може бути витрачено багато часу. Протягом цього періоду, ця проблема може з'являтися постійно, періодично або зникнути зовсім, останнє найгірше – ви не зможете передбачити, коли вона нагадає про себе знову, а якщо саме в момент передачі проекта клієнту? Для того, щоб уникнути таких моментів і з'явився ХостТрекер. Засновник проекту завжди вирізнявся прискіпливістю до деталей і намагався оптимізувати роботу об'єктів основного свого виду діяльності якнайкраще. Звичайно, якщо б на той момент (початок 2000) існували надійні моніторингові сервіси, напевно, ХостТрекер ніколи б і не з'явився. Однак, в той час була така необхідність. Спершу виникла ідея написати простенький скрипт для перевірки своїх сайтів, але в нього виникла та ж проблема, описана раніше. Частенько бувало, що він не працював взагалі або відпрацьовував некоректно. Тому було вирішено оптимізувати цей скрипт, шляхом дублювання і розподілу на декілька машин. Після ряду оптимізацій, прийшли до висновку, що це може бути корисним для інших і так ХостТрекер «вийшов з тіні». Між іншим, з появою великої кількості клієнтів, з'явилася можливість отримувати дохід від цього сервісу. Отже, як ви могли переконатись, цей проект з'явився для вирішення власних проблем, але, в кінці кінців, переріс в сервіс, який, на разі, має на меті допомагати іншим у вирішенні їхніх проблем, аналогічних до тих, які свого часу постали перед нами. Адже, дійсно, не у всіх є час написати маленький скрипт, потім його ще трішки дописати, оптимізувати і т.д.

Моніторинг та його суть

Ця частина огляду дає вам можливість познайомитися з найбільш популярною функцією – регулярною перевіркою для швидкого і своєчасного виявлення існуючих на даний момент проблем із сайтом або іншим мережевим інструментом. Ці перевірки можуть працювати згідно різних протоколів, наприклад, http(s), icmp (пінг), port (перевірка будь-якого порту по протоколу TCP) тощо. Існує два типи моніторингу: внутрішній і зовнішній. Внутрішній – це коли стан сайту оцінюється за рахунок ПЗ, яке розміщено на цьому ж сервері. До цього типу можна віднести, наприклад, Google Analytics або Яндекс.Метрику, в ній вбудований в код сторінки скрипт відсилає інформацію про клієнтів, які зайшли на сайт, і має можливість робити непрямі висновки про працездатність сайту. В свою чергу, зовнішній (юрид. «моніторинг третьою стороною») – полягає в імітації заходження на сайт користувачів з реальних адрес, і робить висновки по, відповідно, реальним відповідям серверів на відправлені запити. Далі мова йтиме про нього.

Інфраструктура або яким чином це все побудовано

Інфраструктуру можна умовно поділити на дві частини: внутрішню і зовнішню. Внутрішня розміщена в хмарі, складається з обчислювальних серверів, баз даних, файлових сховищ тощо, та належить співробітникам ХостТрекера, які здійснюють моніторинг та управління цими системами. Зовнішня – складається з нодів (агентів), які розташовані по всьому світі і здійснюють незалежну перевірку серверів, аналогічно до «таємних покупців» в магазинах. Перевірка здійснюється за рахунок створення стандартних запитів для протокола, який перевіряється. Наприклад, якщо це перевірка веб-сайту, то генеруються стандартні http запити, які нічим не відрізняються від запитів реальних користувачів. Ці сервери є повністю незалежними один від одного і від внутрішньої складової системи. Основне, що вони роблять – отримують від центрального сервера перелік сайтів для перевірки  і віддають результати цих перевірок. Частину цих серверів орендує ХостТрекер, але більшість належить партнерам, які надають їх безкоштовно або зі значною знижкою у відповідь на зворотні посилання або знижки на наші послуги, або просто по дружбі.

Такий розподіл інфраструктури обумовлено алгоритмом роботи сервісу моніторингу.

Алгоритм роботи сервісу

Клієнт завчасно визначає інтервали регулярних перевірок (починаючи з 1 хв). Коли настає час перевірки, сервер посилає завдання на один, випадково обраний, агент, який є частиною зовнішньої мережі ХостТрекера. Він робить перевірку по обраному протоколу і посилає у відповідь сервера, який перевіряє. Якщо відповідь позитивна – з'являється просто запис у базі (лог перевірки), інакше, у випадку, коли була помічена помилка, - створюються таски по перевірці цього ж сайту іншими серверами, знову таки обраними навмання з загальної мережі. В цьому випадку аналізуються відповіді всіх цих серверів. Якщо ж помилка не підтверджена більшістю або всіма – то, дійсно, ми маємо справу з серйозною проблемою і, скоріш за все, в цей момент більшість людей не можуть потрапити на сайт. А це вже серйозна загроза для прибутку компаній.

Обробка помилок та сповіщення клієнтів про них

Відповідно до ваших налаштувань, можуть виникати різні проблеми. Тому зразу ж відбувається первинна діагностика проблеми: записується код наявної помилки або відповідь протоколу. На основі цих даних робиться висновок про причини помилки (збій мережі, помилка сервера тощо). Однак, першочергово клієнт зацікавлений в тому, щоб взагалі дізнатися про те, що помилка існує. Саме для цього й існує можливість зареєструвати свою електронну адресу, телефон або інші канали зв'язку, щоб отримувати сповіщення від ХостТрекера. Ці сповіщення можуть бути надіслані різним людям, на різні адреси, в різний час. Однак, в наш час цього недостатньо, «вимогливий» клієнт вимагає іншого підходу.

По перше, є «неважливі» сайти і, відповідно, якщо на них спостерігається короткостроковий простій, не хотілося б будити адміністратора на рахунок цього. Тому ХостТрекер надає можливість підключити функцію ескалації сповіщень, яка надсилатиме сповіщення лише тільки через певний час після падіння, і лише в тому випадку, якщо сайт не зміг поновити свою роботу самостійно. Також користувачам надається можливість точно вказувати час, коли вони хочуть приймати ці сповіщення, тобто створювати певний «робочий графік». Наприклад, користувач може задати робочі годи з 8 до 19, в такому випадку йому буде надсилатися сповіщення лише тоді, коли сайт буде недоступний годину і більше.

В наступних публікаціях ми познайомимо вас з іншим функціоналом сервісу, а також з історією його розробки і виникнення, як його можна застосовувати в сучасних умовах тощо. Наш продукт орієнтований на клієнта, а тому більшість функціоналу було розроблено згідно запитів і рекомендацій клієнтів та партнерів для покращення їхньої роботи. Тому, не соромтесь, пишіть, ми завжди відкриті для нових ідей та порад.

Поделиться:
Send to Twitter Send to Facebook Send to LinkedIn Share on Google+
Блоги:
HostTracker blog HostTracker page on Facebook
Безготівковий
розрахунок