🖥 آزمایشی که تاثیر ربات‌های پنهان اینترنت را آشکار کرد!

یک پژوهشگر برای یک تست ساده یک دامنه‌ جدید خرید و تنها یک فایل خالی HTML روی آن قرار داد. این وبسایت نه محتوا داشت، نه CSS و نه حتی یک تصویر. فقط یک جمله روی صفحه بود:
«Why are you here?»

☄️ اما چند روز بعد Cloudflare برای او پیام تبریک فرستاد؛ آمار سایت از هزار بازدید عبور کرده بود. کمی بعد مشخص شد تعداد واقعی بازدیدها در کمتر از یک ماه به بیش از ۳۰ هزار رسیده است، آن هم بدون آن‌که حتی یک کاربر واقعی وارد سایت شده باشد. ترافیک از کشورهایی مانند آمریکا و هنگ‌کنگ می‌آمد و همین صفحه‌ خالی بیش از ۶۳ مگابایت پهنای‌باند مصرف کرده بود.

❗️ کارشناسان امنیت توضیح می‌دهند که دامنه‌های جدید بلافاصله وارد فهرست‌های عمومی می‌شوند و انواع ربات‌ها شروع به اسکن آن‌ها می‌کنند. این ربات‌ها شامل خزنده‌های موتورهای جستجو، اسکنرهای امنیتی، ربات‌های تجاری و حتی اسکنرهای مخرب هستند که به‌دنبال ضعف‌ها، فرم‌ها، صفحه‌های ورود و فایل‌های سنگین می‌گردند.

📊 طبق داده‌های Cloudflare Radar حدود ۳۰ درصد ترافیک اینترنت همین درخواست‌های خودکار توسط ربات‌ها است.

⚠️ مشکل اصلی این است که این بازدیدها فقط آمار را غیرواقعی نمی‌کنند، بلکه می‌توانند به‌راحتی باعث هزینه‌های سنگین شوند. بسیاری از صاحبان سایت حتی متوجه نمی‌شوند چرا پهنای‌باندشان تمام شده یا چرا سرویس‌های ابری‌شان ناگهان هزینه‌های غیرمنتظره ثبت کرده‌اند.

💡 اگر شما صاحب سایت هستید باید بدانید:
هیچ سایتی حتی یک صفحه‌ خالی نباید بدون لایه‌های پایه‌ی امنیت و فایروال منتشر شود.
🛡 کارشناسان توصیه می‌کنند از همان روز اول از ابزارهایی مانند WAF، فیلتر بات‌ها، محدودیت نرخ درخواست، نظارت بر مسیرهای مدیریتی و تنظیم دقیق آنالیتیکس استفاده شود تا ترافیک انسانی از ترافیک رباتی قابل تشخیص و جداسازی باشد.