ترافیک ماشینی برای اولین بار با ۵۷.۴٪ از ترافیک انسانی اینترنت پیشی گرفت

همه تصور می‌کنند که افزایش ترافیک خودکار اینترنت صرفاً ادامه همان فعالیت مخربی است که یک دهه است وب را آزار می‌دهد. مدل ذهنی غالب هنوز در اوایل دهه ۲۰۲۰ گیر کرده است، جایی که «ربات‌های بد» عمدتاً با حملات محروم‌سازی از سرویس توزیع‌شده (DDoS)، پر کردن اعتبارنامه و اسکرپرهای خام که سعی در سرقت داده‌های اختصاصی داشتند، مرتبط بودند. وقتی مردم می‌شنوند که ترافیک ماشینی در حال افزایش است، شبکه‌های اسپم و دلالان خودکار بلیط را تصور می‌کنند. اما داده‌هایی که نقطه عطف‌های اخیر اینترنت را هدایت می‌کنند، داستانی اساساً متفاوت را روایت می‌کنند. دلیل اینکه ترافیک ماشینی رسماً از ترافیک انسانی پیشی گرفته، فقط به این دلیل نیست که بازیگران مخرب عملیات خود را گسترش داده‌اند. بلکه به دلیل استقرار ناگهانی و انفجاری «هوش مصنوعی عاملیت‌محور» (Agentic AI) است. این‌ها سیستم‌های خودرانی هستند که فقط کورکورانه صفحات را اسکرپ نمی‌کنند؛ بلکه می‌خوانند، مقایسه می‌کنند، گردش‌های کاری پیچیده را اجرا می‌کنند و از طرف کاربران انسانی عمل می‌کنند.

در اواسط سال ۲۰۲۶، وب از یک آستانه تاریخی عبور کرد. بر اساس داده‌های لحظه‌ای پلتفرم رادار کلودفلر (Cloudflare)، درخواست‌های خودکار اکنون ۵۷.۴٪ از کل ترافیک HTTP HTML در سطح جهان را تشکیل می‌دهند، در حالی که فعالیت انسانی به سهم اقلیت ۴۲.۶٪ کاهش یافته است. متیو پرینس، مدیرعامل کلودفلر، در ابتدا پیش‌بینی کرده بود که ربات‌ها تا پایان سال ۲۰۲۷ از ترافیک انسانی پیشی خواهند گرفت. در عوض، سرعت محض استقرار عامل‌های هوش مصنوعی، این جدول زمانی را تقریباً ۱۸ ماه جلو انداخت. این اندازه‌گیری میلیاردها درخواست روزانه را پوشش می‌دهد و به عنوان یک نماینده مستقیم برای فعالیت لایه محتوا و برنامه‌های وب عمل می‌کند و تأیید می‌کند که اینترنت دیگر یک فضای تحت سلطه انسان نیست.[1][2]

برای درک اینکه چرا حجم ترافیک ماشینی به این سرعت رشد کرده است، لازم است به تفاوت‌های مکانیکی نحوه عملکرد انسان‌ها و عامل‌های هوش مصنوعی نگاه کنیم. هنگامی که یک کاربر انسانی می‌خواهد یک قطعه جدید از لوازم الکترونیکی مصرفی را خریداری کند، ممکن است به صورت دستی پنج وب‌سایت مختلف را باز کند تا قیمت‌ها را بررسی کند، نظرات را بخواند و جزئیات حمل و نقل را تأیید کند. او کلیک می‌کند، اسکرول می‌کند، می‌خواند و در نهایت تصمیم می‌گیرد. بار شبکه تولید شده توسط این قصد انسانی نسبتاً سبک است و توسط محدودیت‌های توجه انسان و سرعت تایپ دستی محدود می‌شود.

یک عامل هوش مصنوعی که وظیفه خرید دقیقاً مشابهی را بر عهده دارد، با سرعت ماشین و با پارامترهای کاملاً متفاوتی عمل می‌کند. به جای بازدید از پنج وب‌سایت، این عامل ممکن است به طور خودکار ۵۰۰۰ صفحه محصول مختلف را در صدها خرده‌فروش جهانی در عرض چند ثانیه جستجو کند. این عامل داده‌های API را می‌کشد، HTML بدون ساختار را تجزیه می‌کند تا تخفیف‌های پنهان را بیابد، روندهای قیمت‌گذاری تاریخی را مقایسه می‌کند و سطوح موجودی لحظه‌ای را بررسی می‌کند. یک قصد انسانی واحد – «بهترین معامله برای این دوربین را پیدا کن» – به هزاران درخواست ماشینی مجزا تبدیل می‌شود که به سرورها در سراسر جهان برخورد می‌کنند.[8]

این اثر ضرب‌کننده عظیم دلیلی است که ارائه‌دهندگان زیرساخت در مورد مقیاس آینده وب هشدار می‌دهند. توماس سایفرت، مدیر مالی کلودفلر، اخیراً هشدار داد که ترافیک غیرانسانی می‌تواند در پنج سال آینده ۱۰۰۰ برابر ترافیک انسانی شود. با این نسبت، کلیک‌های آغاز شده توسط انسان کمتر از ۰.۱٪ از کل فعالیت اینترنت را تشکیل می‌دهند و کاربران انسانی را به یک خطای آماری گرد کردن در زیرساخت شبکه تبدیل می‌کنند. این افزایش به این معنی نیست که اینترنت مصرف‌کنندگان بیشتری دارد؛ بلکه به این معنی است که پشت هر مصرف‌کننده، مجموعه‌ای گسترده از اسکریپت‌های خودکار و زنجیره‌های استنتاج مدل قرار دارد.[5][8]

ترکیب این ترافیک خودکار به شدت به سمت هوش مصنوعی متمایل است. بر اساس داده‌های شبکه کلودفلر، خزنده‌های هوش مصنوعی و ربات‌های جستجو اکنون تقریباً ۲۶.۷٪ از کل فعالیت ربات‌های تأیید شده را تشکیل می‌دهند. نرخ رشد برای مدل‌های خاص خیره‌کننده است: تنها GPTBot متعلق به OpenAI در طول سال گذشته ۳۰۵٪ افزایش ترافیک داشته است. در همین حال، شرکت امنیت سایبری دیتا دوم (DataDome) در سه‌ماهه دوم سال ۲۰۲۶، ۱۷.۷ میلیارد درخواست عامل هوش مصنوعی را ثبت کرد که نشان‌دهنده جهش ۴۵٪ نسبت به سه‌ماهه قبل است.[4][5]

صنعت گسترده‌تر امنیت سایبری این تغییر ساختاری را تأیید کرده است. گزارش «ربات‌های بد ۲۰۲۶» ایمپروا (Imperva)، که روندهای ترافیک خودکار جهانی را تحلیل می‌کند، نشان داد که ربات‌ها در سال ۲۰۲۵، ۵۳٪ از کل ترافیک وب را تشکیل می‌دادند و سپس در سال ۲۰۲۶ بیشتر شتاب گرفتند. این گزارش تأکید کرد که مهاجمان و عوامل قانونی به طور فزاینده‌ای رابط‌های کاربری سنتی را دور می‌زنند. تقریباً ۲۷٪ از کل حملات ربات‌ها اکنون مستقیماً رابط‌های برنامه‌نویسی کاربردی (API) را هدف قرار می‌دهند و در لایه داده عمل می‌کنند، جایی که می‌توانند اطلاعات را استخراج یا دستورات را با حداکثر کارایی اجرا کنند.[7]

این گذار، مدل اقتصادی اساسی را که اینترنت باز را برای بیش از دو دهه حفظ کرده است، در هم می‌شکند. وب حول محور قابلیت استفاده و توجه انسان طراحی شده بود و کل اکوسیستم تبلیغات دیجیتال، کسب درآمد ناشر و قیف‌های تبدیل تجارت الکترونیک بر این فرض تکیه دارد. اگر یک عامل هوش مصنوعی مقاله یک ناشر را بخواند تا اخبار را برای یک کاربر خلاصه کند، ناشر مجبور است هزینه‌های پهنای باند و محاسباتی آن بازیابی را تأمین کند، اما هیچ نمایش تبلیغاتی ثبت نمی‌کند و هیچ کلیک وابسته (affiliate) دریافت نمی‌کند.[6][8]

بار زیرساختی تحمیل شده بر اپراتورهای وب‌سایت به همان اندازه شدید است، زیرا یک بازیابی ماشینی به اندازه یک بازدید انسانی برای میزبان هزینه محاسباتی دارد. بنیاد ویکی‌مدیا (Wikimedia) ۵۰٪ افزایش در پهنای باند چندرسانه‌ای را گزارش کرد که تقریباً به طور کامل توسط اسکرپرها برای جمع‌آوری فایل‌های دارای مجوز آزاد آن برای آموزش هوش مصنوعی هدایت می‌شد. برای میزبان‌های مستقل کوچک‌تر و سایت‌های مستندسازی، هجوم ناگهانی خزنده‌های هوش مصنوعی می‌تواند منجر به هزاران دلار قبض سرور غیرمنتظره در طول یک شب شود و آن‌ها را مجبور کند تا انتخاب‌های زیرساختی را به عنوان تصمیمات مالی حیاتی در نظر بگیرند.[4]

در حالی که این پدیده جهانی است، تمرکز ترافیک ماشینی به طور نابرابر در مناطق مختلف توزیع شده است. تحلیل دکودو (Decodo) نشان داد که ایالات متحده ۵۳.۵٪ از کل ترافیک ربات جهانی را تشکیل می‌دهد. با این حال، هنگامی که به سهم داخلی فعالیت وب در کشورهای مختلف نگاه می‌کنیم، مراکز دیجیتال کوچک‌تر تمرکز بسیار بالاتری را نشان می‌دهند. در سنگاپور، سیستم‌های خودکار ۷۳.۷٪ از کل ترافیک وب محلی را تشکیل می‌دهند، در حالی که در ایرلند، ربات‌ها ۷۱.۱٪ از درخواست‌های داخلی را تشکیل می‌دهند که بسیار فراتر از سهم داخلی ۴۳.۶٪ مشاهده شده در ایالات متحده است.[3]

آنچه ثابت نشده باقی مانده این است که چگونه معماری زیربنایی اینترنت برای مدیریت این واقعیت جدید سازگار خواهد شد. اپراتورهای وب‌سایت در حال حاضر برای مدیریت این هجوم به ابزارهای خام تکیه می‌کنند، مانند مسدود کردن محدوده‌های IP یا به‌روزرسانی فایل‌های robots.txt برای ممنوعیت خزش. با این حال، انطباق با این کنترل‌های مؤدبانه به سرعت در حال کاهش است. داده‌های صنعت نشان می‌دهد که سهم ربات‌هایی که فعالانه پروتکل‌های robots.txt را نادیده می‌گیرند، تا اوایل سال ۲۰۲۵ تقریباً چهار برابر شده و به ۱۳٪ رسیده است، به این معنی که ترافیکی که به احتمال زیاد سرور را تحت فشار قرار می‌دهد، کمترین احتمال را دارد که به یک درخواست مؤدبانه برای توقف احترام بگذارد.[4]

راه‌حل بلندمدت احتمالاً شامل تغییرات ساختاری در نحوه ارائه و کسب درآمد از محتوای دیجیتال است. برخی از شرکت‌های آینده‌نگر در حال حاضر شروع به ساخت دو نسخه متمایز از وب‌سایت‌های خود کرده‌اند. یک نسخه از نظر بصری غنی، تعاملی و برای ۴۲.۶٪ از بازدیدکنندگانی که انسان هستند طراحی شده است. نسخه دیگر یک نسخه ساده شده و بومی API است که صرفاً برای خوانایی ماشین بهینه‌سازی شده و مهندسی شده است تا عامل‌های هوش مصنوعی را به طور کارآمد تغذیه کند، بدون اینکه داده‌های اختصاصی را فاش کند یا هزینه‌های عظیم رندر بصری را متحمل شود.[4]

اینترنت اساساً از یک فضای انسان‌محور به یک اکوسیستم ماشین به ماشین تبدیل شده است. کاربران انسانی به طور فزاینده‌ای به جای ناوبری مستقیم در وب، به دریافت‌کنندگان نهایی گردش‌های کاری خودکار تبدیل می‌شوند. چالش دهه آینده، ساخت ریل‌های اعتماد لازم، پروتکل‌های تأیید هویت و مدل‌های کسب درآمد بومی API است که برای حفظ زیرساخت دیجیتالی که اکثریت قریب به اتفاق بازدیدکنندگان آن ربات‌های خودران هستند، مورد نیاز است.[6]