Bot Trafik Nedir ve Trafik Raporlama Dolandırmak İçin Nasıl Kullanılır?

Site ziyaretlerindeki artış, site yavaşlamalarına, performansın düşmesine, kaynakların aşırı yüklenmesine, bozuk ziyaretlere, tıklama istatistiklerine, SEO üzerinde olumsuz etkiye ve DDoS ve kimlik avı saldırılarına karşı artan güvenlik açığına neden olabilir.

‍Sitenize gelen trafiği analiz etmek istiyorsanız, belirli sayfaların görüntülenmesindeki sıçrama, yüksek hemen çıkma oranı, sayfada alışılmadık derecede uzun veya kısa süre, geçersiz veya eksik dönüşümler ve sizin yapmadığınız bölgelerdeki toplu yönlendirmeler için sayaca bakın. reklam ver.

İnternet trafiğinin ne kadarı botlar tarafından oluşturuluyor? Tahminler değişir. Bununla birlikte, bot yönlendirmelerinin tüm küresel web trafiğinin yaklaşık %42'sini oluşturduğunu ve bunun yarısından fazlasının "kötü" botlara ait olduğunu varsayabiliriz.

Robotlar her zaman siteyi ziyaret eder — bu, modern İnternet'in yalnızca bir parçasıdır ve arama motorları bile kaynakları bu şekilde dizine ekler. Ancak botların (veya otomatik tarayıcıların) yardımıyla verileri ayrıştırabilir, yani web kaynaklarından bilgi çıkarabilirsiniz. Buna dahil olan bot, sitede basit otomatik eylemler gerçekleştiren bir program veya komut dosyasıdır:

1. Sayfa kodu kaldırılıyor.
2. Onu oluşturan unsurlara bölmek.
3. Veriler ayıklanıyor.
4. Veritabanına kaydediyor.

Böyle bir koleksiyonun amaçları farklı olabilir. Çoğu durumda, web siteleri rakiplerin sayfalarından belirli verileri almak için kazınır ve bu veriler daha sonra kaynaklarında kullanılabilir ve kötü niyetli saldırılar gerçekleştirebilir. Yine de ayrıştırma, kendi içinde korkunç bir şey ifade etmeyen analitik veya araştırma amaçları için yararlıdır.

‍Bot trafiğinin nasıl belirleneceği konusuna girmeden önce, sınıflandırmayı öğrenmeliyiz. Botları yararlı (iyi) ve kötü amaçlı (kötü) olarak ikiye ayırabiliriz.

Yararlı botlar

Bunlar ihtiyacımız olan robotlar. İnternette gerekli işlemleri yaparlar. Değerli ve karmaşık işleri mümkün olan en kısa sürede gerçekleştirmeye yardımcı olurlar. Ayrıca, bir kişinin aksine, çok büyük miktarda veriyi işleyebildikleri için rutin işlemleri otomatik hale getirirler.

Kötü amaçlı botlar

Ne yazık ki, İnterneti iyileştirmeye yönelik her "iyi" bot için, daha az değerli bir şey yapmak için kötü niyetli bir bot olacaktır. Örneğin, botlar tarafından reklam trafiğini aldatmak için. Bakalım "kötü" robotlar nelermiş.

Bunlar, Botfaqtor gibi bot engelleme hizmetlerinin her gün karşılaştığı bazı kötü amaçlı etkinliklerdir.

Pazarlamacıların ve SEO'ların ek trafiğe ihtiyaç duyduğu birçok seçenek vardır. Ancak bunların neredeyse tamamı affiliate marketing düzleminde yer almaktadır.

Alım Satım Siteleri

Web siteleri satmak büyük bir iştir. Gerçek hayatta olduğu gibi, ticari dijital emlak da tüm şekil, boyut ve koşullarda gelir. Daha fazla satış veya para kazanma için bir kaynağı veya çevrimiçi işletmeyi "düzenlemeye" zaman ve para harcamak isteyenler büyük para içindedir.

Sitenin çok sayıda ziyaretçisi varsa, potansiyel bir alıcıya siteye reklam içeriği yerleştirerek ne gibi avantajlar sağlayabileceğini gösterebilirsiniz. Bu nedenle, satıcının bakış açısından, botların yardımıyla trafik rakamlarını yapay olarak şişirme cazibesi güçlüdür.

Siyah Şapka Satıcıları

Google gibi arama motorlarının "web sitesi trafiği bir sıralama faktörü değildir" şeklindeki kategorik iddialarına rağmen, birçok uzman yanlışlıkla yüksek trafiği arama sonuçlarındaki yüksek konumlarla ilişkilendirir.

Sonuç olarak, birçok promosyon "uzmanı" (ve müşterisi) organik bot trafiği için hala büyük paralar ödemeye hazır. Arama motoru bombardımanı teknolojisi, aranan anahtar kelimelerin bulunmadığı, istek üzerine ilgisiz bir sitenin arama sonuçlarında görüntülendiği bir teknolojidir. Yanlışlıkla sıralamalarının ve konumlarının bu şekilde büyüyeceğine inanacaklar.

Dürüst Olmayan Pazarlamacılar ve Ajanslar

Ne yazık ki, web sitesi ziyaretçilerini bot trafiğiyle şişirme şeklindeki haksız uygulama 2023'te hala canlı ve iyi.

‍Reklamı tıklayan ziyaretçilerin hiçbiri hedeflenen eylemi tamamlamasaydı, ziyaretçi artışı işletmeye fayda sağlamayacaktı. Bununla birlikte, birçok işletme sahibinin pazarlamanın tüm ayrıntılarını öğrenmek için zamanı yoktur.

‍Şişirilmiş trafik hakkındaki gerçek ortaya çıksa bile, dürüst olmayan bir pazarlamacı veya ajans, düşük dönüşüm oranlarını diğer faktörlere (sunulan ürün veya hizmet, yetersiz optimize edilmiş sayfa vb.) bağlamaya çalışacaktır. Ayrıca, müşteriyi ek hizmetler için tanıtmalarına da olanak tanır.

‍Gördüğünüz gibi, organik bot trafiği, bazı dürüst olmayan pazarlama ve SEO hizmetleriyle ilişkilendirilmedikçe çok az işe yarar.

Kural olarak, botlar birçok ziyaretin görünümünü oluşturur. Ancak gerçekte sadece maddi kazanç için kullanılırlar.

Reklam tıklamalarını artırmak için trafik botlarını kullanmak yalnızca iki grup insana fayda sağlar: reklamı yerleştiren yayıncı/web yöneticisi veya reklamverenin rakibi.

Gizli bot trafiği yoluyla geliri artırmak, zaten Google Adsense aracılığıyla sitelerinden para kazanan yayıncılar için cazip görünebilir. Örneğin, web'de bot satın almanın en iyi yolları hakkında birçok makale var.

Bununla birlikte, reklam platformları, katılım kurallarını giderek daha sıkı hale getiriyor ve trafiği artırma konusunda tetikte. Bu nedenle, geliri artırmak için bu seçeneği kullanmamalısınız.

Yayıncılar tarafından yapılan reklam dolandırıcılığı, kolay para ve cezasızlıkla ilgili değildir. Büyük ödemeler yerine yasaklanabilir ve sitenizden elde ettiğiniz geliri kaybedebilirsiniz.

Tek tek robotlara karşı koruma veya hatta bot ağlarına karşı tam teşekküllü koruma tek bir prensibe dayanmaktadır: önce bot trafiğini tespit etmeniz gerekir.

Trafik akışının bir bot saldırısı sonucu olup olmadığını öğrenmek için aşağıdaki yöntemlere başvurabilirsiniz:

1. Access.log dosyasını kullanarak sunucu günlüklerine erişerek erişim istatistiklerini izleyebilirsiniz. Bu metin dosyası, sunucudaki trafik hakkında eksiksiz bilgi içerir. İçinde, isteğin yapıldığı IP adresini, saatini, türünü ve içeriğini görüntüleyebilirsiniz. % {User-Agent} parametresine — istek, uygulama ve isteğin yapıldığı dil hakkında bilgi içeren bir başlık — özellikle dikkat etmelisiniz. Aynı IP ve User-Agent'tan düzenli aralıklarla birden fazla istek göndermek sizi uyarmalıdır.
2. JavaScript kullanmak, siteyi ziyaret eden kullanıcılar hakkında önemli bilgilerin (ekran çözünürlüğü, saat dilimi, tıklanabilir düğmeler) toplanmasına yardımcı olabilir. İsteklerle ilgili bilgileri basitçe eşleştirerek hangi kullanıcıların ayrıştırıcı olma olasılığının yüksek olduğunu belirlemek mümkündür.
3. Aynı istek, bölge, saat dilimi ve aynı IP'den ekran boyutuna sahip aracılardan gelen istenmeyen istekler, aşağıda anlatacağımız yöntemlerden biri kullanılarak güvenli bir şekilde engellenebilir.

Botlardan gelen tüm isteklerin aynı IP adresinden gelemeyeceğine dikkat edin. Bunun nedeni, botların genellikle bir proxy ağı kullanması ve dolayısıyla dağıtılmış ayrıştırma gerçekleştirmesidir. Ancak farklı sunuculardan aynı istekler alınsa dahi bu durum büyük bir ihtimalle engelleme sebebidir.

DDoS

Kötü amaçlı botlardan bahsetmişken, DDoS saldırılarına karşı koruma gibi bir konu da göz ardı edilemez. Şu anda, bu sorun özellikle bazı belirli faaliyet alanları ile ilgilidir. Bunlar, çevrimiçi mağazaların sitelerini, çok oyunculu çevrimiçi oyunları, borsaları, yatırım platformlarını ve diğer ticari kaynakları içerir. Bazen bir siteye yönelik bir DDoS saldırısı, kaynağınızı devre dışı bırakmak isteyen saldırgan rakipler tarafından tetiklenebilir. Yine de site bazen fidye yazılımı bilgisayar korsanları tarafından da saldırıya uğrar ve bazen de kötü bir amaç olmaksızın sadece eğlence için saldırıya uğrayabilir. Durum ne olursa olsun, herhangi bir ciddi projenin bu saldırılardan korunmaya ihtiyacı olacaktır. Web sitesindeki bot trafiğini nasıl durduracağınızı bilmelisiniz.

Tipik olarak, DDoS saldırıları yedi katmanlı OSI modelinde tanımlanır. Ağın ilk seviyesi fizikseldir. İkincisi kanaldır (ağları kanal düzeyinde anahtarlar aracılığıyla bağlar); ne kadar yüksek, o kadar soyut. DDoS saldırıları düşük ve yüksek seviyeli olabilir. En düşük seviyeli saldırılar, ağın üçüncü-beşinci seviyelerindedir: kanalı ping veya TCP bağlantı talepleriyle (SYN talepleri olarak adlandırılır) “tıkamak”. Başa çıkmaları kolaydır. Ancak saldırı seviyesi ne kadar yüksek olursa, savunma o kadar karmaşık hale gelir.

En yüksek seviye olan 7. seviyedeki yüksek seviyeli saldırılar daha tehlikelidir. Sitenin en zor sayfalarına yönlendirilirler veya maksimum ürün seçimini görüntülemek için bir katalog filtresi ayarlamak gibi karmaşık eylemler gerçekleştirirler. Saldırıyı yüzlerce hatta binlerce bot gerçekleştirir ve web sunucusundan, arka uçtan veya veritabanı sunucusundan hizmet reddi meydana gelebilir.

Bu tür saldırılarla başa çıkmak için, bir web uygulamasındaki ağ saldırılarını tespit etmek ve engellemek için tasarlanmış özel bir monitör ve filtre sistemi olan WAF (Web Uygulaması Güvenlik Duvarı) kullanıyoruz. Bununla birlikte, bu nispeten yüksek bir saldırı düzeyidir ve WAF'ı yalnızca en ciddi durumlarda etkinleştiririz - kural olarak, tüm sunucularımızda varsayılan olarak etkinleştirilen temel koruma yeterlidir.

‍Siteniz, sunucu odanızdaki donanımınızda barındırılıyorsa, saldırıyla büyük ihtimalle kendi başınıza başa çıkmak zorunda kalacaksınız. Sitenizi korumak için ek bir IP adresi veya özel bir hizmet bağlamanız gerekir. Bazı durumlarda, bu tür hizmetlerin zaten bağlı olduğu bir VDS'ye veya özel bir sunucuya geçmek mükemmel bir seçenek olabilir. Sonunda, büyük bir saldırı beklenebilir! Ancak en iyisi, site korumasını DDoS'tan devredebileceğiniz güvenilir bir barındırma sağlayıcınız varsa.

Web kaynaklarının sahipleri genellikle veri ayrıştırma ve kötü niyetli saldırılar sorunuyla karşı karşıya kalır, ancak koruma yöntemlerinin geliştirilmesi hala durmuyor. Site verilerinin kopyalanmasına ve çalınmasına karşı koruma sağlamak için, birkaç yoldan gidebilirsiniz, örneğin, sayfaya bir captcha yükleyebilir, koda bir tuzak girebilir veya User-Agent verilerine göre botları takip ederek daha sonra engelleyebilirsiniz. Analitiklere ve koruma araçlarının kurulumuna özen gösterilmesi, kodla en az düzeyde çalışılsa bile sitede ayrıştırma, spam ve yükleme sorununun çözülmesine yardımcı olacaktır.