DuckDuckBot
DuckDuckGo arama motoru için web taraması yapan bot.
User-Agent
DuckDuckBotIP Aralığı
Resmi dokümantasyon üzerinden doğrulanmalı.
İlk Görülme
2010yılından bu yana aktif
Tarama Sıklığı
Düşük-orta — Bing dizinini de kullanır
Ne yapar?
Gizlilik odaklı arama sonuçları oluşturmak için içerik tarar.
Detaylı Bilgi
DuckDuckBot, gizlilik odaklı arama motoru DuckDuckGo'nun resmi web tarayıcısıdır. DuckDuckGo, kullanıcılarının arama geçmişini takip etmemesi ve kişiselleştirilmiş sonuçlar oluşturmamasıyla tanınır. DuckDuckBot, bu gizlilik felsefesini destekleyen arama sonuçları için web içeriklerini tarar ve dizinler.
DuckDuckGo, arama sonuçlarını oluştururken çeşitli kaynakları birlikte kullanır. DuckDuckBot'un kendi tarama verileri, Bing'in dizini ve Wikipedia gibi özel kaynaklardan gelen veriler bir araya getirilerek sonuçlar oluşturulur. Bu nedenle DuckDuckBot'un kendi tarama hacmi, Google veya Bing'e kıyasla daha düşüktür.
DuckDuckBot, robots.txt dosyasındaki kurallara tam uyum sağlar ve web sitelerinin kaynaklarını korumak için düşük tarama hızıyla çalışır. Bot, sayfaların metin içeriğini, başlıklarını ve meta verilerini toplar. DuckDuckGo'nun "Instant Answers" özelliği için de bazı yapısal veriler analiz edilir.
Gizlilik bilinci artan internet kullanıcıları arasında DuckDuckGo'nun popülerliği her geçen yıl artmaktadır. Özellikle Avrupa ve Kuzey Amerika'da önemli bir kullanıcı tabanına sahiptir. DuckDuckBot'u engellemek, bu büyüyen kullanıcı kitlesine erişiminizi kaybetmenize neden olabilir. Tarama hacminin düşük olması nedeniyle sunucu kaynaklarınız üzerindeki etkisi minimumdur ve engelleme için teknik bir gerekçe nadiren bulunur.
Engellemeli miyim?
DuckDuckBot'u engellemek genellikle önerilmez. DuckDuckGo gizlilik bilincine sahip kullanıcılar arasında popülerdir ve büyüyen bir pazar payına sahiptir. Tarama hacmi düşüktür, sunucu yükü minimum düzeydedir.
Nasıl engellenir?
- robots.txt
Robots.txt örneği
User-agent: DuckDuckBot Disallow: /admin/