ArketicBot
Arketic'in web okuyucusu
01ArketicBot nedir
ArketicBot, Arketic'in web okuyucusudur. Bir Arketic kullanıcısı bir sayfayı okumasını istediğinde, bir kurum kendi seçtiği siteyi bilgi bankasına eklediğinde ya da bir iş akışı bir siteyi taradığında çalışır. Yapay zekâ modeli eğitmek için içerik toplamaz.
02Sunucunuzun göreceği kimlikler
Erişim kayıtlarınızda bu User-Agent değerlerinden birini görürsünüz:
-
ArketicBot/1.0 (+https://arketic.ai/bot; info@arketic.ai)Sayfa okuma. Sohbette paylaşılan bir bağlantı, derin araştırma, bir iş akışındaki site okuma bloğu, kurum sitesinin bilgi bankasına alınması ve haber okuma bu kimlikle gider.
-
ArketicBot/1.0 (+https://arketic.ai/bot; info@arketic.ai) web-searchWeb aramasında Vikipedi ve Wikidata API'lerine giden çağrılar.
-
ArketicBot/1.0 (+https://arketic.ai/bot; info@arketic.ai) help-crawlerYardım içeriği tarayıcısı. Yalnızca Arketic'in kendi alan adlarını gezer (
docs.arketic.ai,arketic.ai); başka bir siteye gitmez. -
Arketic-Workflow/1.0 (+https://arketic.ai/bot; info@arketic.ai)Müşterinin kendi kurduğu iş akışındaki HTTP ve entegrasyon blokları. Tarama değildir; bir tarayıcının ya da API istemcisinin isteği gibi tekil isteklerdir.
Sürüm numarası ve parantez içindeki iletişim bilgisi sürümle değişebilir; sabit olan ad kısmıdır — ArketicBot ve Arketic-Workflow. Kayıtlarınızda eşleştirme yaparken adı arayın.
03Kurallarınıza uyar
robots.txt
ArketicBot adına yazılan kurallara, yoksa * kurallarına uyar (RFC 9309). robots.txt'niz sunucu hatası (5xx) veriyor ya da ulaşılamıyorsa sitenizi hiç okumaz; 4xx dönüyorsa robots.txt yok sayılır.
Yapay zekâ ajanlarına eşitlik
Bir kullanıcı adına okuyan yapay zekâ ajanlarını engellediyseniz (ChatGPT-User, Claude-User, Perplexity-User, OAI-SearchBot, Claude-SearchBot, PerplexityBot), ArketicBot o yolları da okumaz. Yalnız eğitim botlarına (GPTBot, ClaudeBot, CCBot, Google-Extended) yazdığınız kurallar ArketicBot'u bağlamaz, çünkü Arketic model eğitmez.
Content-Signal
Content-Signal: ai-input=no yazdıysanız içeriğiniz yapay zekâya girdi olarak verilmez; sitenizin taranması durur.
Nezaket
Crawl-delay değerinize uyar; aynı siteye aynı anda tek istekle gider.
Tek istisna: iş akışı istekleri
Arketic-Workflow robots.txt'e bakmaz, çünkü tarama yapmaz: müşterinin kendi kurduğu bir iş akışının gönderdiği tekil isteklerdir — bir tarayıcının ya da API istemcisinin isteği gibi. İstemiyorsanız sunucunuzda User-Agent'a göre engelleyebilirsiniz.
04Engellemek için
robots.txt'nize şunu ekleyin:
User-agent: ArketicBot
Disallow: / Bu satır ArketicBot ile gelen tüm okumaları durdurur. İş akışı istekleri robots.txt'e bakmadığı için (03. bölüm) bundan etkilenmez; onları sunucunuzda Arketic-Workflow kimliğine göre engelleyebilirsiniz.
05İletişim
Sorunuz ya da bir sorun varsa: info@arketic.ai