अपनी वेबसाइट पर ट्रेन करें

क्रॉलिंग, पेज सीमाएँ और जवाबों को ताज़ा रखना

क्रॉलिंग कैसे काम करती है

Chatixy आपके द्वारा दिए गए URL से शुरू करता है और आपके प्लान की पेज सीमा तक आंतरिक लिंक का अनुसरण करता है, प्रत्येक पेज के दृश्य पाठ सामग्री को इंडेक्स करता है। लॉगिन, पेवॉल या robots.txt ब्लॉक्स के पीछे के पेज छोड़ दिए जाते हैं।

दो सीमाएँ लागू होती हैं। प्रति-साइट पेज सीमा एकल क्रॉल को सीमित करती है (स्टार्टर 150, प्रो 2,500, बिजनेस 10,000 पेज)। इसके अलावा, एक दैनिक क्रॉल भत्ता सभी वेबसाइटों पर एक दिन में इंडेक्स किए गए पेजों को सीमित करता है (स्टार्टर 150, प्रो 12,500, बिजनेस 50,000 पेज) और यह 00:00 UTC पर रीसेट होता है। यदि दैनिक भत्ता समाप्त हो जाने के कारण क्रॉल अस्वीकार कर दिया जाता है, तो ज्ञान टैब आपको सूचित करता है और आप रीसेट के बाद इसे फिर से चला सकते हैं।

सामान्यतः मार्केटिंग साइट्स के लिए क्रॉल कुछ ही मिनटों में समाप्त हो जाता है; बहुत बड़ी साइट्स को बैकग्राउंड में प्रोसेस किया जाता है और जैसे-जैसे पेज जोड़े जाते हैं, आपका सपोर्ट एजेंट बेहतर होता जाता है।

पेज बाहर रखना

आप उन पाथ को बाहर रख सकते हैं जिनसे आप कभी नहीं चाहते कि एजेंट सीखे - करियर पेज, कानूनी संग्रह, आंतरिक टूल।

  • प्रोजेक्ट की नॉलेज सेटिंग्स में /blog/archive/* जैसे पाथ पैटर्न जोड़ें
  • बाहर रखे गए पेज अगली क्रॉल पर इंडेक्स से हटा दिए जाते हैं
  • robots.txt के disallow नियमों का हमेशा सम्मान किया जाता है

जवाबों को ताज़ा रखना

आप किसी भी समय ज्ञान टैब से मैनुअल री-क्रॉल शुरू कर सकते हैं - यह तब उपयोगी होता है जब आप नए दस्तावेज़ प्रकाशित करते हैं या मूल्य निर्धारण बदलते हैं। एक री-क्रॉल पिछले एक के समाप्त होने के 14 दिन बाद फिर से उपलब्ध होता है।

आप प्रत्येक वेबसाइट के लिए निर्धारित री-क्रॉल भी चालू कर सकते हैं और अपनी पसंद के अनुसार आवृत्ति चुन सकते हैं - हर 14, 30 या 90 दिन। ये विकल्प हर प्लान पर उपलब्ध हैं।

सुझाव

  • बड़े साइट अपडेट के बाद एक मैन्युअल री-क्रॉल ट्रिगर करें ताकि एजेंट कभी पुराना कंटेंट हवाला देकर न बताए।

महत्वपूर्ण

  • अपनी साइट से किसी पेज को हटाने से वह तुरंत इंडेक्स से नहीं हटता - यह अगली क्रॉल पर गायब हो जाता है, या आप स्रोत को मैन्युअल रूप से हटा सकते हैं।