robots.txt ለማምጣት፣ የጎብኚ ቡድኖችን ለመተንተን፣ የጣቢያ ካርታ መመሪያዎችን ለማግኘት እና የተገናኙትን የጣቢያ ካርታ ኤክስኤምኤል ፋይሎችን ለማረጋገጥ የድር ጣቢያ ዩአርኤል ያስገቡ።
ተንታኙ አስፈላጊ ቦቶች የስር ዱካውን መጎተት ይችሉ እንደሆነ ይፈትሻል፣ የጣቢያ ካርታ ዩአርኤሎችን ይቆጥራል፣ የተባዙ ወይም ውጫዊ ዩአርኤሎችን ያገኛል እና የጣቢያ ካርታ ግቤቶችን ናሙና የተሰበረ አገናኝ ፍተሻ ያደርጋል።