सर्च बॉट्स को निर्देश देने के लिए मेटा टैग - सीएसएस-ट्रिक्स

Google से सीधे:

मेटा टैग वेबमास्टर्स को अपनी साइटों के बारे में जानकारी के साथ खोज इंजन प्रदान करने का एक शानदार तरीका है। मेटा टैग का उपयोग सभी प्रकार के ग्राहकों को जानकारी प्रदान करने के लिए किया जा सकता है, और प्रत्येक सिस्टम केवल मेटा टैग को संसाधित करता है जो वे समझते हैं और बाकी को अनदेखा करते हैं।

यदि आप सभी खोज इंजनों को पूरी तरह से ब्लॉक करना चाहते हैं:

क्यों?

शायद यह आपकी साइट पर कुछ हद तक निजी URL है, लेकिन इसे इस तरह से संरक्षित नहीं किया गया है कि खोज बॉट इसे नहीं देख सके। जैसे अगर किसी पृष्ठ को इसे देखने के लिए लॉग की आवश्यकता होती है, तो वह वैसे भी खोज बॉट से अवरुद्ध होता है। लेकिन अगर यह सिर्फ एक अस्पष्ट URL है, तो कौन जानता है कि खोज बॉट्स चारों ओर कैसे पहुंचे, इसलिए आप अनुक्रमण को रोकना चाहते हैं।

खोज परिणाम एक और आम है। खोज परिणाम के लिए अजीब खोज परिणाम हो सकते हैं, शायद। वर्डप्रेस थीम इसमें शामिल हैं:

मैं इसे थोड़ा बदल सकता हूं और बॉट्स को बता सकता हूं, हे, आप साइट को अनुक्रमित करने में मदद के लिए यहां लिंक का अनुसरण कर सकते हैं, लेकिन विशेष रूप से इस पृष्ठ को अनुक्रमित नहीं करते।