खोज इंजन कैसे खोजें, क्रॉल करें, और अपनी सामग्री को अनुक्रमित करें?

मैं अक्सर ग्राहकों को अपने स्वयं के ई-कॉमर्स या सामग्री प्रबंधन सिस्टम बनाने की सलाह नहीं देता क्योंकि आजकल आवश्यक अदृश्य विस्तारणीय विकल्पों की वजह से - मुख्य रूप से खोज और सामाजिक अनुकूलन पर ध्यान केंद्रित किया जाता है। मैंने इस पर एक लेख लिखा एक सीएमएस का चयन करना, और मैं अभी भी इसे उन कंपनियों को दिखाता हूं जिनके साथ मैं काम करता हूं जो अपनी सामग्री प्रबंधन प्रणाली बनाने के लिए प्रलोभित हैं।

कैसे खोज इंजन काम करते हो?

आइए शुरुआत करते हैं कि सर्च इंजन कैसे काम करते हैं। यहां Google की ओर से एक बेहतरीन अवलोकन दिया गया है.

हालाँकि, ऐसी स्थितियाँ अवश्य हैं जहाँ एक कस्टम प्लेटफ़ॉर्म एक आवश्यकता है। जब यह इष्टतम समाधान होता है, तब भी मैं अपने ग्राहकों पर खोज और सोशल मीडिया के लिए उनकी साइटों को अनुकूलित करने के लिए आवश्यक सुविधाएँ बनाने के लिए दबाव डालता हूँ। तीन प्रमुख विशेषताएं एक आवश्यकता हैं।

• Robots.txt
• एक्सएमएल साइटमैप
• मेटाडाटा

Robots.txt फ़ाइल क्या है?

Robots.txt फ़ाइल - रोबोट पाठ फ़ाइल साइट की रूट निर्देशिका में एक सादा पाठ फ़ाइल है और खोज इंजनों को बताती है कि उन्हें खोज परिणामों में क्या शामिल करना चाहिए और क्या बाहर करना चाहिए। हाल के वर्षों में, खोज इंजनों ने यह भी अनुरोध किया है कि आप फ़ाइल के भीतर XML साइटमैप का पथ शामिल करें। यहां मेरा एक उदाहरण है, जो सभी बॉट्स को मेरी साइट को क्रॉल करने की अनुमति देता है और उन्हें मेरे XML साइटमैप पर भी निर्देशित करता है:

User-agent: *
Sitemap: https://martech.zone/sitemap_index.xml

XML साइटमैप क्या है?

एक्सएमएल साइटमैप - पसंद एचटीएमएल ब्राउज़र में देखने के लिए, XML को प्रोग्रामेटिक रूप से पचाने के लिए लिखा जाता है। एक एक्सएमएल साइटमैप आपकी साइट के प्रत्येक पृष्ठ की एक तालिका है और इसे अंतिम बार कब अपडेट किया गया था। XML साइटमैप को डेज़ी-चेन्ड भी किया जा सकता है... यानी, एक XML साइटमैप दूसरे को संदर्भित कर सकता है। यदि आप अपनी साइट के तत्वों को तार्किक रूप से व्यवस्थित और विभाजित करना चाहते हैं तो यह बहुत अच्छा है (अक्सर पूछे गए प्रश्न, पृष्ठ, उत्पाद, आदि) को अपने स्वयं के साइटमैप में।

साइटमैप खोज इंजनों को प्रभावी ढंग से यह बताने के लिए आवश्यक हैं कि आपने कौन सी सामग्री बनाई है और इसे अंतिम बार कब संपादित किया गया था। आपकी साइट पर जाने पर एक खोज इंजन की प्रक्रिया साइटमैप और स्निपेट लागू किए बिना प्रभावी नहीं होती है।

बिना XML साइटमैप के, आप जोखिम उठाते हैं कि आपके पृष्ठ कभी भी खोजे न जा सकें। यदि आपके पास एक नया उत्पाद लैंडिंग पृष्ठ है जो आंतरिक या बाह्य रूप से लिंक नहीं है तो क्या होगा? Google इसे कैसे खोजता है? खैर, जब तक इसका कोई लिंक नहीं मिल जाता, आपको खोजा नहीं जाएगा। शुक्र है, खोज इंजन सामग्री प्रबंधन प्रणालियों और ई-कॉमर्स प्लेटफार्मों को उनके लिए रेड कार्पेट बिछाने में सक्षम बनाते हैं!

1. Google आपकी साइट पर एक बाहरी या आंतरिक लिंक दिखाता है।
2. Google पृष्ठ को अनुक्रमित करता है और उसकी सामग्री और संदर्भित लिंक की साइट की सामग्री और गुणवत्ता के अनुसार उसे रैंक करता है।

एक XML साइटमैप के साथ, आप अपनी सामग्री की खोज या अद्यतन को संयोग पर नहीं छोड़ रहे हैं! बहुत से डेवलपर शॉर्टकट अपनाने का प्रयास करते हैं जिससे उन्हें भी नुकसान होता है। वे पूरी साइट पर एक ही समृद्ध स्निपेट प्रकाशित करते हैं, जो ऐसी जानकारी प्रदान करते हैं जो पृष्ठ की जानकारी से प्रासंगिक नहीं है। वे प्रत्येक पृष्ठ पर समान तिथियों के साथ एक साइटमैप प्रकाशित करते हैं (या एक पृष्ठ अपडेट होने पर सभी अपडेट हो जाते हैं), खोज इंजनों को कतार देते हैं कि वे सिस्टम को धोखा दे रहे हैं या अविश्वसनीय हैं। या फिर वे सर्च इंजन को बिल्कुल भी पिंग नहीं करते... इसलिए सर्च इंजन को पता ही नहीं चलता कि नई जानकारी प्रकाशित हो चुकी है।

मेटाडेटा क्या है? माइक्रोडेटा? समृद्ध निकम्मा आदमी?

रिच स्निपेट्स को सावधानीपूर्वक माइक्रोडेटा टैग किया जाता है दर्शकों से छिपा हुआ है लेकिन खोज इंजन या सोशल मीडिया साइटों के उपयोग के लिए पृष्ठ पर दिखाई देता है। इसे मेटाडेटा के रूप में जाना जाता है। Google इसके अनुरूप है Schema.org छवियों, शीर्षकों, विवरणों और मूल्य, मात्रा, स्थान की जानकारी, रेटिंग इत्यादि जैसे अन्य जानकारीपूर्ण स्निपेट जैसी चीज़ों को शामिल करने के लिए एक मानक के रूप में। स्कीमा आपके खोज इंजन दृश्यता और उपयोगकर्ता द्वारा क्लिक किए जाने की संभावना को महत्वपूर्ण रूप से बढ़ाएगी।

फेसबुक का उपयोग करता है OpenGraph प्रोटोकॉल (बेशक, वे समान नहीं हो सकते), X यहां तक ​​कि आपकी एक्स प्रोफ़ाइल को निर्दिष्ट करने के लिए एक स्निपेट भी है। अधिक से अधिक प्लेटफ़ॉर्म प्रकाशित होने पर एम्बेडेड लिंक और अन्य जानकारी का पूर्वावलोकन करने के लिए इस मेटाडेटा का उपयोग करते हैं।

आपके वेब पेजों का एक अंतर्निहित अर्थ है कि लोग वेब पेजों को पढ़ते समय समझते हैं। लेकिन खोज इंजनों को उन पृष्ठों पर चर्चा की जाने वाली सीमित समझ है। अपने वेब पृष्ठों के HTML में अतिरिक्त टैग जोड़कर - टैग जो कहते हैं, "अरे खोज इंजन, यह जानकारी इस विशिष्ट फिल्म, या स्थान, या व्यक्ति या वीडियो का वर्णन करती है" -आप खोज इंजन और अन्य अनुप्रयोगों को आपकी सामग्री को बेहतर ढंग से समझने में मदद कर सकते हैं। और इसे एक उपयोगी, प्रासंगिक तरीके से प्रदर्शित करें। माइक्रोडाटा टैग का एक सेट है, जिसे HTML5 के साथ पेश किया गया है, जो आपको ऐसा करने की अनुमति देता है।

Schema.org, MicroData क्या है?

बेशक, इनमें से किसी की भी आवश्यकता नहीं है ... लेकिन मैं उन्हें अत्यधिक सलाह देता हूं। जब आप फेसबुक पर एक लिंक साझा करते हैं, उदाहरण के लिए, और कोई छवि, शीर्षक, या विवरण नहीं आता है ... कुछ लोग रुचि लेंगे और वास्तव में क्लिक करेंगे। और यदि आपके स्कीमा स्निपेट्स प्रत्येक पृष्ठ में नहीं हैं, तो निश्चित रूप से आप अभी भी खोज परिणामों में दिखाई दे सकते हैं ... लेकिन जब वे अतिरिक्त जानकारी प्रदर्शित करते हैं, तो प्रतियोगी आपको हरा सकते हैं।

खोज कंसोल के साथ अपना XML साइटमैप पंजीकृत करें

यदि आपने अपना खुद का कंटेंट या ई-कॉमर्स प्लेटफॉर्म बनाया है, तो यह जरूरी है कि आपके पास एक सबसिस्टम हो जो सर्च इंजन को पिंग करता हो, माइक्रोडेटा प्रकाशित करता हो, और फिर सामग्री या उत्पाद की जानकारी ढूंढने के लिए एक वैध XML साइटमैप प्रदान करता हो!

एक बार जब आपकी robots.txt फ़ाइल, XML साइटमैप और रिच स्निपेट आपकी साइट पर अनुकूलित और अनुकूलित हो जाएं, तो प्रत्येक खोज इंजन के लिए पंजीकरण करना न भूलें खोज कंसोल (के रूप में भी जाना जाता है वेबमास्टर टूल) जहां आप खोज इंजन पर अपनी साइट के स्वास्थ्य और दृश्यता की निगरानी कर सकते हैं। यदि कोई सूचीबद्ध नहीं है तो आप अपना साइटमैप पथ भी निर्दिष्ट कर सकते हैं और देख सकते हैं कि खोज इंजन इसका उपभोग कैसे कर रहा है, इसमें कोई समस्या है या नहीं, और यहां तक ​​कि उन्हें कैसे ठीक किया जाए।

खोज इंजन और सोशल मीडिया के लिए लाल कालीन बिछाएं, और आप पाएंगे कि आपकी साइट की रैंकिंग बेहतर है, खोज इंजन परिणाम पृष्ठों पर आपकी प्रविष्टियों पर अधिक क्लिक किया गया है, और आपके पृष्ठ सोशल मीडिया पर अधिक साझा किए गए हैं। यह सब जुड़ता है!

कैसे Robots.txt, साइटमैप और मेटाडेटा एक साथ काम करते हैं

इन सभी तत्वों का संयोजन आपकी साइट के लिए लाल कालीन बिछाने जैसा है। यहां वह क्रॉल प्रक्रिया है जो एक बॉट करता है और साथ ही यह भी बताता है कि खोज इंजन आपकी सामग्री को कैसे अनुक्रमित करता है।

1. आपकी साइट में एक robots.txt फ़ाइल है जो आपके XML साइटमैप स्थान को भी संदर्भित करती है।
2. आपका सीएमएस या ई-कॉमर्स सिस्टम किसी भी पेज के साथ एक्सएमएल साइटमैप को अपडेट करता है और तारीख या संपादन तारीख की जानकारी प्रकाशित करता है।
3. आपका सीएमएस या ई-कॉमर्स सिस्टम सर्च इंजन को पिंग करके सूचित करता है कि आपकी साइट अपडेट कर दी गई है। आप उन्हें सीधे पिंग कर सकते हैं या सभी प्रमुख खोज इंजनों तक पहुंचने के लिए आरपीसी और पिंग-ओ-मैटिक जैसी सेवा का उपयोग कर सकते हैं।
4. खोज इंजन तुरंत वापस आता है, robots.txt फ़ाइल का सम्मान करता है, साइटमैप के माध्यम से नए या अपडेट किए गए पेज ढूंढता है, और फिर पेज को अनुक्रमित करता है।
5. आपके पृष्ठ को अनुक्रमित करते समय, यह लागू खोजों के लिए पृष्ठ को उचित रूप से अनुक्रमित करने के लिए शीर्षक, मेटा विवरण, HTML5 तत्व, शीर्षक, चित्र, ऑल्ट टैग और अन्य जानकारी का उपयोग करता है।
6. आपके पृष्ठ को अनुक्रमित करते समय, यह खोज इंजन परिणाम पृष्ठ को बढ़ाने के लिए शीर्षक, मेटा विवरण और समृद्ध स्निपेट माइक्रोडेटा का उपयोग करता है।
7. जैसा कि अन्य प्रासंगिक साइटें आपकी सामग्री से लिंक करती हैं, आपकी सामग्री बेहतर रैंक करती है।
8. जैसे ही आपकी सामग्री सोशल मीडिया पर साझा की जाती है, निर्दिष्ट समृद्ध स्निपेट जानकारी आपकी सामग्री का उचित पूर्वावलोकन करने और इसे आपके सामाजिक प्रोफ़ाइल पर निर्देशित करने में मदद कर सकती है।