Robots.txt क्या होता है ? इसका use कैसे किया जाता है ?
Robots.txt क्या होता है ? What is Robots.txt? Robots.txt एक text फाइल होता है जो कि किसी भी वेबसाइट या ब्लॉग के रूट फोल्डर में मौजूद रहता है। यह search engine bots को instruction देता है की वेबसाइट या ब्लॉग के किस भाग को crawl करना है या नहीं। Robots.txt फाइल search engine bots को […]
Robots.txt क्या होता है ? इसका use कैसे किया जाता है ? Read More »