Semalt कॅशेवरून हजारो URL कशी काढू शकता?

असे दिसते की आपण आधीच एका URL काढण्याची, जी येथे स्पष्टपणे प्रश्न आहे. त्या प्रक्रियेतील दुसरी पायरी आपल्याला संपूर्ण निर्देशिका काढून टाकल्यास, जर त्या URL मध्ये त्या विशिष्ट पद्धतीने अंदाज करता येईल. (जर आपल्याकडे पीडीएफच्या हजारो आहेत, तर मी आशा करते की ते कमीत कमी काही संघटित असतील. ) नसल्यास, आपण दुर्दैवाने पर्यायांमधून बाहेर बरेचच वेगळे आहात.

फाईल्स "सार्वजनिक नसल्या पाहिजेत" तर ते सार्वजनिक इंटरनेटवर असावे. आपण Google सूचीमधील फायली काढून टाकू शकता (रोबोट्सद्वारे. txt आणि इतर पद्धती), परंतु फायली अद्याप उपलब्ध असल्यास कोणीही त्यांना तरीही डाउनलोड करु शकतात.

आपण त्यांना कोणत्याही प्रकारचे प्रमाणीकरण मागे ठेवले पाहिजे. उदाहरणार्थ, फाइल्सला सार्वजनिक वेब निर्देशिकामधून हलवा आणि त्यांना स्क्रिप्टमधून सर्व्ह करा जे वापरकर्ता प्रथम वैध असेल तर तपासते.