जाँच टूल किन श्रेणियों की रिपोर्ट देता है
हर नतीजा कोड पॉइंट और उसका यूनिकोड नाम बताता है, इसलिए अनुमान की जगह नहीं रहती।
- शून्य-चौड़ाई स्पेस, नॉन-जॉइनर, जॉइनर और वर्ड जॉइनर (U+200B–U+200D, U+2060)।
- दस्तावेज़ के बीच में आया बाइट ऑर्डर मार्क (U+FEFF)।
- बाइडाइरेक्शनल कंट्रोल: मार्क, एम्बेडिंग, ओवरराइड और आइसोलेट।
- टैग वर्ण (U+E0000 ब्लॉक), जो पूरा छिपा संदेश ले जा सकते हैं।
- वैरिएशन सिलेक्टर, निजी उपयोग कोड पॉइंट, नॉन-कैरेक्टर और डिफ़ॉल्ट रूप से अनदेखे आरक्षित कोड पॉइंट।
- स्पेस समरूप वर्ण जैसे नो-ब्रेक स्पेस, नैरो नो-ब्रेक स्पेस और आइडियोग्राफ़िक स्पेस।
व्यवहार में ये क्यों मायने रखते हैं
किसी पहचानकर्ता के भीतर शून्य-चौड़ाई स्पेस होने पर खोज बिना किसी दिखने वाले कारण के विफल हो जाती है। CSV कॉलम में नैरो नो-ब्रेक स्पेस संख्या पढ़ना बिगाड़ देता है। बाइडाइरेक्शनल ओवरराइड से फ़ाइल का नाम संग्रहीत क्रम से अलग क्रम में दिख सकता है।
यह टेक्स्ट की साफ़-सफ़ाई है। यह किसी डिटेक्टर का स्कोर बदलने का तरीका नहीं है, और MetadataRemover.cc ऐसा दावा भी नहीं करता।
जो जानबूझकर रखा जाता है
बिना सोचे हटाने से वैध बहुभाषी टेक्स्ट बिगड़ जाता है, इसलिए जो अदृश्य वर्ण असली काम करते हैं उन्हें रहने दिया जाता है।
- एक ही लिपि के अक्षरों के बीच वे शून्य-चौड़ाई जॉइनर और नॉन-जॉइनर जो वर्तनी के लिए ज़रूरी हैं।
- इमोजी जोड़: संयुक्त इमोजी के भीतर का जॉइनर और उसकी प्रस्तुति तय करने वाले वैरिएशन सिलेक्टर।
- क्षेत्रीय उपविभाग के झंडों के पूरे टैग अनुक्रम।
- मंगोलियन फ़्री वैरिएशन सिलेक्टर, ख्मेर अंतर्निहित स्वर और अपने ही अक्षरों के बाद आने वाले हंगुल फ़िलर।
- दिशा-सूचक मार्क और आइसोलेट, तथा सही जोड़े में लगी एम्बेडिंग, जिनकी दाएँ-से-बाएँ लिखे टेक्स्ट को ज़रूरत होती है।
इस संस्करण में टेक्स्ट कैसे संभाला जाता है
असामान्य स्पेस को सामान्य स्पेस में बदला जाता है। सपोर्ट की गई लिपियों और इमोजी के लिए ज़रूरी कैरेक्टर संदर्भ के अनुसार रखे जाते हैं। इस पेज पर दिशा नियंत्रण या एक जैसे दिखने वाले अक्षरों के लिए उन्नत सेटिंग नहीं है। साफ़ टेक्स्ट फिर पढ़ें, खासकर जहाँ स्पेस का भाषा, टाइपोग्राफ़ी या डेटा में महत्व हो।
अक्सर पूछे जाने वाले सवाल
क्या छिपे कैरेक्टर हटाने से हिंदी की लिखावट बदल सकती है?
कुछ अदृश्य कैरेक्टर अक्षरों को जोड़ने या इमोजी दिखाने के काम आते हैं। MetadataRemover.cc जिन ज़रूरी संदर्भों को पहचानता है, उनमें इन्हें बचाता है। फिर भी जाँच के नतीजे और साफ़ किया गया टेक्स्ट पढ़कर देखें; हर कैरेक्टर को बिना समझे हटाना सही नहीं है।