यूनिक्स शैल स्क्रिप्ट

Question

में किसी सूची से अद्वितीय या विशिष्ट मानों का चयन करें मेरे पास एक ksh स्क्रिप्ट है जो मानों की एक लंबी सूची देता है, नई लाइन अलग होती है, और मैं केवल अद्वितीय/विशिष्ट मान देखना चाहता हूं। ऐसा करना संभव है?

उदाहरण के लिए, मेरी उत्पादन एक निर्देशिका में फाइल प्रत्यय है:

tar 
gz 
java 
class 

Answer 1

आप चाहते हो सकता है:

tar 
gz 
java 
gz 
java 
tar 
class 
class 

मैं की तरह एक सूची देखने के लिए चाहते हैं uniq और sort अनुप्रयोगों को देखने के लिए।

विपरीत क्या किया गया है करने के लिए:

 
./yourscript.ksh | sort | uniq 

संपादित करें (FYI करें, हाँ, तरह इस आदेश पंक्ति में आवश्यक है, uniq केवल डुप्लिकेट लाइनों कि एक दूसरे के बाद तुरंत हैं स्ट्रिप्स) uniq के कमांडलाइन विकल्पों के संबंध में Aaron Digulla द्वारा पोस्ट किया गया:

निम्नलिखित इनपुट को देखते हुए:

 
class 
jar 
jar 
jar 
bin 
bin 
java 

uniq इच्छा आउटपुट सभी लाइनों ठीक एक बार:

 
class 
jar 
bin 
java 

uniq -d इच्छा आउटपुट सभी लाइनों है कि एक से अधिक बार दिखाई देते हैं, और यह उन्हें एक बार प्रिंट होगा:

 
jar 
bin 

uniq -u इच्छा आउटपुट सभी रेखाएं जो बिल्कुल एक बार दिखाई देती हैं, और यह उन्हें एक बार प्रिंट करेगी:

 
class 
java 

Answer 2

उन्हें sort और uniq के माध्यम से पाइप करें। यह सभी डुप्लीकेट हटा देता है।

uniq -d केवल डुप्लिकेट देता है, uniq -u केवल अद्वितीय वाले (डुप्लिकेट स्ट्रिप्स) देता है।

./yourscript.ksh | perl -ne 'if (!defined $x{$_}) { print $_; $x{$_} = 1; }' 

यह इतना है कि यह फिर से उत्पादन यह नहीं है मूल रूप से बस हर पंक्ति उत्पादन याद है:

Answer 3

बड़े डेटा सेट के लिए जहां छँटाई वांछनीय नहीं हो सकता है, आप निम्न पर्ल स्क्रिप्ट का उपयोग कर सकते हैं।

इसका लाभ "sort | uniq" समाधान पर लाभ है जिसमें कोई सॉर्टिंग आवश्यक नहीं है।

Answer 4

zsh आप ऐसा कर सकते के साथ:

zsh-5.0.0[t]% cat infile 
tar 
more than one word 
gz 
java 
gz 
java 
tar 
class 
class 
zsh-5.0.0[t]% print -l "${(fu)$(<infile)}" 
tar 
more than one word 
gz 
java 
class 

या आप उपयोग कर सकते हैं AWK:

zsh-4.3.9[t]% awk '!_[$0]++' infile  
tar 
more than one word 
gz 
java 
class 

Answer 5

./script.sh | sort -u 

यह monoxide'sanswer रूप में ही है, लेकिन थोड़ा अधिक संक्षिप्त।

Answer 6

अनन्य, अनुरोध के अनुसार, (लेकिन क्रमबद्ध नहीं);
~ 70 तत्वों से कम (जैसे समय के साथ परीक्षण) के लिए कम सिस्टम संसाधनों का उपयोग करता है;
, stdin से इनपुट लेने
(या संशोधित करने और किसी अन्य लिपि में शामिल हैं) के लिए लिखा:
(बैश)

bag2set() { 
    # Reduce a_bag to a_set. 
    local -i i j n=${#a_bag[@]} 
    for ((i=0; i < n; i++)); do 
     if [[ -n ${a_bag[i]} ]]; then 
      a_set[i]=${a_bag[i]} 
      a_bag[i]=$'\0' 
      for ((j=i+1; j < n; j++)); do 
       [[ ${a_set[i]} == ${a_bag[j]} ]] && a_bag[j]=$'\0' 
      done 
     fi 
    done 
} 
declare -a a_bag=() a_set=() 
stdin="$(</dev/stdin)" 
declare -i i=0 
for e in $stdin; do 
    a_bag[i]=$e 
    i=$i+1 
done 
bag2set 
echo "${a_set[@]}" 

Answer 7

AWK के साथ आप कर सकते हैं, मैं यह तेजी तरह से लगता है

./yourscript.ksh | awk '!a[$0]++'