关于

 tail -n 10000 sample_dbl.txt | python sitemap.py | sort -k 1 -t $' ' | python sitecombiner.py > 1.sort

 tail -n 10000 sample_dbl.txt | python sitemap.py | sort -k 1 -t $' ' | python sitecombiner.py | python sitereducer.py

cat input_1 | python linkmap.py | sort -k 1 -t ' ' | python linkcombiner.py | sort -k 1 -t $' ' | python linkreducer.py

-D mapred.text.key.comparator.options="-k1n -k2nr"   二面的参数