【NCDC数据】获取 hadoop权威指南3中的NCDC数据

  1. vi getNcdcBigData.sh
内容如下:
  1. #!/bin/bash
  2. for i in {1901..2014}
  3. do
  4. cd /home/xxxx/hapood/ncdc
  5. wget --execute robots=off -r -np -nH --cut-dirs=4 -R index.html* ftp://ftp.ncdc.noaa.gov/pub/data/gsod/$i/
  6. done





原文地址:https://www.cnblogs.com/ssslinppp/p/5923881.html