1.rz 上传文件
2.touch ftptest.txt创建txt文件命令
3.创建多层目录
mkdir -p mulu1/mulu2/mulu3 //同时创建三个目录
4.修改文件名的命令
例如： mv ftptest.txt ftptest111.txt
5.加权限
hadoop fs -chown lyb:lyb /test/lyb
6.看查哪些进程占用的2181的端口
netstat -an |grep 2181
netstat -pan | grep 5088
ps -ef | grep 101768
7.查看目录下文件的大小
du -h
8.用grep命令在kafka-source.conf文件中搜索hdfs 字符串
grep hdfs kafka-source.conf
9.在less分页查看hdfs中的文件内容
hadoop fs -cat /daas/bstl/term/rawdt/20150805_9 | less
10.怎么样给linux文件添加可执行权限？
chmod 777 test.sh
11.查看日志
tail -f /logs/cataline.out
12.windows命令行查看本机ip命令
ipconfig
13.查看本机是否可以访问公网ip的命令
14.tracepath命令
tracepath命令用来追踪并显示报文到达目的主机所经过的路由信息
15.爬虫启动爬区命令
nohup bin/crawl /urls/seed_weibo.txt test_02 http://10.0.172.207:8983/solr/collection1 2 &
16.替换apache-nutch-2.3.job 中的 httpclient-login.xml 文件
jar uf apache-nutch-2.3.job httpclient-login.xml
17.solr启动 ，进入example/
nohup java -jar start.jar &
http://10.0.172.207:8983/solr
http://10.0.172.207:8088
start-all.sh
start-hbase.sh
jps
44458 Jps
121474 DataNode
122027 NodeManager
121903 ResourceManager
121684 SecondaryNameNode
121325 NameNode
6254 HRegionServer
6071 HMaster
启动nutch rest服务
bin/nutch nutchserver
删除solr指定collection的所有记录
curl http://10.0.172.207:8983/solr/collection1/update?commit=true -H "Content-Type: text/xml" --data-binary '<delete><query>*:*</query></delete>'
nutch rest 远程调用nutch
nohup java -jar nutchrest-0.0.1-SNAPSHOT.jar 10.0.172.207 -port 18081 -seedDir /urls/seed_test.txt -crawlId test_rest_02 -solr.server.url http://10.0.172.207:8983/solr/collection1 -deepth 2 &
18.vi编辑模式下显示文件的行号
显示所有行号，在VI的命令模式下输入:set nu