node.js的request模块

request模块让http请求变的更加简单。最简单的一个示例:

   1: var request = require('request');
   2:  
   3: request('http://www.google.com', function (error, response, body) {
   4:   if (!error && response.statusCode == 200) {
   5:     console.log(body);
   6:   }
   7: })
 

安装:

npm install request

可以用request的pipe方法很方便的获取图片的文件流

   1: var request = require('request'),
   2:     fs = require('fs');
   3:  
   4: request('https://www.google.com.hk/images/srpr/logo3w.png').pipe(fs.createWriteStream('doodle.png'));

request也支持OAuth的签名请求

更多使用方法和说明可点击这里继续阅读:https://github.com/mikeal/request/

这里写了一个很简单的示例,用来抓取去哪儿网的酒店查询数据(获取酒店某一时间段内各房型的价格排名):

   1: var request = require('request'),
   2:     fs = require('fs');
   3:  
   4:  
   5: var reqUrl = 'http://hotel.qunar.com/price/detail.jsp?fromDate=2012-08-18&toDate=2012-08-19&cityurl=shanghai_city&HotelSEQ=shanghai_city_2856&cn=5';
   6:  
   7: request({uri:reqUrl}, function(err, response, body) {
   8:     
   9:     //console.log(response.statusCode);
  10:     //console.log(response);
  11:     
  12:     //如果数据量比较大,就需要对返回的数据根据日期、酒店ID进行存储,如果获取数据进行对比的时候直接读文件
  13:     var filePath = __dirname + '/data/data.js';
  14:     
  15:     if (fs.exists(filePath)) {
  16:         fs.unlinkSync(filePath);
  17:  
  18:         console.log('Del file ' + filePath);
  19:     }
  20:     
  21:     fs.writeFile(filePath, body, 'utf8', function(err) {
  22:         if (err) {
  23:             throw err;
  24:         }
  25:  
  26:         console.log('Save ' + filePath + ' ok~');
  27:     });
  28:     
  29:     console.log('Fetch ' + reqUrl + ' ok~');
  30: });

这个例子源于一个做酒店业务的朋友,想知道自己在网站上提供给客户的价格的竞争力:

1、如果提供的价格过低,自己赚到的钱就会少了,所以如果自己价格是最低了,就需要看第二低是多少,然后决定是否调整;

2、如果提供的价格过高,那么被搜索出来的排名结果就比较靠后,没什么客户来预订酒店,业务就没有了

因为做的酒店预订业务很多,比如超过2千家以上,如果一个一个依赖人工去查询排名就比较被动,而且很难再做大,所以他的这个需求我分析了一下是可行的,而且可以做成一个很好的实时预警系统(当然数据5~10分钟会自动在页面刷新一次)。这样才能保障利润最大化,提高销售、客户部门的工作效率,加快酒店的合作数量和公司的人员扩张:

1、不亏本,亏本的买卖不做;

2、如果发现提供的价格过低或是过高,需要支持调用平台的api接口,直接修改价格;

3、有自动生成分析报表功能,分析竞争对手在价格调整策略上的变化情况;

原文地址:https://www.cnblogs.com/chris-oil/p/4982787.html