记得我是做一个第三方接口,当时需要拿公司的五万辆车通过每周四的夜间去获取违章数据;
三方当时只提供一个只能一辆车去获取未处理的违章数据;
接口是http的方式获取;
当时我是用CountDownLatch ExecutorService线程池 在公司服务器上分10个线程进行访问,每次需要4个多小时才能处理完全。
把车辆总数按线程数分成了10等份,如果6个小时内还没有请求处理完,则不再请求;走主线程去处理数据。
记得我是做一个第三方接口,当时需要拿公司的五万辆车通过每周四的夜间去获取违章数据;
三方当时只提供一个只能一辆车去获取未处理的违章数据;
接口是http的方式获取;
当时我是用CountDownLatch ExecutorService线程池 在公司服务器上分10个线程进行访问,每次需要4个多小时才能处理完全。
把车辆总数按线程数分成了10等份,如果6个小时内还没有请求处理完,则不再请求;走主线程去处理数据。