Spring Boot实现一个天气预报系统（二）数据同步

1.开发环境

• JDK8

• Maven

• Spring Boot Web Starter 2.1.6

• Apache HttpClient 4.5.3

• Spring Boot Data Redis Starter 2.1.6

• Redis 3.2.100

• Spring Boot Quartz Starter 2.1.6

• Quartz Scheduler

基于上一篇博客https://blog.csdn.net/fy_java1995/article/details/93907576开发

2.项目配置

（1）添加maven依赖

        <dependency>
            <groupId>org.springframework.boot</groupId>
            <artifactId>spring-boot-starter-quartz</artifactId>
        </dependency>

（2）创建Quartz Scheduler任务

public class WeatherDataSyncJob extends QuartzJobBean {
    private final static Logger logger = LoggerFactory.getLogger(WeatherDataSyncJob.class);
    @Autowired
    private CityDataService cityDataService;
    @Autowired
    private WeatherDataService weatherDataService;
​
    @Override
    protected void executeInternal(JobExecutionContext jobExecutionContext) throws JobExecutionException {
        logger.info("天气数据同步任务");
​
        //读取城市列表
        List<City> cityList = null;
        try {
            cityList = cityDataService.listCity();
        } catch (Exception e) {
            logger.error("获取城市信息异常！ ", e);
        }
        for (City city : cityList) {
            String cityId = city.getCityId();
            logger.info("天气数据同步任务中,cityId:" + cityId);
            weatherDataService.syncDataByCityId(cityId);
        }
​
        logger.info("天气数据同步任务结束");
    }
}

（3）创建配置类

@Configuration
public class QuartzConfiguration {
    private final int TIME = 1800;
​
    @Bean
    public JobDetail weatherDataSyncJobJobDetail() {
        return JobBuilder.newJob(WeatherDataSyncJob.class).withIdentity("weatherDataSyncJob")
                .storeDurably().build();
    }
​
    @Bean
    public Trigger sampleJobTrigger() {
        SimpleScheduleBuilder simpleScheduleBuilder = SimpleScheduleBuilder.simpleSchedule()
                .withIntervalInSeconds(TIME).repeatForever();
        return TriggerBuilder.newTrigger().forJob(weatherDataSyncJobJobDetail())
                .withIdentity("weatherDataSyncTriggger")
                .withSchedule(simpleScheduleBuilder)
                .build();
    }
}

JObDetail：定义了一个特定的job。JobDetail实例可以使用JobBuilder API 轻松构建

Trigger:定义了何时来触发一个特定的job

withIntervalInSeconds(TIME):意味着定时任务的执行频率是按照每TIME秒执行一次进行的

（4）创建实体及其解析xml的工具类

City.java

@Data
@XmlRootElement(name = "d")
@XmlAccessorType(XmlAccessType.FIELD)
public class City {
    @XmlAttribute(name = "d1")
    private String cityId;
    @XmlAttribute(name = "d2")
    private String cityName;
    @XmlAttribute(name = "d3")
    private String cityCode;
    @XmlAttribute(name = "d4")
    private String province;
}

CityList.java

@Data
@XmlRootElement(name = "c")
@XmlAccessorType(XmlAccessType.FIELD)
public class CityList {
    @XmlElement(name = "d")
    private List<City> cityList;
}

XmlBuilder .java

public class XmlBuilder {
​
    /**
     * 将xml字符串转换成指定类型的pojo
     *
     * @param clazz
     * @param xmlStr
     * @return
     * @throws Exception
     */
    public static Object xmlStrToObject(Class<?> clazz, String xmlStr) throws Exception {
        Object xmlObject;
        Reader reader;
​
        JAXBContext context = JAXBContext.newInstance(clazz);
​
        //将xml转成对象的核心接口
        Unmarshaller unmarshaller = context.createUnmarshaller();
​
        reader = new StringReader(xmlStr);
        xmlObject = unmarshaller.unmarshal(reader);
​
        reader.close();
        return xmlObject;
    }
}

（5）创建xml文件

<?xml version="1.0" encoding="UTF-8" ?>
<c c1="0">
    <d d1="101280101" d2="广州" d3="guangzhou" d4="广东"/>
    <d d1="101280102" d2="番禺" d3="panyu" d4="广东"/>
    <d d1="101280103" d2="从化" d3="conghua" d4="广东"/>
    <d d1="101280104" d2="增城" d3="zengcheng" d4="广东"/>
    <d d1="101280105" d2="花都" d3="huadu" d4="广东"/>
    <d d1="101280201" d2="韶关" d3="shaoguan" d4="广东"/>
    <d d1="101280202" d2="乳源" d3="ruyuan" d4="广东"/>
    <d d1="101280203" d2="始兴" d3="shixing" d4="广东"/>
    <d d1="101280204" d2="翁源" d3="wengyuan" d4="广东"/>
    <d d1="101280205" d2="乐昌" d3="lechang" d4="广东"/>
    <d d1="101280206" d2="仁化" d3="renhua" d4="广东"/>
    <d d1="101280207" d2="南雄" d3="nanxiong" d4="广东"/>
    <d d1="101280208" d2="新丰" d3="xinfeng" d4="广东"/>
    <d d1="101280209" d2="曲江" d3="qujiang" d4="广东"/>
    <d d1="101280210" d2="浈江" d3="chengjiang" d4="广东"/>
    <d d1="101280211" d2="武江" d3="wujiang" d4="广东"/>
    <d d1="101280301" d2="惠州" d3="huizhou" d4="广东"/>
    <d d1="101280302" d2="博罗" d3="boluo" d4="广东"/>
    <d d1="101280303" d2="惠阳" d3="huiyang" d4="广东"/>
    <d d1="101280304" d2="惠东" d3="huidong" d4="广东"/>
    <d d1="101280305" d2="龙门" d3="longmen" d4="广东"/>
    <d d1="101280401" d2="梅州" d3="meizhou" d4="广东"/>
    <d d1="101280402" d2="兴宁" d3="xingning" d4="广东"/>
    <d d1="101280403" d2="蕉岭" d3="jiaoling" d4="广东"/>
    <d d1="101280404" d2="大埔" d3="dabu" d4="广东"/>
    <d d1="101280406" d2="丰顺" d3="fengshun" d4="广东"/>
    <d d1="101280407" d2="平远" d3="pingyuan" d4="广东"/>
    <d d1="101280408" d2="五华" d3="wuhua" d4="广东"/>
    <d d1="101280409" d2="梅县" d3="meixian" d4="广东"/>
    <d d1="101280501" d2="汕头" d3="shantou" d4="广东"/>
    <d d1="101280502" d2="潮阳" d3="chaoyang" d4="广东"/>
    <d d1="101280503" d2="澄海" d3="chenghai" d4="广东"/>
    <d d1="101280504" d2="南澳" d3="nanao" d4="广东"/>
    <d d1="101280601" d2="深圳" d3="shenzhen" d4="广东"/>
    <d d1="101280701" d2="珠海" d3="zhuhai" d4="广东"/>
    <d d1="101280702" d2="斗门" d3="doumen" d4="广东"/>
    <d d1="101280703" d2="金湾" d3="jinwan" d4="广东"/>
    <d d1="101280800" d2="佛山" d3="foshan" d4="广东"/>
    <d d1="101280801" d2="顺德" d3="shunde" d4="广东"/>
    <d d1="101280802" d2="三水" d3="sanshui" d4="广东"/>
    <d d1="101280803" d2="南海" d3="nanhai" d4="广东"/>
    <d d1="101280804" d2="高明" d3="gaoming" d4="广东"/>
    <d d1="101280901" d2="肇庆" d3="zhaoqing" d4="广东"/>
    <d d1="101280902" d2="广宁" d3="guangning" d4="广东"/>
    <d d1="101280903" d2="四会" d3="sihui" d4="广东"/>
    <d d1="101280905" d2="德庆" d3="deqing" d4="广东"/>
    <d d1="101280906" d2="怀集" d3="huaiji" d4="广东"/>
    <d d1="101280907" d2="封开" d3="fengkai" d4="广东"/>
    <d d1="101280908" d2="高要" d3="gaoyao" d4="广东"/>
    <d d1="101281001" d2="湛江" d3="zhanjiang" d4="广东"/>
    <d d1="101281002" d2="吴川" d3="wuchuan" d4="广东"/>
    <d d1="101281003" d2="雷州" d3="leizhou" d4="广东"/>
    <d d1="101281004" d2="徐闻" d3="xuwen" d4="广东"/>
    <d d1="101281005" d2="廉江" d3="lianjiang" d4="广东"/>
    <d d1="101281006" d2="赤坎" d3="chikan" d4="广东"/>
    <d d1="101281007" d2="遂溪" d3="suixi" d4="广东"/>
    <d d1="101281008" d2="坡头" d3="potou" d4="广东"/>
    <d d1="101281009" d2="霞山" d3="xiashan" d4="广东"/>
    <d d1="101281010" d2="麻章" d3="mazhang" d4="广东"/>
    <d d1="101281101" d2="江门" d3="jiangmen" d4="广东"/>
    <d d1="101281103" d2="开平" d3="kaiping" d4="广东"/>
    <d d1="101281104" d2="新会" d3="xinhui" d4="广东"/>
    <d d1="101281105" d2="恩平" d3="enping" d4="广东"/>
    <d d1="101281106" d2="台山" d3="taishan" d4="广东"/>
    <d d1="101281107" d2="蓬江" d3="pengjiang" d4="广东"/>
    <d d1="101281108" d2="鹤山" d3="heshan" d4="广东"/>
    <d d1="101281109" d2="江海" d3="jianghai" d4="广东"/>
    <d d1="101281201" d2="河源" d3="heyuan" d4="广东"/>
    <d d1="101281202" d2="紫金" d3="zijin" d4="广东"/>
    <d d1="101281203" d2="连平" d3="lianping" d4="广东"/>
    <d d1="101281204" d2="和平" d3="heping" d4="广东"/>
    <d d1="101281205" d2="龙川" d3="longchuan" d4="广东"/>
    <d d1="101281206" d2="东源" d3="dongyuan" d4="广东"/>
    <d d1="101281301" d2="清远" d3="qingyuan" d4="广东"/>
    <d d1="101281302" d2="连南" d3="liannan" d4="广东"/>
    <d d1="101281303" d2="连州" d3="lianzhou" d4="广东"/>
    <d d1="101281304" d2="连山" d3="lianshan" d4="广东"/>
    <d d1="101281305" d2="阳山" d3="yangshan" d4="广东"/>
    <d d1="101281306" d2="佛冈" d3="fogang" d4="广东"/>
    <d d1="101281307" d2="英德" d3="yingde" d4="广东"/>
    <d d1="101281308" d2="清新" d3="qingxin" d4="广东"/>
    <d d1="101281401" d2="云浮" d3="yunfu" d4="广东"/>
    <d d1="101281402" d2="罗定" d3="luoding" d4="广东"/>
    <d d1="101281403" d2="新兴" d3="xinxing" d4="广东"/>
    <d d1="101281404" d2="郁南" d3="yunan" d4="广东"/>
    <d d1="101281406" d2="云安" d3="yunan" d4="广东"/>
    <d d1="101281501" d2="潮州" d3="chaozhou" d4="广东"/>
    <d d1="101281502" d2="饶平" d3="raoping" d4="广东"/>
    <d d1="101281503" d2="潮安" d3="chaoan" d4="广东"/>
    <d d1="101281601" d2="东莞" d3="dongguan" d4="广东"/>
    <d d1="101281701" d2="中山" d3="zhongshan" d4="广东"/>
    <d d1="101281801" d2="阳江" d3="yangjiang" d4="广东"/>
    <d d1="101281802" d2="阳春" d3="yangchun" d4="广东"/>
    <d d1="101281803" d2="阳东" d3="yangdong" d4="广东"/>
    <d d1="101281804" d2="阳西" d3="yangxi" d4="广东"/>
    <d d1="101281901" d2="揭阳" d3="jieyang" d4="广东"/>
    <d d1="101281902" d2="揭西" d3="jiexi" d4="广东"/>
    <d d1="101281903" d2="普宁" d3="puning" d4="广东"/>
    <d d1="101281904" d2="惠来" d3="huilai" d4="广东"/>
    <d d1="101281905" d2="揭东" d3="jiedong" d4="广东"/>
    <d d1="101282001" d2="茂名" d3="maoming" d4="广东"/>
    <d d1="101282002" d2="高州" d3="gaozhou" d4="广东"/>
    <d d1="101282003" d2="化州" d3="huazhou" d4="广东"/>
    <d d1="101282004" d2="电白" d3="dianbai" d4="广东"/>
    <d d1="101282005" d2="信宜" d3="xinyi" d4="广东"/>
    <d d1="101282006" d2="茂港" d3="maogang" d4="广东"/>
    <d d1="101282101" d2="汕尾" d3="shanwei" d4="广东"/>
    <d d1="101282102" d2="海丰" d3="haifeng" d4="广东"/>
    <d d1="101282103" d2="陆丰" d3="lufeng" d4="广东"/>
    <d d1="101282104" d2="陆河" d3="luhe" d4="广东"/>
</c>

（6）城市数据服务接口及其实现

public interface CityDataService {
​
    /**
     * 获取城市列表
     *
     * @return
     * @throws Exception
     */
    List<City> listCity() throws Exception;
}

@Service
public class CityDataServiceImpl implements CityDataService {
    @Override
    public List<City> listCity() throws Exception {
        //读取xml文件
        ClassPathResource resource = new ClassPathResource("citylist.xml");
        BufferedReader br = new BufferedReader(new InputStreamReader(resource.getInputStream(), StandardCharsets.UTF_8));
        StringBuilder builder = new StringBuilder();
        String line;
        while ((line = br.readLine()) != null) {
            builder.append(line);
        }
        br.close();
​
        //xml转为java对象
        CityList cityList = (CityList) XmlBuilder.xmlStrToObject(CityList.class, builder.toString());
        return cityList.getCityList();
    }
}

在原先的WeatherDataService中，增加同步天气数据的接口

    /**
     * 根据城市id同步开发天气数据
     *
     * @param cityId
     */
    void syncDataByCityId(String cityId);

在WeatherDataServiceImpl中，实现此接口

 @Override
    public void syncDataByCityId(String cityId) {
        String uri = WEATHER_API + "?citykey=" + cityId;
        saveWeatherData(uri);
    }
​
    private void saveWeatherData(String uri) {
        ValueOperations<String, String> ops = stringRedisTemplate.opsForValue();
        String strBody = null;
​
        ResponseEntity<String> response = restTemplate.getForEntity(uri, String.class);
        if (response.getStatusCodeValue() == 200) {
            strBody = response.getBody();
        }
        ops.set(uri, strBody, TIME_OUT, TimeUnit.SECONDS);
    }

3.启动项目，测试应用

2019-06-28 11:40:50.651  INFO 19527 --- [eduler_Worker-1] c.y.m.job.WeatherDataSyncJob             : 天气数据同步任务
2019-06-28 11:40:50.747  INFO 19527 --- [eduler_Worker-1] c.y.m.job.WeatherDataSyncJob             : 天气数据同步任务中,cityId:101280101
2019-06-28 11:40:50.764  INFO 19527 --- [           main] o.s.b.w.embedded.tomcat.TomcatWebServer  : Tomcat started on port(s): 8080 (http) with context path ''
2019-06-28 11:40:50.787  INFO 19527 --- [           main] c.y.m.MicroWeatherBasicApplication       : Started MicroWeatherBasicApplication in 7.522 seconds (JVM running for 8.886)
2019-06-28 11:40:51.321  INFO 19527 --- [eduler_Worker-1] io.lettuce.core.EpollProvider            : Starting without optional epoll library
2019-06-28 11:40:51.326  INFO 19527 --- [eduler_Worker-1] io.lettuce.core.KqueueProvider           : Starting without optional kqueue library
2019-06-28 11:40:51.676  INFO 19527 --- [eduler_Worker-1] c.y.m.job.WeatherDataSyncJob             : 天气数据同步任务中,cityId:101280102
...
...
中间省略
...
...
2019-06-28 11:41:05.612  INFO 19527 --- [eduler_Worker-1] c.y.m.job.WeatherDataSyncJob             : 天气数据同步任务结束