《数据传输至ES与redis.docx》由会员分享,可在线阅读,更多相关《数据传输至ES与redis.docx(2页珍藏版)》请在第一文库网上搜索。
1、数据传输至ES与redis1 .配置文件将文件放入maven中,创建本地文件夹,将该文件夹路径写入app1ication.properties配置文件中的,一个是文件上传至Iinux的路径,一个是本地的路径,本地windows路径需要自己先创建,再将srcmainjavaCom/tp1_s/路径下的文件全部放入this.1oca1it路径中,在创建一个this.1oca1ityNew文件的目录,用于存储程序生产的最新文本。(PS:路径名不可以有中文)#脚本文件存放Iinux路径fi1e.Way=usrsrcyh1-ttt#本地文件存放路径this.Ioca1ity=D:testthis.Ioc
2、a1ityNew=D:testnew需要配置app1ication.properties配置文件中的redis,ES,PhOeniX(小松鼠),kafka以及IinUX服务器的端口。2 .添加需要读取的数据库与表#读取表数量以,形式隔开Iteb1e=OPT_RECIPE,YS.EHR_HEA1THRECORD3,需要设置实时需要监听的kafka主题,以便数据实时读取#需要监控的主题kafka.theme=test,test2将该项目添加到tomcat中,等待启动完成,需要登录页面。TOmCat的IP地址与端口+bsoft如:http:IOCa1hoSt:8080/bsoft是bsoft是全部启动,下面3个任务都调用单独启动:redisESkafka程序:1oca1host:8080/redis1oca1host:8080/EsService1oca1host:8080/kafka这三个页面可单独启动任务。报错口J能:需要查看dataqy.properties文件中的bsoft.hive.enab1e=true状态读取hbase有关数据需要将:dataqy.properties文件中的bsoft.hive.enab1e=fa1se(读取hive的有关数据,需要开启该命令;