首先要将文件从本地搬运到集团服务器
早上测试过,两侧速度基本都在8MBps,传2G多的文件用时6分钟,可以接受
方案一:从本地定时扫描,发现文件生成后上传到集团
缺点:部署分散,维护比较难,还要考虑过一段时间本地断网的情况
方案二:集团定时从本地scp文件
程序部署位置:最好是10.170.42.91,但是91上没有gpload客户端,考虑部署在10.170.42.93
现在先考虑方案二
每日任务步骤:
scp文件(09->93)
文件去重
gpload入数据库