当前您在:主页 > 民生 >

数据下行培训-王红军new

日期:2019-05-29   关注热度:℃  所属栏目: 民生

2017,Internet ITS组,整数的干线用管。产业BU, 王红军,产业BU 知识落后于对手的日常监控 演示和知识反省,,知识落后于对手的日常监控,信息性摘要:,1。知识落后于对手的链路、解析、断定显示 2。知识落后于对手的相互作用 三。知识器具和服务业 4。当地的处置 5。发表和反省根本日记,,,1,落后于对手的知识因为统计法表,统计法表由统计法站自动的音色。,与审计音色有关 EII器具经过HTTP从国家办获取落后于对手的知识 (此HTTP与知识中心HTTP有关) EII登录/web_data/log_i/date 次于的需求日记 HttpRequestData 需求记载仔细日记 HttpRequestDataTask 需求把任务交给开端日记 需求zip以贮存器内容 /web_data/ 泄压到/web_data/eii_temp/dy_recv/orig,,,1,文献泄压,合日记 TransferUtil 泄压缩较晚地,所大约del文献都将被解析。 Del文献处置日记 ProcessDyRecvFolder Del知识结构反省日记 DataFactory 仔细信息 DataMonitorLogFactory 将文献以书面提出知识库本子以产生日记 CommandForDb2Util del文献导入知识库本子仔细、日记 runItImport.sh import_msg.out,,,1,EII承担授权,24K表格编号结束 显示把任务交给每小时转让一次,假设落后于对手的链路结束紧要显示,重行开始EII 知识校对断定显示 HttpRequestDataCheckTask HttpRequestDataCheck 显示查询日记 HttpDataCheckListServlet,select char(date(max(req_start_time))) req_start_time,dataq_id from http_request_log where req_status = DEALSUCC and dataq_id in ( 1350136265826_4594 , 1350198190203_2211 , 1350206965383_6033 , 1350207075630_2684 , 1350207171402_3112 , 1350205611178_493 , 1350205941033_173 , 1350206051329_9723 , 1350206176684_7958 , 1350206346864_8079 , 1350206139736_3374 , 1350206194117_5587 , 1350206245497_1562 , 1350206293222_684 , 1350206336523_1471 , 1350206416681_5932 , 1350206458809_1249 , 1350206507295_8634 , 1350206547677_6226 , 1350206585299_6346 , 1350206443232_531 , 1350206552899_1741 , 1350206676038_5046 , 1350827242661_8618 ) group by dataq_id;,,,1,即使订阅了ID? Eii_Subdataq 表中 status 田 0 不占用 1 已订阅 拟出订阅 UPDATE Eii_Subdataq a SET status= 0 WHERE 1=1 AND a.trans_Type= H AND SUBDATAQ_NAME like %严厉的话% AND a.status= 1 ; 担当管理人后重行开始EII,,,1,1、知识未结束 反省需求日记和辨析日记,反省即使未辨析落后于对手的文献; 通常在缺乏需求的事件下重行开始EII或Server2 那就够了; 解析失常的,比照失常的日记持续考察,处置 2、知识不精确 需求重行计数 大抵,拟出当天的需求记载,重行开始EII将重行开始次于的计数 特别事件需求支撑和共同著作 落后于对手的订阅的ID落后于对手的记载在http_需求中 req_status 田是 ‘DEALSUCC’记载处置成,,,1,工商年表 1350136265826_4594 K_DS_TJIB_Y_ALL 工商一季一次地 1350198190203_2211 K_DS_TJIB_Y_Q_ALL 工商月表 1350206965383_6033 K_DS_TJIB_Y_Q_M_ALL 工经商日日记 1350207075630_2684 K_DS_TJIB_Y_Q_M_P_ALL 工经商日日记 1350207171402_3112 K_DS_TJIB_Y_Q_M_P_D_ALL 产业年表 1350205611178_493 K_DS_TJIN_Y_ALL 产业一刻钟表 1350205941033_173 K_DS_TJIN_Y_Q_ALL 产业月表 1350206051329_9723 K_DS_TJIN_Y_Q_M_ALL 产业日日记 1350206346864_8079 K_DS_TJIN_Y_Q_M_P_D_ALL 经商年表 1350206443232_531 K_DS_TJBS_Y_ALL 经商一季一次地 1350206552899_1741 K_DS_TJBS_Y_Q_ALL 经商月报 1350206676038_5046 K_DS_TJBS_Y_Q_M_ALL 任务的日子任务表 1350827242661_8618 K_DS_TJBS_Y_Q_M_P_D_ALL,,,2,EII以两种方法开价第三方知识 知识兑换平台 - 当地的知识兑换 - 把任务交给控制台(落后于对手的知识同步的把任务交给) ) 知识兑换平台 - 知识用于工作上的 - 把任务交给控制台(落后于对手的知识同步的把任务交给)(用于工作上的)),,,2,落后于对手的知识同步的把任务交给 ETL模仿,时机掌握运转 落后于对手的知识同步的把任务交给(处置) 贮存器快速地流动 本子 看家狗落后于对手的链路 自动的运转 自动的监控日记 DataDownSyncTask 早晨6点开端运转 反省7张K表落后于对手的 select b.dataq_id,case when (req_status = DEALERR ) then 1 else 0 end req_status from (选择) max(req_start_time) req_start_time,dataq_id from http_request_log where (req_status = DEALSUCC or req_status = DEALERR ) and 日期(需求开端时期)=current date and dataq_id in ( 1350206346864_8079 , 1350827242661_8618 , 1369278552825_5315 , 1369278607828_1502 , 1369278646717_157 , 1369308506930_8517 , 1370339967438_683 ) group by dataq_id) a,http_request_log b where a.req_start_time=b.req_start_time and a.dataq_id=b.dataq_id,睬:假设那天重行开始EII,自动的派生把任务交给未运转,需求人工控制处理,,,2,落后于对手的知识同步的把任务交给(处置) 关涉贮存器快速地流动 PD_EXPORT_GY_D、PD_EXPORT_SY_D 日记db2 server/tmp/pd_export_gy_d.log PD_EXPORT_SY_D.LOG 派生本子 /web_data/eii_temp/ 日记 页盖的实时知识是当地的统计法表知识,,,3,运转辨析、在途知识查询、先行标志 dsa器具转让的raq文献在/web_data/路下 对应的润乾文献经过右键日记页检查属性正中鹄的reportCode驻扎军队到哪个raq文献, 比如要点污名生产与销售存对应的raq为ZDPP_ZDPP_CXC_ALL开办的相干raq(以中国字特大的大写字母命名)。 再