執行Pyforms-web程式：Okmdb分析結果之網路展示

Pyforms-web網路伺服器(runserver)基本上是使用者觸發之執行程式，而該網頁並沒有使用者的篩選、是(內部)公開的資訊彙集處。為避免過度執行okmdb的讀取及分析，因此藉由crontab定期(上班時間之各小時)來進行統計分析並產生分析結果表(設定詳下述)，然後使用者透過pyforms程式來讀取，以一定期更新的方式進行。

執行結果如圖所示：目前設定了6個分頁，採用了pyforms-web /orquistra範例模板，各分頁分別是檔案時間(AnalysisTime)、最大檔案目錄(LargesPath)、最常登入技術組(MostFreqDivisons)、最受歡迎文件(MostFreqGets)、最常登入群組(MostFreqGroups)、以及最常登入使用者(MostFreqUsers)。

由於模板範例是文字條列，pyforms的文字並不能使用html上的設定，而必須另外使用ControlList方法來做：

self._tableGet = ControlList(

‘檔案’,

horizontal_headers=[‘no’,’開啟次數’,’檔案’],

select_entire_row=True,

readonly=True,

)

self._tableGet.value = [l.split() for l in lines[-10:]]

self.formset = [

{ ...,

‘MostFreqGets’: [segment(‘_tableGet’)], ...

{width=”5.799305555555556in” height=”3.2645833333333334in”}

openKM的定期作業

mysql的備份

必須使用mysqldump指令，才可以在沒有停下mysql服務的情況下，完整備份運作中的資料庫。

cd /home/openkm/tomcat/mysql_okmdb

mysqldump --user=root --password=’sino2019’ okmdb >
/home/openkm/tomcat/mysql_okmdb/okmdb.sql

自動執行方式採用/etc/crontab設定進行。

tomcat之備份

tomcat者設定、repository的內容、以及logs檔案，因為隨時在變動中，必須在深夜沒有增加檔案時，進行備份。備份方式採crontab設定rsync指令進行。

rsync -a /home/openkm/tomcat/* /autofs/master/openkm/tomcat_sino4

（-a：封裝備份模式，相當於-rlptgoD，遞迴備份所有子目錄下的目錄與檔案，保留連結檔、檔案的擁有者、群組、權限以及時間戳記¹。）

由於自動化備份不能輸入密碼，因此使用者openkm必須在sino4與master之間設成免密登入，透過autofs的設定，就可以定期備份了。

重建系統之後，可以運用mysql（mysql -u root -p database_name < backup.sql）和rsync指令（對調來源與目的位置）來回復檔案及設定即可。

上班天/時間okmdb的讀取及分析(sino4:/etc/crontab設定每小時執行)

#$ cat /home/kuang/MyPrograms/openkm/rd_okmdb.bsh
DOW=$(date +%u)
H=$(date +%H)
if [ $DOW -gt 0 ] && [ $DOW -le 5 ];then
    if [ $H -ge 8 ] && [ $H -le 17 ];then
        cd /home/kuang/MyPrograms/openkm
        rm -f rd_okmdb.txt
        LC_ALL="zh_TW.UTF-8" ./rd_okmdb.py >rd_okmdb.txt
        if [ $H -eq 17 ];then
            ymd=`date \--rfc-3339='date'`
            cp rd_okmdb.txt rd_okmdb.txt_$ymd
        fi
    fi
fi

定時批次作業(cron table)

一如linux的crontable，openKM程式內也有crontable，可以每小時(\@hourly)、每天(\@daily)、每週(\@weekly)、crontab的內容可以參考官網設定與範例²，以下為bean shell每天執行du的範例。

[openkm\@sino4 rd_openkm.log]$ cat du.bsh
import org.slf4j.Logger;
import org.slf4j.LoggerFactory;
import com.openkm.api.*;
import com.openkm.bean.*;
import com.openkm.util.*;
Logger log = LoggerFactory.getLogger("**com.openkm.scripting.du**");
int MAX_DEPTH = Integer.MAX_VALUE;
void nodeTask(String path, int depth) throws Exception {
for (Folder fld : OKMFolder.getInstance().getChildren(null, path)) {
ContentInfo ci = OKMFolder.getInstance().getContentInfo(null,
fld.getPath() );
log.info(FormatUtil.formatSize(ci.**getSize**()) + '\t' +
fld.**getPath**());
if (depth < MAX_DEPTH) {
nodeTask(fld.getPath(), depth + 1);
}
}}
log.info("***** DU BEGIN *****");
nodeTask("/okm:root", 0);
log.info("***** DU END *****");

crontab設成每天執行，其結果將會出現在$TOMCAT/logs/openkm.log檔案內，marker會是日期及com.openkm.scripting.du。因此只要在逐時python程式內讀取openkm.log內容(結果為du.csv)貼在網頁即可。

[openkm\@sino4 rd_openkm.log]$ cat rd_log.py

#!python 3
from pandas import *
import subprocess
logP='/home/openkm/tomcat/logs/'
log=logP+'openkm.log'
cmd='date \--rfc-3339="date"'
today=subprocess.check_output(cmd,shell=True).strip(b'\n').decode("utf-8")
du_mark='com.openkm.scripting.du'
cmd='grep '+today+' '+log+'|grep '+du_mark+'|grep -v " DU"'
lis=subprocess.check_output(cmd,shell=True).split(b'\n')
a=' - '
i=lis[0].decode("utf-8").index(a)+3
lis=[j[i:].decode("utf-8").split('\t') for j in lis if
len(j)>0]
size=[lis[i][0] for i in range(len(lis))]
path=[lis[i][1] for i in range(len(lis))]
df=DataFrame({'size':size,'path':path})
df['level']=[a.count('/') for a in df.path]
kk={'GB':1000000000,'MB':1000000,'KB':1000,'B':1}
df['num']=[float(a.split()[0])*kk[a.split()[1]] for a in
df['size']]
df=df.sort_values(['level','num'], ascending=[True,
False]).reset_index(drop=True)
del df['num']
df.set_index('level').to_csv(logP+'du.csv')

Glossary

=========

  ------- ------------------------------------
  APIs    Application Programming Interface
  COM     Component Object Model
  GDI     Graphical Data Interface
  GUI     Graphical User Interface
  GUIDs   globally unique identifiers
  ODBC    Open Database Connectivity
  OLE     Object Linking and Embedding
  MDI     Multiple Document Interface
  MFC     Microsoft Foundation Class Library
  SDI     Single Document Interface
  SDK     Software Development Kit
  TLB     type library file
  ------- ------------------------------------

附錄A參考文獻與資料來源