庫外剔重技術在鐵通網間結算系統中的研究應用

摘 要：為了適應當前市場日益激烈競爭的需要，滿足用戶不斷提出的各種結算需求，常德鐵通公司需要對現行的網間結算系統進行改造。本文利用庫外剔重技術對原網間結算系統進行改造建設，有效地緩解了系統的壓力，縮短了話單滯留時間，提高了系統的靈活性和穩定性，進而提升鐵通核心競爭力。

關鍵詞：庫外剔重；鐵通；網間結算

DOI：10.16640/j.cnki.37-1222/t.2016.13.001

0 引言

庫外剔重技術是指不依賴于數據庫的唯一索引，在磁盤文件中將相同關鍵字的話單記錄剔重，這樣做的目的是為了在批量入庫之前就保證記錄唯一，從而可以不用為詳單表建唯一索引，以加快入庫速度。

1 背景

為了適應當前市場日益激烈競爭的需要，滿足用戶不斷提出的各種結算需求以及結算系統的易維護性和易擴展性，常德鐵通公司需要對現行的網間結算系統進行改造。原有結算系統話單滯留時間在6-8分鐘，此滯留時間長度已經是系統的極限，在無硬件增加的情況下，如果還需縮短滯留時間只能通過調整營帳接口的生成頻度來解決，但是會給營帳系統的數據處理帶來更大的壓力。基于此背景，為了更大程度的縮短話單滯留時間，提出單獨建立傳送營帳流程的方案。但營帳尚未做剔重處理，所以需要搭建庫外剔重系統實現。

2 實施目標

庫外剔重系統搭建后，由于從采集到營帳接口全部為實時處理，各模塊間再無等待情況，唯一滯留的時間是營帳接口處的文件生成批次時間。因此話單的滯留時間在此情況下應控制在2分鐘以內，如果縮短傳送營帳系統的時間則可將時間繼續縮短。

3 系統結構設計

剔重系統由索引文件初始化子系統、文件剔重子系統、索引分析子系統三部分構成。具體如下：

（1）索引文件初始化子系統根據系統預定義的配置方案完成索引信息存儲數據文件的初始化工作，形成各相應業務對應的特定結構的預留索引信息存儲空間的索引信息存儲數據文件。

（2）文件剔重子系統根據系統預定義的剔重索引字段，在詳單索引信息存儲數據文件中記錄索引信息未進行記錄的詳單的索引信息，剔除詳單文件中與已記錄詳單索引信息一致的詳單記錄，生成不包含重單的詳單文件，提供給批價系統進行批價處理。

（3）索引文件分析子系統，分析某一段時間內的索引信息存儲數據文件，獲取各時間段內索引信息的分布狀態、占用空間和索引文件擴展頻率。以便根據分析結果，調整索引配置方案，提升系統處理效率。

以索引文件初始化子系統為例，程序運行從調用主控函數開始。主控函數（main）調用運行指令分析函數（GetRunCmd）和控制信息初始化函數（GetCtrlInfo）獲取系統運行的參數內容和索引信息。（GetCtrlInfo）函數分別調用（GetIndexCtrlInfo）函數和（GetBlockCtrlInfo） 函數來獲取索引文件的定制信息和存儲結構。索引文件初始化函數（InitIndexFile）分析索引文件，根據文件類型調用不同函數進行初始化：時間類型索引文件調用（InitTimeIndex）函數，用戶類型索引文件調用 （InitUserIndex） 函數。初始化完畢后，返回主控函數，系統記錄成功運行標志后退出。

4 改進后的網間結算系統流程

增加了庫外剔重后的網間結算系統流程如圖1所示。

原計費系統的流程不變，在新的主機上增加庫外剔重流程。庫外剔重流程使用的是批價后為經過合并模塊的話單，通過傳輸程序將批價后話單傳送新的主機，并且將批價后話單轉移至合并入口。庫外剔重進程實時處理傳送到新主機的話單，剔重后的話單實時送給營帳接口模塊。營帳接口模塊按約定好的各批次生成時間生成傳送營帳接口文件，在新的主機接口目錄采集營帳接口數據。其中關鍵流程如下：

（1）傳輸：實時將批價后的話單文件傳送新的主機上的剔重入口，處理方式實時處理。（2）剔重：實時對批價后的話單進行剔重，剔重期限為3個月內的話單，處理方式實時處理。（3）營帳接口：實時處理剔重后的文件，按與營帳約定的批次時間（目前為4分鐘，擬調整為2分鐘）生成文件。

5 實施后效果對比

鐵通網間結算系統庫外剔重流程實施后，通過統計話單文件從采集到融合計費系統到傳送到營帳系統接口時間的差距，可以很明顯看出系統滯留時間大幅縮短，從實施前的平均時間6分鐘，最大時間8分鐘已經可以控制在最大時間2分鐘以內，效果非常明顯，完全達到了預期的目標要求。

6 結論

利用庫外剔重技術對鐵通網間結算系統進行改造建設，有效的緩解了先前系統的壓力，提高了業務管理、運營、服務能力，完全能夠滿足高性能、強穩定性的要求，具有大容量的處理能力，縮短話單滯留時間，大大提高了鐵通網間結算系統的靈活性和響應速度，進而提升鐵通核心競爭力。

作者簡介：陳瀟瀟（1983-），女，湘潭人，助教，研究方向：計算機科學與技術。