市場價格監(jiān)管系統(tǒng)如何在BI里實現(xiàn)

國內(nèi)汽油產(chǎn)銷量非常平穩(wěn)，近幾年保持了穩(wěn)健的走勢。柴油隨著經(jīng)濟(jì)增長放緩，工業(yè)投資水平下降，三大產(chǎn)業(yè)結(jié)構(gòu)性調(diào)整，以往以柴油為驅(qū)動力的第二產(chǎn)業(yè)逐漸被第三產(chǎn)業(yè)取代，在很大程度上影響著柴油消費(fèi)量的下滑。此外，環(huán)保問題日益嚴(yán)峻，沿海地區(qū)部分重污染行業(yè)關(guān)停，或者采用液化氣、天然氣等更加清潔能源，替代柴油消費(fèi)，從而柴油的消費(fèi)水平也隨之下降。2016年全年國內(nèi)柴油表觀消費(fèi)量為1.65億噸，同比下降5%；柴油產(chǎn)量為1.79億噸，同比下降0.5%，柴油的產(chǎn)銷量出現(xiàn)了首次負(fù)增長。

從目前來看，雖然地?zé)挳a(chǎn)量與國企差距較大，但其總煉油能力很大，約占我國煉油能力的25%。地方煉廠由于長期受到原料資源限制無法提高加工負(fù)荷，隨著原油進(jìn)口的逐步放開，原油資源得到保障，加工負(fù)荷將逐漸提高，其產(chǎn)量會有一個質(zhì)的改變，成品油供大于求的局面將進(jìn)一步加劇。

在面對的復(fù)雜的市場競爭環(huán)境、多元化的競爭主體時，通過市場價格監(jiān)控分析來優(yōu)化價格管理決策，從而在激烈的競爭環(huán)境中能脫穎而出，即時反應(yīng)，贏得先機(jī)。

在數(shù)聚股份看來，從“數(shù)據(jù)采集”、“決策展示”、“經(jīng)營模擬”等數(shù)字化運(yùn)營需求出發(fā)，通過 PC 端進(jìn)行數(shù)據(jù)展示，實現(xiàn)分析和決策輔助支持管理。以公司和競爭對手?jǐn)?shù)據(jù)的分析為支撐，加強(qiáng)決策過程、決策模擬的管理。 系統(tǒng)本著以數(shù)據(jù)支撐決策，通過“互聯(lián)網(wǎng)+”的運(yùn)營模式，實現(xiàn)企業(yè)價格管理的速決速勝。

1. 利用移動端技術(shù)來實現(xiàn)數(shù)據(jù)采集的自動化

數(shù)據(jù)采集使用移動端采集方式，便于用戶在任何場景下進(jìn)行數(shù)據(jù)錄入，特別是方便數(shù)據(jù)采集人員進(jìn)行現(xiàn)場取證。

現(xiàn)場取證是保證數(shù)據(jù)采集客觀、準(zhǔn)確、及時的非常重要一環(huán)，以人作為數(shù)據(jù)情報收集的確認(rèn)點難免會遇到誤報、錯報、漏報的情況，即使有互聯(lián)網(wǎng)的數(shù)據(jù)進(jìn)行對比驗證，仍然難以保證信息的準(zhǔn)確。所以系統(tǒng)提供現(xiàn)場取證功能，允許信息收集人員可以將所拍攝的價格照片存儲到系統(tǒng)之后，系統(tǒng)后臺會自動化的使用成熟OCR技術(shù)或開源的OPENCV技術(shù)來提取價格照片進(jìn)行解析，與用戶錄入的價格信息進(jìn)行對比，為各地市的稽查小組提供稽查范圍，從而提高數(shù)據(jù)采集的質(zhì)量。

采集競爭對手的情報首先要考慮的是可行性，可行性包括兩個方面：是否存在收集情報的渠道、收集情報的渠道成本。利用大型連鎖企業(yè)的“前線”，比如加油站、網(wǎng)點等，獲取競爭對手的情報是常見的收集手段。

在成品油零售行業(yè)中數(shù)據(jù)采集的對象主要包括汽油、柴油、潤滑油三類油品。如果對所有競爭對手，收集所有油品的量、價、促銷和服務(wù)信息，即使每周一次，在全省加油站推廣實施也需要耗費(fèi)巨大的人工成本，所以在系統(tǒng)設(shè)計時，充分考慮了情報采集的渠道成本問題，在競爭對手的選取、油品的范圍、屬性信息上都是有所取舍。同時，系統(tǒng)根據(jù)每個加油站的經(jīng)營范圍，自動生成數(shù)據(jù)采集配置表，有針對性的界定每個站點要收集的信息內(nèi)容，把“前線”數(shù)據(jù)采集工作縮減到最精簡。

為提高數(shù)據(jù)質(zhì)量，保證數(shù)據(jù)采集的準(zhǔn)確性和一致性，采集端的數(shù)據(jù)均使用下拉菜單方式設(shè)計，可選擇內(nèi)容均為省中心、地市公司維護(hù)的主數(shù)據(jù)。

要管理好大規(guī)模的商業(yè)情報數(shù)據(jù)采集工作，必須形成一套有效的考核措施，系統(tǒng)通過分析采集人員的操作以及填報的數(shù)據(jù)，為省中心和地市公司提供數(shù)據(jù)采集質(zhì)量的考核報表，便于督導(dǎo)各站保證數(shù)據(jù)采集的質(zhì)量。

2. 通過互聯(lián)網(wǎng)數(shù)據(jù)抓取來豐富本地數(shù)據(jù)的分析

通過自動化爬取互聯(lián)網(wǎng)數(shù)據(jù)的方式，對金聯(lián)創(chuàng)、油客網(wǎng)等信息渠道進(jìn)行外部數(shù)據(jù)獲取，并進(jìn)行自動化的處理，通過移動端向各站傳遞經(jīng)過處理加工的信息，輔助加油站站長進(jìn)行數(shù)據(jù)采集，幫助各地市督導(dǎo)采集的數(shù)據(jù)質(zhì)量。

外部數(shù)據(jù)的獲取主要有兩種手段，即購買和爬取。購買可以獲得相對穩(wěn)定、質(zhì)量較好的數(shù)據(jù)信息，但也存在數(shù)據(jù)購買成本高、數(shù)據(jù)平臺有經(jīng)營風(fēng)險、數(shù)據(jù)內(nèi)容造假、可分析范圍狹窄等弊端；數(shù)據(jù)爬取技術(shù)發(fā)展到今天，已經(jīng)有很多成熟的工具，但本質(zhì)上講，還是利用算法來替代人訪問網(wǎng)頁提取信息的過程，對于有經(jīng)濟(jì)價值的商情信息，我們通常都需要花費(fèi)較小費(fèi)用來獲取授權(quán)，獲取授權(quán)的方式主要以注冊用戶為主，然后使用爬取工具定義規(guī)則就可以獲取外部數(shù)據(jù)，這時獲取的外部數(shù)據(jù)還無法使用，必須根據(jù)對進(jìn)行清洗和加工，最終形成可以與內(nèi)部數(shù)據(jù)相關(guān)聯(lián)的有分析價值的信息。

優(yōu)秀的采集工具應(yīng)具備以下特點：采集實時性強(qiáng)，效率高；支持采集流程；支持定時自動采集；信息提取準(zhǔn)確；支持圖文識別；兼容性強(qiáng)、操作簡單、穩(wěn)定、安全等功能特征。

“信息提取準(zhǔn)確”是采集系統(tǒng)成敗的關(guān)鍵，系統(tǒng)必須具有自動辨別信息發(fā)布時間、發(fā)布來源等信息，并據(jù)此進(jìn)行抓取信息的排列和分類，能準(zhǔn)確提取網(wǎng)頁中的標(biāo)題、正文、發(fā)表時間、來源等信息項，對重復(fù)文章進(jìn)行排重，并對具有分頁的網(wǎng)頁內(nèi)容進(jìn)行自動合并。

高德、百度等地圖信息工具上也提供加油站油價信息，可以通過開發(fā)的API接口獲取，但因為并非是專業(yè)的網(wǎng)站，往往存在信息更新不及時的問題，無法保證數(shù)據(jù)質(zhì)量。

3. 豐富的可視化手段為用戶提供高效的數(shù)據(jù)視圖

基于成熟的商業(yè)智能框架平臺，通過地圖和可視化組件相結(jié)合，為用戶提供可靈活定制的高效的數(shù)據(jù)視圖。用戶可通過簡單選擇操作，獲取內(nèi)容豐富數(shù)據(jù)可視化效果，從而提升科學(xué)決策的質(zhì)量和效率。

4. 提供競爭對手全方位信息來高效支持價格管理決策

通過對競爭對手?jǐn)?shù)據(jù)采集、加工和展示，為用戶提供競爭對手全方位的信息視圖，比如量價的態(tài)勢、促銷和服務(wù)開展等，實現(xiàn)“在一個點看全方位”的應(yīng)用效果。

審核編輯 黃宇