該模塊利用能夠兼容多種數據格式的云端數據采集接口,基于一站式云服務模式,在線完成對政府網站上的文本、圖像、音頻、視頻等不同類型網頁資源的采集任務,對采集獲取的網頁資源進行統一格式轉換處理,將其批量保存到采集數據庫中。該模塊通過新增監控與變動監控實時更新獲取目標政府網站的最新數據,確保網頁采集的質量。同時采用數據加密、安全傳輸協議等方法保證網頁傳輸安全,確保網頁數據真實、完整、可信和可用。
該模塊主要包括內容管理與元數據管理兩大功能。其中內容管理的功能是對云端在線采集獲取的各類政府網頁進行線下的分類、著錄、標引、編目、鑒定整理,即按照設定的分類方案,對采集獲取的海量政府網頁進行自動分類,然后將添加元數據描述信息的政府網頁保存到相應的管理數據庫。元數據管理的功能則是通過確定元數據元素以及元數據的格式,明確政府網頁內容、結構、背景和管理過程等信息與元數據之間的關系,在相關元數據之間建立聯系,實現元數據信息的序化組織,確保政府網頁信息能夠長期可利用。
該模塊基于云存儲動態易擴展的技術特性,通過調用云存儲服務端的應用程序,對其存儲集群中相應數據庫進行數據的插入、刪除、修改等操作,實現對海量政府網頁資源的實時動態歸檔保存。此外,該模塊還具備存儲數據的云備份、云遷移等功能,能夠根據存儲數據的更新情況,利用云存儲數據加密、云端數據隔離訪問、完整性驗證及可用性保護等方法,定期進行存儲數據的在線備份和遷移等處理,確保云環境下歸檔政府網頁數據的長期安全保存。
本文地址:http://m.123beaconmarketing.com//article/25870.html