3.2.3 網絡媒體信息獲取的技術難點

在網絡媒體信息獲取功能實現過程中，無論是全網信息獲取或是定點信息獲取，都存在相當程度的技術難度。另外，元搜索作為特殊的基于主題的信息獲取，其在信息獲取結果排序方面仍然存在尚未完全解決的技術難點。

首先，網絡媒體信息獲取的工作對象是信息形態各異、信息類型多樣的互聯網媒體。在信息總量迅速膨脹的互聯網信息面前，網絡媒體信息獲取機制通常需要在獲取內容的全面性和時效性間做出取舍。與此同時，在面對完全異構的網絡媒體發布信息時，信息獲取技術需要在各類不同的網絡媒體間普遍適用，這又對網絡媒體信息獲取功能提出了更高的技術要求。當前網絡媒體信息獲取機制在保留傳統的基于網絡交互過程重構機制實現信息獲取的基礎上，逐步轉向在信息獲取過程中集成開源瀏覽器部分組件，甚至整體，用以提高技術功能能級，降低技術實現難度，相關內容本章后續部分將會詳細介紹。

其次，由于部分網絡媒體選擇屏蔽過于頻繁的、來自相同客戶端的信息獲取操作，因此定點信息獲取技術實現的難點還包括在周期性地遍歷設定網域發布內容，確保定點信息獲取的深入性與時效性的基礎上，如何有效回避目標媒體對于所謂“惡意”信息獲取行為的封禁。要解決這一技術難點，一方面可以通過適當選擇周期遍歷時間間隔，防止信息獲取行為造成網絡媒體負載過重；另一方面則涉及定期修改用于內容獲取的網絡客戶端信息請求內容（內容協商行為），避免遭遇目標網絡媒體的拒絕服務。

最后，元搜索在通過搜索引擎實現基于主題的信息獲取過程中，可以選擇向多個搜索引擎串/并行發送信息檢索請求，擴大元搜索技術的網絡覆蓋面。正是由于這一應用需求，對于不同主題選擇恰當的搜索引擎，同時基于合適的主題相關度判斷法則，對于來自不同搜索引擎的信息檢索結果實現基于主題的相關度排序，正是當前元搜索技術研究的難點所在。