樂(lè)思網(wǎng)絡(luò)輿情監(jiān)測(cè)系統(tǒng)

樂(lè)思網(wǎng)絡(luò)輿情監(jiān)測(cè)系統(tǒng)是基于全球領(lǐng)先的互聯(lián)網(wǎng)采集監(jiān)控技術(shù)而研發(fā)，具有發(fā)現(xiàn)快，信息全，分析準(zhǔn)的優(yōu)勢(shì)。可讓用戶眼觀六路耳聽(tīng)八方，在第一時(shí)間發(fā)現(xiàn)負(fù)面輿情。

• 系統(tǒng)概述
• 實(shí)施后的利益
• 系統(tǒng)組成
• 自動(dòng)采集子系統(tǒng)功能描述
• 內(nèi)容分析子系統(tǒng)功能描述
• 界面呈現(xiàn)子系統(tǒng)功能描述
• 系統(tǒng)實(shí)施

一、 系統(tǒng)概述

樂(lè)思網(wǎng)絡(luò)輿情監(jiān)測(cè)系統(tǒng)是針對(duì)互聯(lián)網(wǎng)這一新興媒體，通過(guò)對(duì)海量網(wǎng)絡(luò)輿論信息進(jìn)行實(shí)時(shí)的自動(dòng)輿情采集，輿情分析，輿情匯總，輿情監(jiān)視，并識(shí)別其中的關(guān)鍵輿情信息，及時(shí)通知到相關(guān)人員，從而第一時(shí)間應(yīng)急響應(yīng)，為正確輿論導(dǎo)向及收集網(wǎng)友意見(jiàn)提供直接支持的一套信息化平臺(tái)。

其業(yè)務(wù)流程如下圖所示：

圖1： 樂(lè)思網(wǎng)絡(luò)輿情監(jiān)測(cè)系統(tǒng)的業(yè)務(wù)流程

相比目前的人工輿情監(jiān)測(cè)，其優(yōu)勢(shì)明顯：

比較指標(biāo)	人工監(jiān)測(cè)	采用樂(lè)思網(wǎng)絡(luò)輿情監(jiān)測(cè)系統(tǒng)
目標(biāo)網(wǎng)站	幾十個(gè)	幾百個(gè)到幾千個(gè)幾萬(wàn)個(gè)-采3453輿情4533集-
人力成本	需分別登錄各個(gè)網(wǎng)站，手工查閱，還要手工復(fù)制粘貼，疲于奔命	網(wǎng)絡(luò)信息的獲取工作完全由軟件自動(dòng)進(jìn)行，監(jiān)測(cè)人員只需在內(nèi)網(wǎng)集中進(jìn)行內(nèi)容的瀏覽與分析
負(fù)面信息識(shí)別	需要逐條人工查看確認(rèn)	在自動(dòng)判別的基礎(chǔ)上再人工確認(rèn)
信息保存	零碎，不可避免會(huì)出錯(cuò) -采3453輿情4533集-	精確，全面，便于事后追蹤
數(shù)據(jù)存儲(chǔ)	Word文件，分散，很難管理	統(tǒng)一存放在大型關(guān)系數(shù)據(jù)庫(kù)中，集中管理
監(jiān)測(cè)報(bào)告	基于手工統(tǒng)計(jì)加估計(jì)，數(shù)據(jù)支持不充分	基于自動(dòng)化的統(tǒng)計(jì)分析， 圖文并茂，具有翔實(shí)統(tǒng)計(jì)數(shù)據(jù)支持，可以每日，每周，每月出報(bào)告
監(jiān)測(cè)效果	覆蓋片面，不及時(shí) 差強(qiáng)人意，浪費(fèi)人力資源	覆蓋全面，實(shí)時(shí)，幾分鐘到幾十分鐘 自動(dòng)化，系統(tǒng)化

二、 實(shí)施后的利益

監(jiān)測(cè)目標(biāo): 一切與本市本省相關(guān)的信息，特別是負(fù)面信息
后續(xù)處理: 人工與目標(biāo)網(wǎng)站負(fù)責(zé)人交涉（要警惕某些所謂刪貼公司乃騙子勒索公司），做好應(yīng)對(duì)措施，在第一時(shí)間發(fā)布對(duì)應(yīng)處理消息

實(shí)施后好處:
1. 可實(shí)時(shí)監(jiān)測(cè)微信、微博，論壇，博客，新聞，搜索引擎中相關(guān)信息web2db knowlesys web2db
2. 可對(duì)重點(diǎn)QQ群的聊天內(nèi)容進(jìn)行監(jiān)測(cè)
3. 可對(duì)重點(diǎn)首頁(yè)進(jìn)行定時(shí)截屏監(jiān)測(cè)及特別頁(yè)面證據(jù)保存
4. 對(duì)于新聞頁(yè)面可以找出其所有轉(zhuǎn)載頁(yè)面web2db knowlesys web2db
5. 系統(tǒng)可自動(dòng)對(duì)信息進(jìn)行分類(lèi)26禁止9盜用0
6. 系統(tǒng)可追蹤某個(gè)專(zhuān)題或某個(gè)作者的所有相關(guān)信息
7. 監(jiān)測(cè)人員可對(duì)信息進(jìn)行挑選，再分類(lèi)
8. 監(jiān)測(cè)人員可以基于自己的工作結(jié)果輕松導(dǎo)出制作含有圖表的輿情日?qǐng)?bào)周報(bào)

最終目的：
♦ 可排除或縮小偶發(fā)負(fù)面信息給本省/市形象及本省/市領(lǐng)導(dǎo)帶來(lái)的不利影響樂(lè)knowlesys思
♦ 可及時(shí)發(fā)現(xiàn)關(guān)于本市本省的輿情呼聲，第一時(shí)間了解民意，在萌芽狀態(tài)化解矛盾樂(lè)knowlesys思

三、 系統(tǒng)組成

樂(lè)思網(wǎng)絡(luò)輿情監(jiān)測(cè)系統(tǒng)由兩個(gè)子系統(tǒng)組成：自動(dòng)采集子系統(tǒng)（采集層）與分析瀏覽 子系統(tǒng)（分析層與呈現(xiàn)層）。其關(guān)系如下圖所示：

圖2：樂(lè)思網(wǎng)絡(luò)輿情監(jiān)測(cè)系統(tǒng)架構(gòu)

樂(lè)思網(wǎng)絡(luò)輿情監(jiān)測(cè)系統(tǒng)的網(wǎng)絡(luò)拓?fù)浣Y(jié)構(gòu)如下圖所示，依據(jù)需要也可以分開(kāi)在隔離的外網(wǎng)與內(nèi)網(wǎng)中實(shí)施。

 

圖3：網(wǎng)絡(luò)拓?fù)浣Y(jié)構(gòu)

四、 自動(dòng)采集子系統(tǒng)功能描述

自動(dòng)采集子系統(tǒng)可以對(duì)任意目標(biāo)網(wǎng)站進(jìn)行自動(dòng)采集。

例如：新華網(wǎng)、強(qiáng)國(guó)論壇、天涯社區(qū)、西祠社區(qū)、網(wǎng)易社區(qū)、新浪論壇、搜狐社區(qū)、鳳凰網(wǎng)、百度貼吧、以及用戶指定的其他動(dòng)態(tài)網(wǎng)站。可以抽取所有新聞文章或主題帖或者最新主題帖內(nèi)容，還可以抽取某個(gè)主題帖的所有回復(fù)帖或者最新回復(fù)帖的內(nèi)容。即可指定某個(gè)目標(biāo)網(wǎng)站進(jìn)行監(jiān)測(cè)，也可以不指定目標(biāo)網(wǎng)站對(duì)于全球范圍內(nèi)網(wǎng)站進(jìn)行監(jiān)測(cè)，或者進(jìn)行兩者混合監(jiān)測(cè)。既可以監(jiān)測(cè)國(guó)內(nèi)網(wǎng)站，也可以監(jiān)測(cè)國(guó)外網(wǎng)站如Facebook， Twitter，BBC，CNN。

自動(dòng)采集子系統(tǒng)還可以對(duì)基于應(yīng)用程序的聊天室程序監(jiān)測(cè)。

后端數(shù)據(jù)庫(kù)支持任意的主流關(guān)系型數(shù)據(jù)庫(kù)，如Oracle， IBM DB2， MS SQL Server， MySQL， Sybase以及文件型數(shù)據(jù)庫(kù)Access等。

自動(dòng)采集子系統(tǒng)的全方位監(jiān)測(cè)功能如下圖所示：

圖4：自動(dòng)采集子系統(tǒng)全方位監(jiān)測(cè)

自動(dòng)采集子系統(tǒng)具有以下幾個(gè)顯著特點(diǎn)：

1. 全球領(lǐng)先的自動(dòng)采集功能
樂(lè)思軟件的網(wǎng)絡(luò)信息采集技術(shù)全球領(lǐng)先，支持對(duì)任意網(wǎng)頁(yè)內(nèi)任意數(shù)據(jù)的精確采集。樂(lè)思軟件每天都為國(guó)內(nèi)外用戶針對(duì)各種各樣的網(wǎng)站提供采集服務(wù)，沒(méi)有高效穩(wěn)定的采集平臺(tái)是無(wú)法做到的。

2. 支持各種監(jiān)測(cè)對(duì)象
可以實(shí)時(shí)監(jiān)測(cè)微信，微博，新聞，論壇，博客，公共聊天室，搜索引擎，留言板，應(yīng)用程序，報(bào)刊網(wǎng)站電子版等。

3. 無(wú)需配置直接監(jiān)測(cè)幾千個(gè)新聞網(wǎng)站
系統(tǒng)內(nèi)置對(duì)全球范圍內(nèi)網(wǎng)站的監(jiān)測(cè)配置，只需輸入關(guān)鍵詞，自動(dòng)采集出文章標(biāo)題與正文。

4. 強(qiáng)大的多語(yǔ)言統(tǒng)一處理功能26禁止9盜用0
可自動(dòng)處理并保存中文，英文，法文，德文，日語(yǔ)，韓語(yǔ)，維文，阿拉伯語(yǔ)等多種語(yǔ)言。

5. 智能文章提取
對(duì)于文章類(lèi)型網(wǎng)頁(yè)，可以無(wú)需配置，直接自動(dòng)提取文章正文與標(biāo)題，以及作者發(fā)布日期等，自動(dòng)去除廣告，欄目，版權(quán)等無(wú)關(guān)的垃圾內(nèi)容

6. 完美支持各種網(wǎng)頁(yè)情況
支持當(dāng)前流行的Web 2.0 AJAX動(dòng)態(tài)網(wǎng)站
支持用戶名與密碼自動(dòng)登錄
支持表單查詢
支持下一頁(yè)自動(dòng)瀏覽功能
支持多頁(yè)面文章內(nèi)容自動(dòng)抽取與合并
可以自動(dòng)下載正文內(nèi)圖片以及各類(lèi)附件
可以選擇保存原文快照以備查
支持多種互聯(lián)網(wǎng)協(xié)議： HTTP、HTTPS、以及FTP
支持多種網(wǎng)絡(luò)文件格式：HTML/XML/CSV/TEXT/RSS/ATOM
…
您知道嗎？--我們的系統(tǒng)所提供的各種特性組合起來(lái)可以處理成千上萬(wàn)種網(wǎng)頁(yè)或數(shù)據(jù)的不同情況

7. 自動(dòng)去重功能
每次采集時(shí)，對(duì)于同一個(gè)URL，僅采集最新的沒(méi)有采集過(guò)的文章內(nèi)容或回復(fù)，對(duì)于已經(jīng)采集過(guò)的內(nèi)容，自動(dòng)忽略。對(duì)于轉(zhuǎn)載文章，可以選擇自動(dòng)去重。

8. 內(nèi)置各種后期數(shù)據(jù)處理功能
數(shù)據(jù)從網(wǎng)頁(yè)上獲取后，可進(jìn)一步精加工為各種更細(xì)粒度的字段數(shù)據(jù)或者合并整合，替換統(tǒng)計(jì)等. 例如關(guān)鍵詞抽取，街道地址抽取，省市名稱(chēng)抽取，郵編抽取，電話號(hào)碼抽取，傳真號(hào)碼抽取，電子郵件地址抽取，QQ/MSN/Skype抽取，URL抽取等。26禁止9盜用0

9. 可無(wú)人值守全天候自動(dòng)采集
可定時(shí)運(yùn)行，也可7×24小時(shí)運(yùn)行，可設(shè)置采集時(shí)間間隔最短為1分鐘。

10. 用戶可以自行添加目標(biāo)監(jiān)測(cè)網(wǎng)站
利用系統(tǒng)提供的采集平臺(tái)，用戶可以很容易地對(duì)目標(biāo)網(wǎng)站進(jìn)行可視化分析，配置出采集任務(wù)文件，加入調(diào)度過(guò)程，從而可以任意修改，增加，移除監(jiān)測(cè)目標(biāo)。

五、 內(nèi)容分析子系統(tǒng)功能描述

內(nèi)容分析子系統(tǒng)抽取出內(nèi)容的元信息，基于用戶的關(guān)鍵詞設(shè)置，對(duì)內(nèi)容進(jìn)行實(shí)時(shí)地自動(dòng)分類(lèi)自動(dòng)聚類(lèi)。
樂(lè)思研發(fā)的超高速關(guān)鍵詞提取技術(shù)，在3萬(wàn)字的文章中查找1萬(wàn)個(gè)關(guān)鍵詞的出現(xiàn)次數(shù)， 不超過(guò)6.9毫秒。

六、 界面呈現(xiàn)子系統(tǒng)功能描述

功能架構(gòu)如下圖所示：

圖5: 界面呈現(xiàn)子系統(tǒng)功能架構(gòu)

分析瀏覽 子系統(tǒng)具有以下顯著特點(diǎn)：

1. 多人協(xié)同工作
不同用戶瀏覽不同內(nèi)容，執(zhí)行不同操作，完成不同職責(zé)

2. 文章要素顯示， 疑似負(fù)面信息自動(dòng)提示
?對(duì)于新聞文章與博客文章，可采集標(biāo)題，正文，作者，發(fā)布時(shí)間，來(lái)源
對(duì)于關(guān)鍵詞用高亮背景彩色顯示

3. 帖子要素顯示， 疑似負(fù)面信息自動(dòng)提示
對(duì)于論壇帖子，可采集標(biāo)題，正文，作者，發(fā)貼時(shí)間，查看次數(shù)，回復(fù)貼數(shù)， 發(fā)貼人IP
對(duì)于關(guān)鍵詞用高亮背景彩色顯示

4. 分類(lèi)與編輯
對(duì)于采集后的信息內(nèi)容，可以進(jìn)行過(guò)濾，分類(lèi)，備注，與編輯，便于后期管理與分析

5. 強(qiáng)大的搜索功能
既可以精確搜索也可以模糊搜索，既可以按分類(lèi)搜索，也可按來(lái)源搜索

6. 支持人工采集
對(duì)于某些緊急或異常情況，可以人工輸入采集到的信息

7. 反網(wǎng)站限制功能
可采集被國(guó)內(nèi)屏蔽的國(guó)外網(wǎng)站，可采集限制了來(lái)源IP與訪問(wèn)頻率的網(wǎng)站，可自動(dòng)獲取代理IP，無(wú)需設(shè)置

8. 短信通知功能
可以設(shè)定關(guān)鍵詞，凡是采集內(nèi)容出現(xiàn)了一個(gè)或多個(gè)關(guān)鍵詞，就可以將該條記錄發(fā)送給相關(guān)短信接收人員，便于無(wú)人值守實(shí)時(shí)監(jiān)測(cè)。

9. 利用輿情分析引擎生成輿情報(bào)表
熱點(diǎn)話題列表、發(fā)貼數(shù)量、評(píng)論數(shù)量、作者個(gè)數(shù)
敏感話題列表
自動(dòng)摘要
自動(dòng)關(guān)鍵詞抽取
各類(lèi)別趨勢(shì)圖表
新聞?lì)悎?bào)表： 標(biāo)題、出處、發(fā)布時(shí)間、內(nèi)容、點(diǎn)擊次數(shù)、評(píng)論人、評(píng)論內(nèi)容、評(píng)論數(shù)量等
論壇類(lèi)報(bào)表： 帖子的標(biāo)題、發(fā)言人、發(fā)布時(shí)間、內(nèi)容、回帖內(nèi)容、回帖數(shù)量等

七、 系統(tǒng)實(shí)施

系統(tǒng)主要應(yīng)用于政府部門(mén)以及大中型企業(yè)的公關(guān)部門(mén)。
由于互聯(lián)網(wǎng)的復(fù)雜性，樂(lè)思網(wǎng)絡(luò)輿情監(jiān)測(cè)系統(tǒng)實(shí)施起來(lái)需要客戶的配合。
針對(duì)客戶需求，我們提供如下系統(tǒng)實(shí)施服務(wù)：

編號(hào)	名稱(chēng)	內(nèi)容
1	交鑰匙工程	提供樂(lè)思網(wǎng)絡(luò)輿情監(jiān)測(cè)系統(tǒng)的整套軟件與文檔， 提供用戶指定的N個(gè)網(wǎng)站的采集配置文件。 保證系統(tǒng)上線后即可實(shí)時(shí)監(jiān)測(cè)到目標(biāo)網(wǎng)站內(nèi)容。
2	培訓(xùn)	提供遠(yuǎn)程培訓(xùn)或上門(mén)培訓(xùn)服務(wù)
3	后續(xù)服務(wù)	定期提供目標(biāo)網(wǎng)站更新后的配置參數(shù)文件 定期回訪，提供技術(shù)咨詢，疑難解答 提供遠(yuǎn)程運(yùn)維服務(wù)，減少對(duì)客戶相關(guān)支持人員的技術(shù)水平要求
4	技術(shù)支持	通過(guò)電話、Email、QQ/MSN/Skype 回答用戶的問(wèn)題 進(jìn)行技術(shù)支持