如何利用數據分析技術做好輿情挖掘
編輯導語:隨著網絡的逐漸普及,我國網民數量不斷增加,互聯網成為了人們表達情感和獲取信息的重要途徑,互聯網輿情也成為了社會輿情中重要的一部分。在這種大趨勢之下,如何利用數據分析技術做好輿情挖掘,是值得我們去思考的問題。
隨著互聯網技術的發(fā)展和新媒體應用的創(chuàng)新,人們越來越傾向于通過微博、微信、抖音短視頻等社交媒體來表達自己的觀點、傳播自己的需求、分享各類信息。
如今,任何搬上的互聯網的話題都有網友在下面表達看法,提出各自的建議和意見,有時甚至會掀起不小的“互聯網風浪”。
輿論當下,收集、處理和挖掘其中的價值,洞察各式各樣的觀點、情緒、口碑和民情,可以為企業(yè)提供商業(yè)數據和情報,幫助企業(yè)更智能地做決策;還可以為政府挖掘社會現狀和輿論民情,提高社會治理的整體水平。
一、輿情分析的特點
1. 數據冗雜
首先,從數據基本屬性來看,輿情信息包括文本、圖形、視頻、音頻等,都屬于非結構化數據。其次,數據量大、數據源多。隨著近幾年網絡社交媒體的快速發(fā)展,公開社交平臺越來越多,相比較于十年前,人們可以在更多的平臺上發(fā)表自己的看法。
輿情分析的數據源需要覆蓋到互聯網上幾乎全部的公開信息,不僅有國內的媒體及社交平臺,還有國外的各家媒體和社交平臺。
2. 需求量大
常見的互聯網行業(yè)、金融行業(yè)、房地產行業(yè)、教育行業(yè)、餐飲行業(yè)、各類消費品行業(yè)等都是重點關注輿情分析,具備強大公關能力的行業(yè)。
同時,在政府部門,隨著電子政務的發(fā)展,輿情監(jiān)測和輿情分析能力也得到了很大的重視。輿情監(jiān)測和分析系統為各級各部門政府機構,第一時間提供各類社會輿情資訊。
說到底,“數據是金礦”,輿情監(jiān)測、分析和管理最大的效用就是對互聯網公開信息的大數據分析和價值挖掘,為政府和企業(yè)的智能決策提供輔助,達到較大的社會效益和經濟效益。
因此,各行各業(yè)都需要輿情分析。
3. 附加值高
上一點說到,數據是金礦,輿情分析的結果可以幫助政府和企業(yè)在一些事情上達到較大的社會效益和經濟效益。
輿情分析能夠為政府和企業(yè)提供多維度的數據分析和高附加值的信息洞察,具體來說:
1)負面消息挖掘
輿情監(jiān)測的核心點便是負面消息的數據挖掘,如果不能及時準確的找到負面信息,任由其發(fā)酵壯大,后果是不堪設想的。政府的公信力遭到嚴重質疑,企業(yè)的經濟利益遭受巨大的損失,整個社會狀況也會遭受不小的動蕩。
2)口碑信息挖掘
比如,某茶飲品牌新推出一款茶飲品,企業(yè)最關注的往往是銷量和口碑。一個好的口碑可以帶來整體銷量的大幅度提升,這也是為什么口碑營銷在當下這么火爆的原因。
有針對性的對于某一產品進行口碑監(jiān)測,可以幫助企業(yè)改善產品,及時調整市場營銷策略,提升產品的滿意度。
3)競品信息挖掘
針對目前市面上現存的或潛在的競品企業(yè),進行信息監(jiān)測、情報挖掘,分析其背后的數據價值,通常可以幫助企業(yè)較好的掌握市場競爭的主動權。
4)重大事件分析
無論是網絡熱點事件還是產品營銷事件,通過對事件的傳播分析,監(jiān)測事件的發(fā)展脈絡,挖掘其背后的輿論爆炸點,掌握事件的傳播途徑,可以為快速處理事件和傳播效果分析提供數據依據。
5)民生信息挖掘
對于政府部門來說,最看重的就是民生輿情監(jiān)測。通過對網絡熱點事件的輿情監(jiān)測,可以了解到公眾對其的評論、情緒、傳播方式,對于政府部門引導和控制輿情提供了良好的決策輔助。
尤其是在今年年初新冠疫情爆發(fā)的那段時間,民生輿情監(jiān)測達到了一個巔峰。
4、技術復雜
輿情監(jiān)測與分析,不僅需要強大的數據收集和處理能力,還需要強大的數據挖掘能力,面臨著不小的技術挑戰(zhàn),主要有以下幾個技術難點:
1)全面性
輿情監(jiān)測與分析需要覆蓋到幾乎所有的互聯網信息,數據采集系統要保證數據全面收集、不遺漏,強大的數據采集系統是輿情監(jiān)測的基礎保障。
2)及時性
互聯網環(huán)境下,輿論信息傳播速度極快,輿情監(jiān)測與分析就是在與互聯網速度賽跑。政府和企業(yè)都需要第一時間掌握好輿情動態(tài),實時預警、快速分析、及時響應。
3)精確性
除了要具備及時性,更要精準檢索目標數據。面對海量的輿情數據,輿情數據分析系統不僅要找到相關信息,還要排除無效信息的干擾,最大程度匹配到監(jiān)測數據。
4)豐富性
輿情數據分析系統除了基本的數據精準甄判之外,還需要具備更強大的數據信息挖掘能力。比如,需要對數據信息進行標簽挖掘、地域判斷、信息分類等等,最大化挖掘出數據信息背后的附加值。
二、傳統數據分析技術助力輿情分析
首先,我們來看下傳統的數據分析過程:數據采集一數據清理一數據變換一數據挖掘一模型評估一可視化展示。
由于輿情分析的及時性,數據需要從互聯網上實時采集。分析結果要實時輸出呈現,整個數據挖掘過程需要穿插于整個信息流之中。
輿情信息以流式輸入到數據分析系統中,通過ETL處理標準化的數據,進入到數據挖掘的過程,利用各個機器學習算法模型進行分析和評估。
挖掘結果經過可視化處理后,以實時數據分析報告或實時數據大屏的形式呈現給用戶。
此外,整個數據分析系統需要具備動態(tài)干預能力,來保證數據挖掘規(guī)則和模型的前后一致性。相較于傳統數據分析的靜態(tài)過程,輿情數據的分析和挖掘是一個不間斷、實時的過程。
三、數據分析新技術帶來輿情分析新發(fā)展
1. SaaS產品助力
隨著自媒體的壯大,網絡傳播速度的增長,互聯網輿情的熱度不斷發(fā)酵。輿情分析SaaS產品,能夠幫助政府和企業(yè)更快的搭建自己的輿情分析系統,快速入場輿情分析。
傳統的輿情分析,場景和模式相對單一,網絡輿情分析的精細度要求更高,越來越差異化、個性化。在SaaS產品的標準模式之下,針對不同行業(yè)、不同場景實現基于平臺的精細化運營變得越來越重要。
政府和企業(yè)利用好平臺工具,打造輿情分析閉環(huán)系統,構建精細化運營的產品矩陣,才能真正挖掘到輿情分析背后的超高附加值。
2. 實時數據大屏助力
隨著數據可視化技術的發(fā)展,數據大屏近幾年越來越盛行,尤其是在數據監(jiān)測方面受到政府和企業(yè)的重點關注。數據大屏最大的一個特點就是:數據實時、預計及時、響應迅速。
比如在良渚古城遺址的輿情分析大屏中,展現的是景區(qū)游客熱搜、微博熱搜和應急指揮信息處理三個部分的內容。通過對于網絡輿情的監(jiān)測,進行景區(qū)應急指揮的及時響應和安全保障。
圖源:袋鼠云EasyV
3. AI深度分析助力
隨著AI在近幾年的快速發(fā)展,各類技術框架和分析手段地出現,為輿情分析和挖掘提供了新技術、新手段、新工具。
不僅僅局限于分詞、實體識別、情緒判斷、關鍵詞提取等基礎的文本分析,比如主動事件發(fā)現、智能預警預判、智能信息檢索等技術也走進人們的視野。
與此同時,AI技術的發(fā)展加速了模型算法的工程實現,新模型新算法可以取代輿情服務中的人工部分,來降低不少的輿情分析成本。
本文由 @可愛的數據控 原創(chuàng)發(fā)布于人人都是產品經理,未經許可,禁止轉載
題圖來自unsplash,基于 CC0 協議
您好看了您的文章,我們正在尋找課程開發(fā)的合作講師,不知道您是否有意愿,方便可以加V(www-627715182)詳細了解
我們公司也是做輿情方面的,不知道有沒有機會認識一下
+1