99re在线视频观看|日韩 欧美 国产 亚洲 制服|男人的天堂视频网站清风阁|亚洲经典激情春色另类|五月天精品视频

國(guó)內(nèi)面向社會(huì)科學(xué)研究的中文新聞數(shù)據(jù)庫現(xiàn)已上線

2020-06-05 14:01:00
admin
原創(chuàng)
摘要:CND中文新聞數(shù)據(jù)庫采集了國(guó)家網(wǎng)信辦公布的可供新聞轉(zhuǎn)載的380家新聞出版單位的所有互聯(lián)網(wǎng)公開的數(shù)據(jù),目前數(shù)量總量超過8000萬條,覆蓋媒體數(shù)量1000余家。預(yù)計(jì)到2020年下半年覆蓋國(guó)內(nèi)主流1500家網(wǎng)站數(shù)據(jù)以及主要報(bào)紙,公眾號(hào)和APP的新聞數(shù)據(jù)。本數(shù)據(jù)庫采用Hadoop平臺(tái)作為文本存儲(chǔ)的基礎(chǔ)架構(gòu),并基于分布式搜索引擎對(duì)文本提供索引。

1.大數(shù)據(jù)時(shí)代的新聞業(yè)

隨著21世紀(jì)的到來,人類社會(huì)已經(jīng)逐漸進(jìn)入大數(shù)據(jù)時(shí)代,麥肯錫稱:“數(shù)據(jù),已經(jīng)滲透到當(dāng)今每一個(gè)行業(yè)和業(yè)務(wù)職能領(lǐng)域,成為重要的生產(chǎn)因素。人們對(duì)于海量數(shù)據(jù)的挖掘和運(yùn)用,預(yù)示著新一波生產(chǎn)率增長(zhǎng)和消費(fèi)者盈余浪潮的到來?!比蛎刻焐傻臄?shù)據(jù)量達(dá)到2.5EB,相當(dāng)于10億張容量為25GB的藍(lán)光光盤,而且其增長(zhǎng)勢(shì)頭在不斷加快。令人吃驚的是,人類迄今為止生成的數(shù)據(jù)中,有90%是在近兩年內(nèi)產(chǎn)生的。

 

這些數(shù)據(jù)中,其中有一類數(shù)據(jù)記錄了我們?nèi)祟惿鐣?huì)的所有發(fā)展過程,是社會(huì)發(fā)展和變遷的見證者,它就是“新聞”。目前我國(guó)每天產(chǎn)生的原創(chuàng)文本新聞(含各類資訊)的數(shù)量超過數(shù)十萬篇,如此數(shù)量規(guī)模的新聞文本中蘊(yùn)含了大量的信息和知識(shí)。如何將這些有價(jià)值的新聞文本存儲(chǔ)起來,并從中提取出有價(jià)值的信息和知識(shí)是一個(gè)巨大挑戰(zhàn)。CND中文新聞數(shù)據(jù)庫正是在這一背景下誕生。


2.數(shù)據(jù)庫簡(jiǎn)介

CND中文新聞數(shù)據(jù)庫包括國(guó)內(nèi)外所有中文新聞報(bào)道,索引提供新聞內(nèi)容主題分類, 從新聞中提取時(shí)間、地點(diǎn)、人物、機(jī)構(gòu)、主題、情感、影響力等各類結(jié)構(gòu)化變量。新聞數(shù)據(jù)來源覆蓋國(guó)家網(wǎng)信辦公布的可供新聞轉(zhuǎn)載的380家新聞單位(含報(bào)紙和網(wǎng)站)、 各級(jí)省市的地方媒體、知名微信公眾號(hào)等??砂粗黝}、時(shí)間、來源進(jìn)行分類篩選,此外,數(shù)據(jù)庫還可提供便攜的新聞可視化分析新聞指數(shù)查詢工具。

該數(shù)據(jù)庫面向人文社會(huì)科學(xué)領(lǐng)域,致力于滿足用戶在輿情分析、內(nèi)容分析、傳播分析、案例研究、文化研究、歷史研究等方面的需求,幫助用戶高效檢索新聞文本,節(jié)約大量的資料收集整理時(shí)間。CND將最終建立一個(gè)能夠覆蓋全媒體、全領(lǐng)域、全時(shí)域的中文新聞開放數(shù)據(jù)服務(wù)平臺(tái),為相關(guān)領(lǐng)域的學(xué)者、媒體機(jī)構(gòu)、政府機(jī)構(gòu)、企業(yè)等用戶提供新聞數(shù)據(jù)可視化分析和研究服務(wù),幫助用戶更好地洞察和了解社會(huì)現(xiàn)象,市場(chǎng)需求以及政治、經(jīng)濟(jì)、社會(huì)變遷的趨勢(shì)。


數(shù)據(jù)庫特色


3.數(shù)據(jù)庫提供以下服務(wù)


?中文新聞數(shù)據(jù)檢索

CND中文新聞數(shù)據(jù)庫采集了國(guó)家網(wǎng)信辦公布的可供新聞轉(zhuǎn)載的380家新聞出版單位的所有互聯(lián)網(wǎng)公開的數(shù)據(jù),目前數(shù)量總量超過8000萬條,覆蓋媒體數(shù)量1000余家。預(yù)計(jì)到2020年下半年覆蓋國(guó)內(nèi)主流1500家網(wǎng)站數(shù)據(jù)以及主要報(bào)紙,公眾號(hào)和APP的新聞數(shù)據(jù)。本數(shù)據(jù)庫采用Hadoop平臺(tái)作為文本存儲(chǔ)的基礎(chǔ)架構(gòu),并基于分布式搜索引擎對(duì)文本提供索引。


?可視化分析

銳研社會(huì)科學(xué)專題數(shù)據(jù)庫平臺(tái)集成了一款文本分析與挖掘工具——銳研·云文析系統(tǒng)。用戶可以將搜索的文本內(nèi)容添加到自定義的文本庫,通過中文自然語言處理引擎,結(jié)合系統(tǒng)和用戶自定義的詞匯字典庫進(jìn)行各類詞頻分析,文本分類、文本聚類、情感分析、主題分析等。



?新聞指數(shù)

CND中文新聞數(shù)據(jù)庫還提供了一個(gè)指數(shù)查詢工具——銳研新聞指數(shù)(RNI, Ring News Index)。新聞指數(shù)可以提供用戶檢索某一個(gè)關(guān)鍵詞或關(guān)鍵詞組合在一定時(shí)間范圍內(nèi)的出現(xiàn)詞頻、新聞數(shù)量、新聞文本情感均值、新聞傳播影響力均值等。這些指標(biāo)可以按天、月、年時(shí)間進(jìn)行可視化展現(xiàn),指數(shù)結(jié)果也可以進(jìn)行導(dǎo)出,以供進(jìn)一步分析研究。




?知識(shí)挖掘

新聞文本中蘊(yùn)含了大量有待挖掘的信息,CND將致力于對(duì)文本內(nèi)容進(jìn)行深度挖掘,提取更多有意義的變量,如事件分類、人物角色、觀點(diǎn)觀念、行為方式、態(tài)度傾向等等。通過構(gòu)建知識(shí)網(wǎng)絡(luò),還可以分析各類信息主體之間的關(guān)聯(lián)關(guān)系。CND將可能構(gòu)建一個(gè)潛在的人類社會(huì)知識(shí)網(wǎng)絡(luò)體系。


?內(nèi)容生產(chǎn)

新聞行業(yè)從根本上說是內(nèi)容產(chǎn)業(yè),而數(shù)據(jù)庫本身是內(nèi)容整合的有效工具,是數(shù)字內(nèi)容產(chǎn)業(yè)的價(jià)值體現(xiàn)。整合是結(jié)構(gòu)的優(yōu)化,流程的再造,是力量的倍增器。以數(shù)據(jù)庫為核心的媒體資源整合,是提高新聞媒體競(jìng)爭(zhēng)力的重要手段。其中“數(shù)據(jù)新聞”、“算法新聞”或“人工智能新聞”是一個(gè)方向。這類新聞通常是基于數(shù)據(jù)的抓取、挖掘、統(tǒng)計(jì)、分析和可視化呈現(xiàn)的新型新聞報(bào)道方式,是隨著大數(shù)據(jù)和人工智能時(shí)代的到來出現(xiàn)的一種新型報(bào)道形態(tài)。這在一定程度上可能改變傳統(tǒng)新聞生產(chǎn)流程。“大數(shù)據(jù)”使新聞報(bào)道更具客觀性和說服力,通過數(shù)據(jù),可以深入發(fā)掘事物之間的深層聯(lián)系并預(yù)測(cè)事物發(fā)展的趨勢(shì)?!坝脭?shù)據(jù)說話”、“用數(shù)據(jù)講新聞”是大數(shù)據(jù)時(shí)代新聞報(bào)道形式出現(xiàn)的一大新的亮點(diǎn)。


?科研和社會(huì)服務(wù)

一方面,數(shù)據(jù)庫本身就是媒體。在統(tǒng)一的數(shù)據(jù)庫平臺(tái)上,新聞資源得以有效的整合。新聞數(shù)據(jù)庫對(duì)外開放,通過信息檢索和分析工具,可以實(shí)現(xiàn)信息的增值。另一方面,數(shù)據(jù)庫是朝陽產(chǎn)業(yè),具有廣闊的發(fā)展前景。在新聞媒體數(shù)據(jù)庫的建設(shè)過程中,要注意分析受眾的需求,根據(jù)不同用戶、不同行業(yè)的特點(diǎn),開發(fā)特色的數(shù)據(jù)庫產(chǎn)品,最大限度地滿足社會(huì)的需求。


CND中文新聞數(shù)據(jù)庫能夠及時(shí)采集、存儲(chǔ)各種新聞信息,并提供各類可視化分析工具,可以為政府決策、企業(yè)經(jīng)營(yíng)、學(xué)術(shù)科研、媒體創(chuàng)新等方面提供數(shù)據(jù)支撐。隨著中文新聞數(shù)據(jù)庫規(guī)模的不斷擴(kuò)充和人工智能技術(shù)的不斷升級(jí),相信在不久的將來,CND中文新聞數(shù)據(jù)庫項(xiàng)目的價(jià)值將得到進(jìn)一步的彰顯。

————————————————————————————————————————————————

萌泰數(shù)據(jù)是社會(huì)科學(xué)領(lǐng)域數(shù)據(jù)服務(wù)商和科研教學(xué)工具廠商,面向社會(huì)科學(xué)教育實(shí)踐、學(xué)術(shù)研究和社會(huì)服務(wù),提供一體化數(shù)據(jù)解決方案。目前旗下包括“銳研”和“智社”兩大子品牌。


“銳研”是萌泰數(shù)據(jù)旗下社會(huì)科學(xué)專題數(shù)據(jù)庫及科研服務(wù)平臺(tái),旨在為學(xué)者和科研人員提供專題數(shù)據(jù)庫和科研數(shù)據(jù)采集與分析服務(wù),以及各類社會(huì)調(diào)查研究方法工具支持。旗下產(chǎn)品包括五大特色數(shù)據(jù)庫、三大指數(shù)產(chǎn)品、六大社會(huì)調(diào)查研究工具以及智慧蜂眾包任務(wù)平臺(tái)等科研服務(wù)產(chǎn)品。

銳研產(chǎn)品矩陣

萌泰官網(wǎng):www.monetware.com

銳研中國(guó):www.51diu.com

銳研專題數(shù)據(jù)平臺(tái):www.ringdata.com

銳研中國(guó)官方微信公眾號(hào)

智社官方微信公眾號(hào)

Campbell中國(guó)聯(lián)盟官方微信公眾號(hào)


    發(fā)表評(píng)論
    評(píng)論通過審核后顯示。
    移動(dòng)訪問