欧美在线观看视频网站,亚洲熟妇色自偷自拍另类,啪啪伊人网,中文字幕第13亚洲另类,中文成人久久久久影院免费观看 ,精品人妻人人做人人爽,亚洲a视频

一種大數(shù)據(jù)協(xié)同分析工具平臺(tái)的制作方法

文檔序號(hào):11155521閱讀:來(lái)源:國(guó)知局

技術(shù)特征:

1.一種大數(shù)據(jù)協(xié)同分析平臺(tái),其特征在于,包括:

多數(shù)據(jù)源配置模塊,用于實(shí)現(xiàn)任意數(shù)據(jù)的配置導(dǎo)入和爬取,建立容數(shù)據(jù)源配置XML腳本語(yǔ)言,或者通過(guò)容數(shù)據(jù)源配置XML腳本語(yǔ)言,實(shí)現(xiàn)各種數(shù)據(jù)源的編程配置和映射配置;

數(shù)據(jù)檢索模塊,用于對(duì)導(dǎo)入的數(shù)據(jù)建立全文分詞索引,提供主題檢索和條件檢索,支持海量數(shù)據(jù)的高速搜索引擎;

數(shù)據(jù)加工模塊,用于實(shí)現(xiàn)團(tuán)隊(duì)協(xié)同協(xié)作的協(xié)同數(shù)據(jù)標(biāo)引和協(xié)同分析功能,通過(guò)標(biāo)引樹(shù)技術(shù),實(shí)現(xiàn)標(biāo)引內(nèi)容的統(tǒng)一協(xié)同管理和數(shù)據(jù)定制化標(biāo)引加工;

數(shù)據(jù)分析模塊,用于定制算法模板,分析算法自由選擇,量身定制數(shù)據(jù)建模和算法實(shí)現(xiàn),通過(guò)算法包插件,提供專享專用算法包;

數(shù)據(jù)可視化模塊,用于實(shí)現(xiàn)分析結(jié)果的可視化展示和自動(dòng)報(bào)表,包括動(dòng)態(tài)可視化插件、執(zhí)行結(jié)果展示、執(zhí)行結(jié)果導(dǎo)出和自動(dòng)報(bào)告生成。

2.根據(jù)權(quán)利要求1所述的一種大數(shù)據(jù)協(xié)同分析平臺(tái),其特征在于,所述多數(shù)據(jù)源配置模塊包括:

網(wǎng)頁(yè)爬取導(dǎo)入子模塊,用于實(shí)現(xiàn)爬取配置、爬取規(guī)則和爬取導(dǎo)入的一體化處理流程,使用自主研發(fā)網(wǎng)絡(luò)爬蟲(chóng)技術(shù),對(duì)指定網(wǎng)站、網(wǎng)頁(yè)進(jìn)行規(guī)則化數(shù)據(jù)爬取,爬取數(shù)據(jù)根據(jù)爬蟲(chóng)導(dǎo)入配置器自動(dòng)導(dǎo)入數(shù)據(jù)庫(kù);

數(shù)據(jù)源配置器編輯子模塊,用于數(shù)據(jù)源配置器配置規(guī)則項(xiàng)的新建和編輯;

數(shù)據(jù)源配置器管理子模塊,用于各個(gè)數(shù)據(jù)源配置器的查詢和管理,包括配置器的摘要信息,詳細(xì)編輯入口和刪除功能;

數(shù)據(jù)導(dǎo)入歷史管理子模塊,用于針對(duì)當(dāng)前任務(wù)下的數(shù)據(jù)導(dǎo)入歷史信息列表查詢,包括數(shù)據(jù)的導(dǎo)入名稱、大小、時(shí)間、所用配置器和導(dǎo)入狀態(tài);

數(shù)據(jù)導(dǎo)入執(zhí)行子模塊,用于選擇配置器和導(dǎo)入數(shù)據(jù)源執(zhí)行數(shù)據(jù)導(dǎo)入。

3.根據(jù)權(quán)利要求1所述的一種大數(shù)據(jù)協(xié)同分析平臺(tái),其特征在于,所述數(shù)據(jù)加工模塊包括:

數(shù)據(jù)協(xié)同標(biāo)引子模塊,用于實(shí)現(xiàn)數(shù)據(jù)標(biāo)引、加工和分析的多人團(tuán)隊(duì)協(xié)同同步作業(yè),提供在線、團(tuán)隊(duì)、實(shí)時(shí)、協(xié)作分析加工標(biāo)引功能,各成員標(biāo)引加工內(nèi)容實(shí)時(shí)同步呈現(xiàn),通過(guò)顏色區(qū)分不同成員的加工標(biāo)引內(nèi)容并相互可見(jiàn),實(shí)現(xiàn)團(tuán)隊(duì)標(biāo)引加工作業(yè)的操作實(shí)時(shí)協(xié)同、進(jìn)度清晰可見(jiàn)、內(nèi)容同步共享;

數(shù)據(jù)標(biāo)引樹(shù)管理子模塊,用于提供協(xié)同標(biāo)引加工時(shí)的標(biāo)引數(shù)據(jù)字典功能,實(shí)現(xiàn)標(biāo)引內(nèi)容的統(tǒng)一協(xié)同管理和數(shù)據(jù)定制化標(biāo)引加工;

標(biāo)引加工執(zhí)行子模塊,用于數(shù)據(jù)標(biāo)引、加工和分析的執(zhí)行;

標(biāo)引歷史管理子模塊,用于對(duì)標(biāo)引樹(shù)技術(shù)儲(chǔ)進(jìn)行管理,或者通過(guò)CSV格式文件進(jìn)行導(dǎo)入導(dǎo)出管理,使標(biāo)引樹(shù)字典信息實(shí)現(xiàn)線上線下的映射導(dǎo)出和集中管理。

4.根據(jù)權(quán)利要求1所述的一種大數(shù)據(jù)協(xié)同分析平臺(tái),其特征在于,所述數(shù)據(jù)分析模塊包括:

動(dòng)態(tài)算法包插件,用于實(shí)現(xiàn)定制化擴(kuò)展算法包的動(dòng)態(tài)替換擴(kuò)展和算法熱插拔;實(shí)現(xiàn)算法包的模板化管理,通過(guò)參數(shù)模板,規(guī)范管理算法輸入輸出標(biāo)準(zhǔn),前端通過(guò)參數(shù)模板解析,識(shí)別所需參數(shù)類型;

統(tǒng)計(jì)分析執(zhí)行子模塊,用于參數(shù)采集,通過(guò)人機(jī)交互采集參數(shù)后,將采集到的參數(shù)列表經(jīng)過(guò)格式化統(tǒng)一傳遞給算法包,進(jìn)行算法執(zhí)行;

執(zhí)行結(jié)果管理子模塊,用于數(shù)據(jù)分析結(jié)果的管理。

5.根據(jù)權(quán)利要求1所述的一種大數(shù)據(jù)協(xié)同分析平臺(tái),其特征在于,所述數(shù)據(jù)可視化模塊包括:

動(dòng)態(tài)可視化插件,用于實(shí)現(xiàn)可視化圖表的組件化、模板化和插件化,提供可視化圖表的動(dòng)態(tài)組件化,通過(guò)后臺(tái)管理可視化模板,并通過(guò)可視化模板的動(dòng)態(tài)插拔實(shí)現(xiàn)前端可視化圖表組件的動(dòng)態(tài)替換和擴(kuò)展;

執(zhí)行結(jié)果展示,用于展示動(dòng)態(tài)可視化的結(jié)果;

執(zhí)行結(jié)果導(dǎo)出,用于導(dǎo)出動(dòng)態(tài)可視化的結(jié)果;

自動(dòng)報(bào)告生成,用于根據(jù)事先定義的報(bào)告模板,結(jié)合分析結(jié)果數(shù)據(jù)和圖表,自動(dòng)生成統(tǒng)計(jì)分析報(bào)告。

6.一種大數(shù)據(jù)協(xié)同分析方法,其特征在于,包括:

S1:建立研究主題:以研究主題為單位、創(chuàng)建研究任務(wù)組、管理研究數(shù)據(jù)和制定研究方向,線下科研團(tuán)隊(duì)直接平移至線上,團(tuán)隊(duì)成員協(xié)同共享研究成果,不同研究任務(wù)之間數(shù)據(jù)保密隔離;

S2:數(shù)據(jù)搜索引擎:導(dǎo)入數(shù)據(jù)建立全文分詞索引,提供主題檢索和條件檢索,支持海量數(shù)據(jù)的高速搜索引擎;

S3:建模統(tǒng)計(jì)分析:定制算法模塊,分析算法自由選擇,量身定制數(shù)據(jù)建模和算法實(shí)現(xiàn),通過(guò)算法包插件,提供專享專用算法包,讓建模統(tǒng)計(jì)分析隨需而用,快速高效;

S4:數(shù)據(jù)配置導(dǎo)入:海量數(shù)據(jù)批量并行導(dǎo)入和爬取,針對(duì)各種數(shù)據(jù)源定制專有數(shù)據(jù)解析配置器,通過(guò)配置器插件服務(wù),實(shí)現(xiàn)所有格式文本文獻(xiàn)的定向字段提取和定制化導(dǎo)入,實(shí)現(xiàn)數(shù)據(jù)源的自定義智能解析、數(shù)據(jù)項(xiàng)智能提取分離、數(shù)據(jù)字段智能映射存儲(chǔ);

S5:協(xié)同分析標(biāo)引:實(shí)現(xiàn)研究團(tuán)隊(duì)內(nèi)數(shù)據(jù)加工云協(xié)作,團(tuán)隊(duì)成員分析加工標(biāo)引結(jié)果實(shí)時(shí)共享可見(jiàn),實(shí)時(shí)在線溝通,支持基于標(biāo)引樹(shù)的統(tǒng)一標(biāo)引數(shù)據(jù)字典,針對(duì)各種標(biāo)引內(nèi)容定制專有標(biāo)引規(guī)則配置器,實(shí)現(xiàn)批量自動(dòng)化標(biāo)引;

S6:結(jié)果可視化:提供分析結(jié)果的可視化展示和自動(dòng)報(bào)表,可視化圖表根據(jù)需求量身定制,通過(guò)可視化插件,提供專享專用可視化模板,提供交互式可視化和自動(dòng)報(bào)告。

當(dāng)前第2頁(yè)1 2 3 
網(wǎng)友詢問(wèn)留言 已有0條留言
  • 還沒(méi)有人留言評(píng)論。精彩留言會(huì)獲得點(diǎn)贊!
1
汉川市| 九寨沟县| 凤庆县| 涿鹿县| 疏勒县| 邻水| 信宜市| 越西县| 乌拉特后旗| 宜宾市| 九龙坡区| 滁州市| 隆德县| 盖州市| 博客| 惠州市| 池州市| 瓦房店市| 平度市| 宜君县| 天镇县| 徐州市| 濉溪县| 彭山县| 晴隆县| 剑阁县| 武穴市| 三明市| 永寿县| 梅河口市| 嘉鱼县| 长乐市| 宝鸡市| 锡林浩特市| 启东市| 固安县| 黄大仙区| 林西县| 新绛县| 肥东县| 巴青县|