久久综合人妻AV四区|国产乱伦手机av片免费|作爱视频在线观看免费|黄色免费三级片高清|国产黄色在线播放|久久精品丝袜噜噜丝袜|国模激情128p|欧美黄片免费视频|草碰日产人人一级爱|日韩欧美亚洲综合在线观看

DataGather

數(shù)據(jù)采集

金山云智?數(shù)據(jù)采集是大數(shù)據(jù)云平臺(tái)內(nèi)外部數(shù)據(jù)傳輸?shù)臉蛄?,可以將云外?shù)據(jù)安全有序的接入到大數(shù)據(jù)云平臺(tái)內(nèi)部。采集模塊支持對(duì)文件、文件夾、外部kafka、自定義source等進(jìn)行采集,將分散在各地的數(shù)據(jù)方便快捷的采集到大數(shù)據(jù)云平臺(tái),同時(shí)可通過流計(jì)算組件進(jìn)行實(shí)時(shí)消費(fèi)處理。
核心優(yōu)勢(shì)
產(chǎn)品功能

核心優(yōu)勢(shì)

統(tǒng)一采集管理

支持多種采集任務(wù)統(tǒng)一管理,采集配置一件修改,采集agent實(shí)時(shí)監(jiān)控,采集任務(wù)一鍵暫停與恢復(fù)。

采集方式多樣

支持文本文件數(shù)據(jù)流式采集,支持Oracle/MySQL等關(guān)系型數(shù)據(jù)庫流式采集,支持http方式的數(shù)據(jù)采集。

保證數(shù)據(jù)質(zhì)量

采集數(shù)據(jù)自動(dòng)重發(fā)機(jī)制,支持?jǐn)?shù)據(jù)查重,支持?jǐn)?shù)據(jù)格式校驗(yàn),支持采集數(shù)據(jù)分布式存儲(chǔ)。

數(shù)據(jù)投遞

支持將采集到的數(shù)據(jù)直接投遞到ES中。

產(chǎn)品功能

統(tǒng)一采集管理

支持針對(duì)不同類型的采集任務(wù),通過統(tǒng)一的方式來進(jìn)行管理;提供數(shù)據(jù)采集任務(wù)的創(chuàng)建,查詢,采集任務(wù)的啟動(dòng)與停止等功能的服務(wù),包括:創(chuàng)建數(shù)據(jù)采集任務(wù)、查詢采集任務(wù)狀態(tài)、采集任務(wù)啟動(dòng)與停止、采集狀態(tài)上報(bào)等功能。

流式數(shù)據(jù)采集

流式采集任務(wù)支持將文件、外部Kafka、文件夾、自定義source、oracle數(shù)據(jù)庫、MySQL數(shù)據(jù)庫等數(shù)據(jù),實(shí)時(shí)采集至大數(shù)據(jù)云平臺(tái)的Kafka中。

流式投遞

支持將數(shù)據(jù)實(shí)時(shí)采集到kafka,并可實(shí)時(shí)投遞到ES等數(shù)據(jù)庫中。