我公司提供數(shù)據(jù)采集接入服務(wù)(DIS),可讓您輕松收集、處理和分發(fā)實時流數(shù)據(jù),以便您對新信息快速做出響應(yīng)。DIS對接多種第三方數(shù)據(jù)采集工具,提供豐富的云服務(wù)Connector及Agent/SDK,適用于IoT、互聯(lián)網(wǎng)、媒體等行業(yè)的設(shè)備監(jiān)控、實時推薦、日志分析等場景。
產(chǎn)品優(yōu)勢:
高效傳輸:實時收集各種數(shù)據(jù)。支持百萬并發(fā)連接,數(shù)據(jù)請求毫秒級響應(yīng)。單分區(qū)支持最高每日百GB級別的寫入量。輕松實現(xiàn)傳輸通道規(guī)格擴容。
簡單易用:服務(wù)秒級開通。用戶配置SDK/Agent實現(xiàn)免編程數(shù)據(jù)采集,快速實現(xiàn)數(shù)據(jù)采集、傳輸。
安全可靠:HTTPS加密傳輸。租戶間資源及操作隔離,實現(xiàn)租戶訪問權(quán)限控制,保護系統(tǒng)和用戶的隱私及數(shù)據(jù)安全。數(shù)據(jù)跨AZ存儲,服務(wù)可用性99.9%。
無憂運維:具有完備的運維體系,托管運維,用戶只需要聚焦數(shù)據(jù)價值。相比用戶自建數(shù)據(jù)采集/傳輸系統(tǒng)(kafka/flume等),成本降低5倍。
功能描述:
數(shù)據(jù)采集:RestAPI、SDK、Agent對接多種數(shù)據(jù)源,線上線下數(shù)據(jù)實時采集。
支持多種數(shù)據(jù)源:DIS支持從用戶應(yīng)用系統(tǒng)、kafka系統(tǒng)、Flume系統(tǒng)做實時數(shù)據(jù)采集;
多種數(shù)據(jù)接入方式:提供RestAPI、SDK、Agent等多種數(shù)據(jù)接入方式,用戶只需簡單配置即可實現(xiàn)實時數(shù)據(jù)采集與傳輸。
數(shù)據(jù)傳輸:實時數(shù)據(jù)高并發(fā)、低延時、高可靠傳輸。
DIS提供百萬連接并發(fā),單數(shù)據(jù)流最高支持每日TB級別的數(shù)據(jù)量寫入,每個分區(qū)(partition)支持最高每日百GB級別的寫入量。
每個數(shù)據(jù)流的吞吐能力可以通過動態(tài)增加partition進行擴展。
數(shù)據(jù)處理:預(yù)置數(shù)據(jù)抽取、匯聚、格式轉(zhuǎn)換等Connector(處理算子),對用戶輸入數(shù)據(jù)做預(yù)處理。
DIS預(yù)置Connector對接入數(shù)據(jù)做初步處理,提供CSV/Json到Parquet/CarbonData等格式的轉(zhuǎn)換,提升用戶數(shù)據(jù)質(zhì)量。