流式特征計算平臺 SCP

STREAMING COMPUTING PLATFORM

芯盾時代流式特征計算平臺（SCP）支持多渠道、跨 場景、復雜條件下的規(guī)則指標、AI 流式特征、實時關聯(lián)圖譜、復雜事件序列等計算范式。算子涵蓋聚合類、去重類、分布類、序列類、排序類、網(wǎng)絡拓撲類等常用算子類型。平臺技術采用流批一體的 Kappa 架構(gòu)，具備高性能、低延時、高可用、復雜規(guī)則靈活配置、歷史指標回溯/糾錯計算、動態(tài)熱部署、服務自動保護機制等特點，少量節(jié)點即可實現(xiàn)TPS＞ 10000，平均時延＜ 5ms。

根據(jù)待計算特征集規(guī)模，動態(tài)擴展指標計算鏈路流程；根據(jù)具體計算任務類型不同，自動化匹配最佳計算拓撲模式，進一步提升計算效率。有效解決指標數(shù)量級擴展后，性能線性下降問題，實現(xiàn)計算性能水平擴容。

01

產(chǎn)品特色

批流統(tǒng)一計算架構(gòu)：統(tǒng)一批流計算邏輯，避免 lambda 架構(gòu)重復開發(fā)、邏輯一致性驗證等低效率工作，保障平臺計算邏輯輸出一致性和時效性。

計算任務配置式開發(fā)：多樣化時間粒度組合算子模式，以積木式搭建方式實現(xiàn)規(guī)則實時指標計算、AI 流式特征計算、實時關聯(lián)圖譜計算等計算范式，不需要或最小化代碼開發(fā)，通過接口參數(shù)配置，即可快速具備實時計算能力。

多元化計算模式：支持預計算、準實時計算、實時計算、回溯計算等多種計算模式，滿足不同任務類型計算需求。

高性能服務保障：提供高并發(fā)、低延時、高可用實時計算服務，單服務節(jié)點場景下，99.99% 計算 latency 控制在毫秒內(nèi)實現(xiàn)。

02

應用場景

文章出處：【微信公眾號：芯盾時代】

責任編輯：gt