“雙十一”流量大考是如何過關(guān)的

？

，流計(jì)算具有高性能、海量式、實(shí)時(shí)性、分布式、易用性、可靠性等多項(xiàng)優(yōu)勢(shì)，主要的應(yīng)用方向有，對(duì)金融與科學(xué)計(jì)算中的數(shù)據(jù)進(jìn)行快速運(yùn)算和分析;對(duì)存在于社交網(wǎng)站、電子郵件、視頻、電話記錄、電子感應(yīng)器中的數(shù)字格式信息流進(jìn)行快速處理并反饋等。

“流式處理可被用于兩種不同的計(jì)算場(chǎng)景：事件流和持續(xù)計(jì)算。”劉馳介紹道

，在事件流場(chǎng)景，系統(tǒng)會(huì)持續(xù)產(chǎn)生大量的數(shù)據(jù)，這類數(shù)據(jù)最早出現(xiàn)在銀行和股票交易領(lǐng)域，也會(huì)在互聯(lián)網(wǎng)監(jiān)控、無線通信等領(lǐng)域出現(xiàn)。這些領(lǐng)域的相關(guān)業(yè)務(wù)，需要流計(jì)算技術(shù)以近乎實(shí)時(shí)的方式對(duì)數(shù)據(jù)流進(jìn)行復(fù)雜分析。

“而在持續(xù)計(jì)算場(chǎng)景，比如大型網(wǎng)站

，流計(jì)算技術(shù)可以動(dòng)態(tài)實(shí)時(shí)地刷新用戶訪問數(shù)據(jù)，展示網(wǎng)站實(shí)時(shí)流量的變化情況，分析每天各小時(shí)的流量和用戶分布情況。一些需要實(shí)時(shí)處理數(shù)據(jù)的場(chǎng)景也能應(yīng)用到流計(jì)算技術(shù)，比如對(duì)根據(jù)用戶行為產(chǎn)生的日志文件進(jìn)行實(shí)時(shí)分析，對(duì)用戶進(jìn)行商品的實(shí)時(shí)推薦等。”劉馳介紹道。

實(shí)時(shí)采集

、實(shí)時(shí)計(jì)算、實(shí)時(shí)查詢

劉馳向記者介紹道，流計(jì)算的處理流程一般包含三個(gè)階段：數(shù)據(jù)實(shí)時(shí)采集