一、源碼特點(diǎn)
1、簡(jiǎn)單易用：
(1)部署實(shí)施簡(jiǎn)單
整個(gè)框架是基于.NET Framework2.0開(kāi)發(fā)，綠色不需要任何安裝和復(fù)雜配置，相對(duì)與Hadoop簡(jiǎn)直可以用輕松來(lái)形容，可以讓任何一個(gè)程序員或者IT短時(shí)間內(nèi)快速搭建起屬于自己的并行計(jì)算框架。
(2)開(kāi)發(fā)簡(jiǎn)單
整個(gè)框架沒(méi)有使用特有的腳本語(yǔ)言，普通程序員不需要再去學(xué)習(xí)相對(duì)陌生的語(yǔ)法或者函數(shù)，現(xiàn)在使用C#，未來(lái)會(huì)擴(kuò)展到JAVA語(yǔ)言，不需要了解復(fù)雜的MR算法，只要知道Key集切分規(guī)則和原理，并行計(jì)算特點(diǎn)和一些注意事項(xiàng)就可以。
(3)與現(xiàn)有系統(tǒng)集成簡(jiǎn)單
本系統(tǒng)既可以以獨(dú)立程序方式調(diào)度運(yùn)行，也提供類庫(kù)方式直接集成到現(xiàn)有的業(yè)務(wù)系統(tǒng)中，現(xiàn)有系統(tǒng)幾乎不需要什么大的改動(dòng)就可以完成巨量數(shù)據(jù)或復(fù)雜業(yè)務(wù)處理
2、實(shí)用而不晦澀：
(1)基于數(shù)據(jù)庫(kù)處理
現(xiàn)有的并行框架基本是基于文件系統(tǒng)，對(duì)于一個(gè)開(kāi)發(fā)團(tuán)隊(duì)的首要任務(wù)是處理海量的數(shù)據(jù)庫(kù)數(shù)據(jù)，EasyMR不需要對(duì)于存儲(chǔ)的復(fù)雜理解，程序員既可以使用數(shù)據(jù)庫(kù)的同步復(fù)制來(lái)分擔(dān)數(shù)據(jù)庫(kù)讀寫(xiě)壓力，也可以一次讀完，計(jì)算機(jī)集群計(jì)算完成后再同步或一次性寫(xiě)入數(shù)據(jù)庫(kù)，程序只要知道完成情況并讀取計(jì)算結(jié)果，同時(shí)未來(lái)也支持實(shí)時(shí)返回計(jì)算結(jié)果。
(2)計(jì)算單元邏輯清晰
整個(gè)框架的設(shè)計(jì)是基于企業(yè)應(yīng)用，例如統(tǒng)計(jì)報(bào)表，數(shù)據(jù)計(jì)算處理，其中統(tǒng)計(jì)邏輯和計(jì)算處理邏輯剝離出來(lái)就是計(jì)算單元的處理邏輯，只要簡(jiǎn)單業(yè)務(wù)分析可以完成此項(xiàng)工作。
(3)可以編寫(xiě)靈活實(shí)用腳本
雖然框架也提供了數(shù)據(jù)傳輸功能，但主要負(fù)責(zé)的是業(yè)務(wù)邏輯計(jì)算部分，在計(jì)算過(guò)程中可以靈活使用數(shù)據(jù)庫(kù)和結(jié)果來(lái)更好的計(jì)算業(yè)務(wù)邏輯，甚至是原有系統(tǒng)中計(jì)算邏輯可以直接經(jīng)過(guò)簡(jiǎn)單處理就可以變?yōu)橛?jì)算腳本
3、優(yōu)化并行處理架構(gòu)：
(1)計(jì)算單元優(yōu)化
計(jì)算機(jī)處理集群里的每臺(tái)計(jì)算機(jī)的計(jì)算CPU不同而配置不同的并行任務(wù)處理數(shù)量，也可以根據(jù)CPU使用率動(dòng)態(tài)管理計(jì)算單元并行處理數(shù)量。
(2)采用RTP通信協(xié)議
RTP協(xié)議是實(shí)時(shí)傳輸控制協(xié)議簡(jiǎn)稱，在大數(shù)據(jù)傳輸，實(shí)時(shí)傳輸控制和管理上優(yōu)勢(shì)明顯，可以最大程度降低通信開(kāi)銷，提高系統(tǒng)穩(wěn)定性。
二、功能介紹
1、一個(gè)并行計(jì)算軟件框架
基于此框架的軟件可以運(yùn)行在多臺(tái)計(jì)算機(jī)組成的計(jì)算集群上，并且每個(gè)計(jì)算機(jī)的計(jì)算任務(wù)也是多線程方式并行進(jìn)行的，對(duì)于處理復(fù)雜的業(yè)務(wù)和巨量數(shù)據(jù)時(shí)非常用于。
2、有著MapReduce血統(tǒng)的任務(wù)調(diào)度監(jiān)控中心
EasyMR的作業(yè)會(huì)由Mgr平臺(tái)根據(jù)Key集切分成若干個(gè)數(shù)據(jù)集，通過(guò)RTP通信協(xié)議分配到計(jì)算Cell上，Mgr同時(shí)負(fù)責(zé)監(jiān)控Cell上運(yùn)行情況。
3、任務(wù)腳本管理運(yùn)行管理平臺(tái)
支持基于C#語(yǔ)言的任務(wù)執(zhí)行腳本，所有腳本會(huì)基于TaskBase類，會(huì)在Key集之前發(fā)送到Cell計(jì)算單元，編譯并等待執(zhí)行，整個(gè)過(guò)程簡(jiǎn)單方便，尤其適合基于數(shù)據(jù)庫(kù)技術(shù)的企業(yè)類大數(shù)據(jù)處理任務(wù)