一、源碼特點(diǎn)
1、簡單易用：
(1)部署實(shí)施簡單
整個(gè)框架是基于.NET Framework2.0開發(fā)，綠色不需要任何安裝和復(fù)雜配置，相對與Hadoop簡直可以用輕松來形容，可以讓任何一個(gè)程序員或者IT短時(shí)間內(nèi)快速搭建起屬于自己的并行計(jì)算框架。
(2)開發(fā)簡單
整個(gè)框架沒有使用特有的腳本語言，普通程序員不需要再去學(xué)習(xí)相對陌生的語法或者函數(shù)，現(xiàn)在使用C#，未來會擴(kuò)展到JAVA語言，不需要了解復(fù)雜的MR算法，只要知道Key集切分規(guī)則和原理，并行計(jì)算特點(diǎn)和一些注意事項(xiàng)就可以。
(3)與現(xiàn)有系統(tǒng)集成簡單
本系統(tǒng)既可以以獨(dú)立程序方式調(diào)度運(yùn)行，也提供類庫方式直接集成到現(xiàn)有的業(yè)務(wù)系統(tǒng)中，現(xiàn)有系統(tǒng)幾乎不需要什么大的改動(dòng)就可以完成巨量數(shù)據(jù)或復(fù)雜業(yè)務(wù)處理
2、實(shí)用而不晦澀：
(1)基于數(shù)據(jù)庫處理
現(xiàn)有的并行框架基本是基于文件系統(tǒng)，對于一個(gè)開發(fā)團(tuán)隊(duì)的首要任務(wù)是處理海量的數(shù)據(jù)庫數(shù)據(jù)，EasyMR不需要對于存儲的復(fù)雜理解，程序員既可以使用數(shù)據(jù)庫的同步復(fù)制來分擔(dān)數(shù)據(jù)庫讀寫壓力，也可以一次讀完，計(jì)算機(jī)集群計(jì)算完成后再同步或一次性寫入數(shù)據(jù)庫，程序只要知道完成情況并讀取計(jì)算結(jié)果，同時(shí)未來也支持實(shí)時(shí)返回計(jì)算結(jié)果。
(2)計(jì)算單元邏輯清晰
整個(gè)框架的設(shè)計(jì)是基于企業(yè)應(yīng)用，例如統(tǒng)計(jì)報(bào)表，數(shù)據(jù)計(jì)算處理，其中統(tǒng)計(jì)邏輯和計(jì)算處理邏輯剝離出來就是計(jì)算單元的處理邏輯，只要簡單業(yè)務(wù)分析可以完成此項(xiàng)工作。
(3)可以編寫靈活實(shí)用腳本
雖然框架也提供了數(shù)據(jù)傳輸功能，但主要負(fù)責(zé)的是業(yè)務(wù)邏輯計(jì)算部分，在計(jì)算過程中可以靈活使用數(shù)據(jù)庫和結(jié)果來更好的計(jì)算業(yè)務(wù)邏輯，甚至是原有系統(tǒng)中計(jì)算邏輯可以直接經(jīng)過簡單處理就可以變?yōu)橛?jì)算腳本
3、優(yōu)化并行處理架構(gòu)：
(1)計(jì)算單元優(yōu)化
計(jì)算機(jī)處理集群里的每臺計(jì)算機(jī)的計(jì)算CPU不同而配置不同的并行任務(wù)處理數(shù)量，也可以根據(jù)CPU使用率動(dòng)態(tài)管理計(jì)算單元并行處理數(shù)量。
(2)采用RTP通信協(xié)議
RTP協(xié)議是實(shí)時(shí)傳輸控制協(xié)議簡稱，在大數(shù)據(jù)傳輸，實(shí)時(shí)傳輸控制和管理上優(yōu)勢明顯，可以最大程度降低通信開銷，提高系統(tǒng)穩(wěn)定性。
二、功能介紹
1、一個(gè)并行計(jì)算軟件框架
基于此框架的軟件可以運(yùn)行在多臺計(jì)算機(jī)組成的計(jì)算集群上，并且每個(gè)計(jì)算機(jī)的計(jì)算任務(wù)也是多線程方式并行進(jìn)行的，對于處理復(fù)雜的業(yè)務(wù)和巨量數(shù)據(jù)時(shí)非常用于。
2、有著MapReduce血統(tǒng)的任務(wù)調(diào)度監(jiān)控中心
EasyMR的作業(yè)會由Mgr平臺根據(jù)Key集切分成若干個(gè)數(shù)據(jù)集，通過RTP通信協(xié)議分配到計(jì)算Cell上，Mgr同時(shí)負(fù)責(zé)監(jiān)控Cell上運(yùn)行情況。
3、任務(wù)腳本管理運(yùn)行管理平臺
支持基于C#語言的任務(wù)執(zhí)行腳本，所有腳本會基于TaskBase類，會在Key集之前發(fā)送到Cell計(jì)算單元，編譯并等待執(zhí)行，整個(gè)過程簡單方便，尤其適合基于數(shù)據(jù)庫技術(shù)的企業(yè)類大數(shù)據(jù)處理任務(wù)