衡阳派盒市场营销有限公司

您好,歡迎來電子發燒友網! ,新用戶?[免費注冊]

您的位置:電子發燒友網>源碼下載>數值算法/人工智能>

一種在分布式環境下實現冪迭代聚類的方法

大小:0.69 MB 人氣: 2017-12-11 需要積分:1

  為解決冪迭代聚類算法并行實現中存在的編程繁瑣、效率低下等問題,基于Spark大規模數據通用計算引擎及其GraphX組件,提出了一種在分布式環境下實現冪迭代聚類的方法。首先,利用某種相似性度量方法,將原始數據轉換成一個可以視為圖的親和矩陣;然后,通過頂點切割,把行歸一化后的親和矩陣切分成若干個小圖,分別存儲在不同的機器上;最后,利用Spark基于內存計算的特點,對存儲在集群中的圖進行多次迭代計算,得到這個圖的一個切割,圖的每一個劃分子圖對應一個類簇。在不同規模的數據集和不同executor個數下進行的實驗結果表明,基于GraphX的分布式冪迭代聚類算法具有良好的可擴展性,算法運行時間與executor個數呈負相關的線性關系,在6個executor下,與單個executor相比,算法的加速比達到了2.09到3.77。同時,通過與基于Hadoop的冪迭代聚類進行對比,在新聞數量為40000篇時,運行時間降低了6l%。

一種在分布式環境下實現冪迭代聚類的方法

非常好我支持^.^

(0) 0%

不好我反對

(0) 0%

      發表評論

      用戶評論
      評價:好評中評差評

      發表評論,獲取積分! 請遵守相關規定!

      ?
      百家乐大小是什么| 百家乐玄机| 欧洲娱乐场| 重庆百家乐的玩法技巧和规则| 百家乐官网三跳| 大发888斗地主| 金博士百家乐娱乐城| 百家乐官网赌博论坛| G3娱乐城| 太阳城娱乐场| 百家乐注册彩金| 赌百家乐官网庄闲能赢| 澳门百家乐| 大发888交流心得| 大发百家乐现金| 反赌百家乐官网的玩法技巧和规则 | 百家乐官网娱乐城介绍| 棋牌评测网xjqppc| 威尼斯人娱乐城优惠条件| 新澳门百家乐官网软件下载| 万豪娱乐网| 澳门顶级赌场金鹰娱乐| 百家乐官网投注信用最好的 | 博彩通百家乐官网概率| 大发888娱乐在线| 大发888娱乐游戏--| 百家乐乐翻天| 百家乐游戏真钱游戏| 属虎和属鼠合伙做生意| 澳门百家乐备用网址| 百家乐官网园首选| 吉利百家乐官网的玩法技巧和规则| 百家乐官网娱乐城网址| 亿酷棋牌室| 大发扑克娱乐网| 娱乐城| 金冠娱乐城注册| 扬州棋牌中心| 豪门国际娱乐网| 元谋县| 大发888官网e世博官方网站|