原创 Apache-Hama框架簡介–BSP模型的實現

Hama概況 Hama是基於BSP(BulkSynchronous Parallel)計算技術的並行計算框架,用於大量的科學計算(比如矩陣、圖論、網絡等)。BSP計算技術最大的優勢是加快迭代,在解決最小路徑等問題中可以快速得到可行解(ht

原创 如何去掉文中的^M

在linux上經常遇到這種問題,從網上下載文件到 linux 上後,就多了很多 ^M這種東西,如何集體刪除這種東西呢! ^M也就是換行符,就是下文中的\r,在不同系統中表示不同,不用深究。 (1)方法一 最簡單的辦法就是用裏linux

原创 耳機及音響--煲機軟件

煲機軟件 煲機通俗的解釋就是一種快速使器材老化穩定的措施,一般新買的耳機聽音樂並不是音效最佳的時候,而是像電腦一樣需要一個磨合期,一定老化程度後的音效纔是最佳的,因此耳機煲機軟件就可以幫助耳機快速達到最佳音效的效果。 耳機的“煲”實際就是

原创 PageRank算法及Java代碼實現(代碼有詳解)

PageRank算法及Java代碼實現 更改了一些參數的設置,以及加入阻尼係數變量,並且輸出時提示是第幾次的迭代輸出: * 相關參數獲取 * 將鄰接矩陣放在文本文件中,規則如下: * 第一行:節點數;

原创 Hive安裝、配置及基本測試

Hive安裝及基本測試 1.        下載並解壓至/home/hive-0.10目錄下; 2.        在/etc/profile中添加: export HIVE_HOME=/home/hive-0.10 export P

原创 storm 簡介

本文翻譯自: https://github.com/nathanmarz/storm/wiki/Tutorial Storm是一個分佈式的、高容錯的實時計算系統。 Storm對於實時計算的的意義相當於Hadoop對於批處理的意義。Ha

原创 CentOS6.4-X64下Hadoop-2.0.0-CHD4僞分佈安裝(單機)!

廢話不說,直接切入正題~! 一、卸載Openjdk 先用 java –version查看OpenJDK是否安裝; 如安裝,輸入:rpm -qa | grepjava 顯示如下信息: <span style="font-size:14px

原创 PageRank的Java代碼實現及圖形操作(帶詳細註釋)!

PageRank的Java代碼實現及圖形操作(帶詳細註釋)! 從Git上找到的一段代碼,修改了一些東西,加了一些自己遇到的問題的註釋以及增加了阻尼係數變量。 廢話不說直接上代碼: package cn.wx.PageRank; imp

原创 Hadoop2.0.0-CDH4中NodeManager啓動不了的解決方法!

Hadoop2.0.0-CDH4中NodeManager啓動不了的解決方法! 之前搭環境,遇到NodeManager啓動不了的情況,後來排查了一下午才發現問題,是yarn-site.xml配置的原因,如下: mapreduce.shuf

原创 Giraph:基於Hadoop的開源圖形處理平臺

開源項目Giraph的支持者或許都知道,Facebook在開發圖譜搜索(Graph Search)服務時,選擇採用了Giraph,並開始了對此項開源技術的研究。Facebook將Giraph規模化並作爲其Open Graph工具的核心,用

原创 CentOS 6.4中安裝MySQL

1.        首先要看看有沒有已經安裝好的MySQL,以免產生衝突 # rpm -qa | grep mysql 2.        卸載衝突的版本 # rpm -e MySQL-**** //要先後卸載客服端和服務器端 3.   

原创 Execl表格列數據篩選及替換!

工作需求需要導出三列東西,之後生成矩陣,但奈何Matlab要求行列的序號名字要爲0-9的數字,所以運用excel進行了處理。圖如下: (要將左側列表中86*替換爲右側列表對應的代號)    圖1       |    圖2 最終實現如下

原创 Apache Mahout算法集及源碼目錄說明

Apache Mahout 是 ApacheSoftware Foundation (ASF) 旗下的一個開源項目,提供一些可擴展的機器學習領域經典算法的實現,旨在幫助開發人員更加方便快捷地創建智能應用程序,並且,在 Mahout 的最近

原创 Giraph基礎介紹

Giraph Overview Apache Giraph is an iterative graph processing system built for high scalability. For example, it is cu

原创 四大學術牛人教你如何閱讀外國文獻

                                                            學術牛人教你如何閱讀外國文獻 學術牛人1:用自己的話概括和梳理文獻 及時回顧心得和經驗:我現在每天還保持讀至少