原创 ubuntu執行遠程腳本,分佈式系統搭建

多數執行遠程腳本都是基於ssh的, 所以 1.配置ssh免密登陸(多數分佈式系統,如hadoop) 2.執行遠程腳本 一. 配置ssh免密登陸 首先生成 Master 的公匙,在 Master 節點終端中執行

原创 ubuntu文件傳輸,分佈式系統搭建

每一項功能探索都是以需求爲先的: 項目需求: 多機連用,批量將pdf進行提取文本和文本轉換 方案:1. 文件共享式:一臺主機(Master)共享文件,使用nfs;其他slaver讀取共享文件夾中的內容; 2.

原创 社交網絡(social media)測評

國內的社交頭把交椅絕對是wechat,微信+qq締造的虛擬世界一時半會也不是其他公司在短時間可以撼動的,而國外社交網絡幾大霸主:Facebook,Instagram,Twitter,WhatsApp等,但這樣國內的同學基本都無法體

原创 MYSQL數據庫遠程登錄及權限設置

數據庫 mysql 很多時候需要遠程登陸,默認情況,mysql是隻容許本機登陸的,需要手動開啓,具體方法windows和linux類似 1、修改數據表 server端,只能在localhost登陸。登入MySQL後,更改 “MyS

原创 python PIL 處理圖片的模快 Image類

python圖形處理庫PIL(Python Image Library) , 使用時, 我們應該首選去官網看文檔,如果需求比較簡單,可以看看別人的blog,畢竟中文的比較容易上手。 我使用的功能比較簡單: resize Imag

原创 數據庫實戰優化--Duplicate,效率

數據庫實戰優化–Duplicate,效率 php1>. Duplicate的問題: 如果mysql設置了主鍵或unique索引,或者查詢時檢索到的內容,暫時我遇到的一些mysql的默認duplicate的規則是:

原创 python 調用系統命令,執行命令行

python中調用系統命令的方法還是有比較多的,os/command/subprocess模塊中都有方法可以做到 對比其他語言(樓主用過的語言也不多): PHP:exec(),system(), 整體感覺不好用,

原创 pdf加水印,文字和圖片,超鏈接, java itext, 這裏有你想要的一切

最近公司網站的pdf需要加上我們自己的水印,多番review打水印加鏈接的方法, windows上的A-PDF可以滿足需求, 之前網站組也是用這種方法做的, 但是效率較低, 因爲公司的pdf的其他處理邏輯我們都部署到了分佈式的li

原创 python安裝MySQLdb模塊-(ubuntu,windows)

python沒有自帶mysql的模塊,需要自己安裝 ubuntu: sudo apt-get安裝:直接運行 sudo apt-get install python-mysqldb Windows: 上某全家桶網站,下載MySQL

原创 mysql一條語句update多條記錄

通常情況下,我們會使用以下SQL語句來更新字段值: UPDATE mytable SET myfield='value' WHERE other_field='other_value'; 但是,如果你想更新多行數據,並且每行記錄

原创 PDF的加密解密,解密後隨便怎麼玩

摘要: 首先,我們要清楚PDF的加密類型和方式:PDF的密碼常規分爲兩類:user password 和 owner password, user password(用戶密碼):我們要打開/查看/獲取任何該PDF的信息

原创 Hadoop集羣安裝配置教程_Hadoop2.6.0/Ubuntu 14.04

本文轉載自給力星 原文地址:http://www.powerxing.com/install-hadoop-cluster/ 前言 當開始着手實踐Hadoop時,安裝Hadoop往往會成爲新手的一道門檻。儘管安裝其實很簡單,書上

原创 ubuntu默認root密碼

安裝完Ubuntu後忽然意識到沒有設置root密碼,不知道密碼自然就無法進入根用戶下。到網上搜了一下,原來是這麼回事。Ubuntu的默認root密碼是隨機的,即每次開機都有一個新的root密碼。我們可以在終端輸入命令 sudo passw

原创 除去pdf文件內部的超鏈接/a標籤

    pdf格式是一個比較固定的,正常狀態下是不能編輯的格式,主要用來傳遞信息和展示,但項目中或遲或早的肯定會遇到需要修改pdf內容的需求,目前遇到的就有:pdf2html, pdf2png, pdf內部去鏈接, pdf加水印,

原创 Hadoop安裝教程_單機/僞分佈式配置_Hadoop2.6.0/Ubuntu14.04

轉載自給力星 原文地址:http://www.powerxing.com/install-hadoop/ 給力的blog,怕丟失,故轉載 當開始着手實踐Hadoop時,安裝Hadoop往往會成爲新手的一道門檻。儘管安裝其實很簡