原创 airflow分佈式部署踩坑記錄之配置篇

配置mysql作爲元數據庫 安裝mysql >: yum list | grep mysql >: yum install -y mysql-server mysql 啓動MySQL服務 >:service mysqld sta

原创 airflow分佈式部署踩坑記錄之安裝篇

前言 airflow是一款基於python的開源任務流調度系統,但是關於airflow的安裝教程比較匱乏。本人在親自安裝的過程中遇到了很多奇葩的問題,期間也參考了網上的各種資料,在此做下記錄,以備不時之需。 系統環境 操作系

原创 編程練習(二)——調度所有區間

題目:蓄欄保留問題 總時間限制:1000ms 內存限制:65536kB 題目來源:OpenJudge 描述 農場有N頭牛,每頭牛會在一個特定的時間區間[A, B](包括A和B)在畜欄裏擠奶,且一個畜欄裏同時只

原创 airflow分佈式部署踩坑記錄之其他篇

Q1:怎麼進行分佈式部署? airflow celery採用的是消息隊列的方式生產任務,分發任務和執行任務,所以想要進行分佈式部署,只需要在不同機器上部署完全一樣的airflow服務,在borker節點上開啓airflow的

原创 Java基礎學習(二)

數組 數組在Java語言中屬於第一級對象。數組中的每個元素通過數組名加下標進行引用(訪問)。當建立一個數組後,就不能輕易改變其大小。對於數組的訪問不能越界訪問。 1、一維數組 數組聲明 類型名稱 數組名[]; 或者 數據類型

原创 Java基礎學習(四)

字符串部分的補充 格式化輸出 System.out.format() format()方法和printf()方法是等價的。 Formatter類 可以將Formatter類看做是一個翻譯器,它能把你的格式化字符串和數據翻

原创 Java基礎學習(一)

學習Java,寫點學習筆記 不能浮躁,不能眼高手低,一步一個腳印 標識符 1、java語言中標識符由字母、數字、下劃線、美元符號組成,沒有長度限制,不能含有其他符號或者空格。 2、標識符只能以字母、下劃線或美元符號開頭

原创 爲什麼要進行URL編碼

轉載自http://www.cnblogs.com/jerrysion/p/5522673.html HTTP協議中參數組件的傳輸是“key=value”鍵值對的形式,如果要傳輸多個參數就需要用“&”符號對鍵值對進行分隔。例如?na

原创 airflow分佈式部署踩坑記錄之配置篇<2>

配置mysql作爲元數據庫 安裝mysql >: yum list | grep mysql >: yum install -y mysql-server mysql 啓動MySQL服務 >:service mysqld start 重

原创 HTTP學習(1)

網絡分層協議 OSI模型 OSI模型(Open System Interconnect model)是一個由國際標準化組織提出的概念模型,試圖提供一個使各種不同的計算機和網絡在世界範圍內實現互聯的標準框架。 將計算機網絡體系結構劃分爲七

原创 第二章 HTTP報文

如果說HTTP是因特網的信使,那麼HTTP報文就是它用來搬東西的包裹了。 報文流 HTTP報文是在HTTP應用程序之間發送的數據塊。這些數據塊以一些文本信息的元信息(meta-information)開頭,這些信息描述了報文的內容及含

原创 airflow分佈式部署踩坑記錄之安裝篇<1>

前言 airflow是一款基於python的開源任務流調度系統,但是關於airflow的安裝教程比較匱乏。本人在親自安裝的過程中遇到了很多奇葩的問題,期間也參考了網上的各種資料,在此做下記錄,以備不時之需。 系統環境 操作系統 Ce

原创 編程練習(一)

生理週期 題目來源: OpenJudge 總時間限制:1000ms 內存限制: 65536kB 描述 人生來就有三個生理週期,分別爲體力週期、感情週期和智力週期,它們的週期長度分別爲23天、28天和33天。每一個週期

原创 airflow分佈式部署踩坑記錄之其他篇<3>

Q1:怎麼進行分佈式部署? airflow celery採用的是消息隊列的方式生產任務,分發任務和執行任務,所以想要進行分佈式部署,只需要在不同機器上部署完全一樣的airflow服務,在borker節點上開啓airflow的webs

原创 Hadoop學習——Hadoop集羣搭建筆記

生而有涯而學無涯 最近使用VMWare搭建了一個虛擬的Hadoop集羣環境,搭建的過程中參考了很多網上大神的資料,在這裏記錄下本人實踐的全過程,用於以後的查詢參考使用,參考的資料會在文末貼出對應的鏈接。 集羣配置詳情 hostn