原创 Live555源碼分析@njzhujinhua[3]:ServerMediaSubsession與ServerMediaSession

[1]ServerMediaSubsession與ServerMediaSession 兩者均繼承自Medium,但他們的作用卻不是像其名字般看上去

原创 3GPP 文檔下載器

#coding:utf-8 from PyQt4.QtGui import * from PyQt4.QtCore import * import urllib,re,sys doc_version=['11.9.0','11.8.0'

原创 Live555源碼分析@njzhujinhua[2]:RTSPServer中的用戶認證

http://blog.csdn.net/njzhujinhua @20140601 說到鑑權,這是我多年來工作中的一部分,但這裏rtsp中的認證簡單多了,只是最基本的digest鑑權的策略。 在Live555的實現中, 用戶信息由如下

原创 cvpr讀書筆記[1]:VJ人臉檢測框架。Viola-Jones Objects detection framwork

http://blog.csdn.net/njzhujinhua/article/details/38343683 人臉檢測是人臉識別的第一道工序,其技術比較成熟,但因爲其檢測性能因素,直到Viola和Jones於CVPR2001上

原创 cvpr讀書筆記[2]:boosting方法和AdaBoost算法概述

http://blog.csdn.net/njzhujinhua/article/details/38343741 boosting增強法的目標是提高任何給定的學習算法的分類準確率。 Boosting方法從弱學習算法出發,通過學習訓練

原创 Spark入門2-瞭解RDD

朱金華 njzhujinhua 2017/12/05 簡介 1 特性 RDD編程模型 1 編程模型 2 RDD的操作 源碼實現 1 RDD 朱金華 njzhujinhua 2017/12/05 1. 簡介 在RDD誕生

原创 CVPR讀書筆記[7]:PCA的理解

CVPR讀書筆記[7]:PCA的理解 朱金華   [email protected] 下文中A'=A^t表示A的轉置. n維數據的m個樣本構成的n*m維矩陣X, 尋找n*n的變換矩陣W, 使得變換後的矩陣Y=W*X=Y. 簡

原创 Spark技術架構,概念及運行過程

Spark技術架構 Spark的基本概念 1 Application 2 Job 3 Stage和DAGSchedule 4 Task和TaskSchedule 5 BlockManager 6 寬依賴與窄依賴 運行過程 1 St

原创 Jupyter與PySpark實現結合spark與python的notebook

Jupyter與PySpark實現結合spark與python的notebook Jupyter與PySpark實現結合spark與python的notebook PySpark簡介 Jupyter配置 PySpark簡介 S

原创 Spark入門1-使用Spark-shell交互分析

Spark入門1-使用Spark-shell交互分析 朱金華 njzhujinhua 2017/12/03 Spark入門1-使用Spark-shell交互分析 文件讀取 1 讀取RDD方式 2 讀取Dataset方式 查看文件

原创 [轉載]歡迎使用CSDN-markdown編輯器

歡迎使用Markdown編輯器寫博客 本Markdown編輯器使用StackEdit修改而來,用它寫博客,將會帶來全新的體驗哦: Markdown和擴展Markdown簡潔的語法 代碼塊高亮 圖片鏈接和圖片上傳 LaTex數學公式 UM

原创 Spark調優-參數及配置

參數調優 1 資源類 11 num-executors 12 executor-memory 13 executor-cores 14 driver-memory 15 sparkdefaultparallelism 16 spark

原创 oozie調度阻塞問題

講個前段時間遇到的問題,項目中用到的spark on yarn基於oozie進行應用的編排調度,oozie支持fork/join機制,就是可以在fork之後可以分出多個分支用於調度其他action,對我們來說就是調用多個spark應用。但

原创 centos7.1與無線網 (芯片rtl8723be)

原載於http://graphnj.sinaapp.com/, 雲豆消耗大增,遷回來 centos7.1與無線網 (芯片rtl8723be) 發表於 2015 年 7 月 12 日 centos7.1 的內核爲3.10,

原创 Spark筆記4-編程模型map/repartitions等

njzhujinhua 2017-12-17 《圖解Spark-核心技術與案例實戰》 - 郭景瞻 5轉換操作 51 基礎轉換操作 mapdistinctflatMap coalescerepartition mapPartitions