原创 大數據組件Log4j2漏洞升級

目前我們的大數據基礎平臺類似於CDH,集成了各個開源軟件,Log4j2漏洞出現的時候,我們採用了兩個方案,一個是開啓防火牆,二是對應每個大數據組件進行更新。 一、防火牆 方案思路是,在初始化主機的時候加上防火牆策略,集羣間開啓白名單,對

原创 Android ASM自動埋點方案實踐 1、AOP的概念 2、Transform 3、Gradle插件實現 4、字節碼編寫 5、實戰演練

這段時間想到一個有趣的功能,就是在Android的代碼編譯期間進行一些騷操作,來達到一些日常情境下難以實現的功能,比如監聽應用中的所有onClick點擊時間,或者監聽某些方法的運行耗時,如果在代碼中一個方法一個方法修改會很蛋疼,所以想通過

原创 筆記:2018-06-04 redis在mac上安裝 redis命令行操作

redis命令行操作 redis 在 mac 下的安裝與使用 Mac環境下安裝Redis Redis安裝的時候報錯:[exception]: Executing test client: couldn't execute "src/red

原创 中秋爬取詩文數據製作詞雲

正好中秋節,爲了應景,便利用Python來網上爬些中秋詩句來製作詞雲,詞雲可基於文本內容的詞頻進行可視化研究,是比較常見的文本分析可視化方法。 按照慣例,先上效果圖。 一、製作步驟 1.數據爬取及清洗 2.數據加載製作詞雲,主要包

原创 Hbase常用命令行

Hbase命令行的一些記錄,不然用完沒多久又得忘了,找的時候又得花時間,乾脆把用到的先記錄下來,後面再用到其它命令的話繼續補充。 Hbase準確說來是列蔟式數據庫,而不是列式數據庫,因爲我們用的時候基本上是單一列族包含多列的結構,用在我

原创 在SpringBoot中使用Elasticsearch

一、SpringBoot模版方式接入(不建議) 其實一開始是準備用SpringBoot的模版來直接接入使用的,也就是以下這樣的接入方式,也是網上大家都這麼說的使用方式。 <dependency> <g

原创 Android代理模式實現簡單的AOP

此篇文章說是通過代理模式來實現簡單的AOP其實只是順帶的,主要目的還是講一下代理模式,在Android中使用的代理模式主要分爲靜態代理和動態代理,靜態代理編譯期間就已確認代理類,而動態代理在運行期間才能確認代理類。 1、代理模式簡介

原创 Android中ImageView的ColorFilter圖像處理解析

ImageView堪稱是Android開發中最爲常用的控件之一,但是在大多數情境下對其的使用都是最基礎的展示一張源圖片,可能部分童鞋不知道,ImageView可以直接對源圖片進行特定的算法處理,ImageView的setColorFilt

原创 手把手教你使用OpenGL ES

話不多說,拿起鍵盤就是幹。OpenGL ES可以實現3D效果,而且在性能要求比較高的情況,或者一般的自定義View難以達到的效果可以考慮一下。就像官方說的,OpenGL ES直接通過GPU進行圖形加速,唯一的約束就是:你的想象力太貧乏。這

原创 大數據不得不說的故事

從Android部門轉崗到數據智能中心已經半年多,這段時間主要是知識接收的階段,所以也一直沒有更新博客。經過一番踩坑,嘗試着從小白的角度對大數據進行整體的講解,也是對近期學習的總結,歡迎對大數據感興趣的童鞋品嚐。 一、前言 在正式介紹之

原创 Android外部文件加解密及應用實踐

有這樣的應用場景,當我們把一些重要文件放到asset文件夾中時,把.apk解壓是可以直接拿到這個文件的,一些涉及到重要信息的文件我們並不想被反編譯拿去,這個時候需要先對文件進行加密,然後放到Android中的資源目錄下,用的時候再解密出來

原创 Android圖片加載內存佔用分析

作爲一名Android開發人員,你見得最多的大概就是res/drawable-[density]/ 文件夾了,現在又大概多了 res/mipmap-[density]/ 文件夾,這些文件夾通常用來存放圖片資源文件,大家可能再熟悉不過了,現

原创 筆記:2018-06-04 redis在mac上安裝

redis命令行操作 redis 在 mac 下的安裝與使用 Mac環境下安裝Redis Redis安裝的時候報錯:[exception]: Executing test client: couldn't execute "src/red

原创 OpenGL ES實現相機素描效果-簡單的世界

最近想到一個比較好玩的,就是自定義一個相機,通過簡單的圖像處理算法來改變真實的世界,發現效果還真的挺好玩,所以最後簡單的實現了一下。 1 實現準備 要實現這個需要用到幾個重要的系統類 Camera:已經過時,谷歌推薦使用camera