原创 《Hadoop大明白》【2】pyspark的應用場景 原

1,python的碼農涉獵Hadoop,首選pyspark 2,開發spark應用,需要知道的幾個點: 【1】SQL語句:insert into / overwirte 【2】DataFrame的常用API 【3】UDF函數 【4】K

原创 oozie 調度pyspark 原

http://www.learn4master.com/big-data/pyspark/run-pyspark-on-oozie 使用Oozie在YARN上安排PySpark程序 考慮一個用Spark Python API編寫的簡單字數統

原创 開源量化交易平臺 原

# OC開放量化平臺(原open_ctp);使用c++,python等語言;支持A股,國內期貨CTP;使用CMAKE構建跨平臺工程;實現個人策略編寫的開放平臺:量化選 股,CTP策略等待你實現;“ctp互動交易平臺“”使用cocos

原创 《ctp交易》類型定義 原

CThostFtdcTraderApi ---- 交易core實例 1.注意查詢流控;交易無流控; 2.ReqAuthenticate ,自定義的程序化客戶端需要向上級申請AuthCode,否則下單錯誤;貌似出入金會有障礙; 3.下單前,需

原创 多語言開發的萬金油 原

遊走在java/c++,c++/golang,python/scala,js/php,這些變化莫測的開發選擇的時候,如何做到頭腦清晰? 我的經驗是,目中無語言,手裏小本本。 1,這些語言我都曾多少實際操作過項目,但能記住這多麼語言如何開發嗎

原创 golang(1) 原

// Copyright 2009 The Go Authors. All rights reserved. // Use of this source code is governed by a BSD-style // license

原创 go-ide-select 原

列舉幾個我曾經和現在使用的: 1,eclipse 2,goland 3,liteide 4,其他:Visual Studio Code ... goland是收費的,體驗也一般,eclipse和liteIDE 是不錯的選擇

原创 others 原

原创 《Hadoop大明白》【1】Hadoop的核心組件 原

本書適用於想對大數據平臺Hadoop有深入瞭解的程序員朋友,會幫助你以後在應用開發方面趟平一些坑。 1,Hadoop 是一個系列大數據組件構成的應用平臺,可由多個廉價機器搭建集羣,提供分佈式存儲和計算。 2,MapReduce 分爲map和

原创 量化選股-開放平臺 原

量化選股,實時選股,短線王 http://ykquant.cn 開源項目: https://gitee.com/cn0512/YKQuantPublisher 生成環境: 1,ubuntu 16.04 2,python3.5 3,mongo

原创 Visual Studio Tools for AI【一】 原

      vs-ai 是一個擴展Visual Studio工具構建、測試和部署深度學習/人工智能的解決方案。它無縫地集成了Azure機器學習強大的實驗能力,包括但不限於提交數據準備和模型訓練工作透明計算目標不同。此外,它支持自定義指標和運

原创 windows 下 cmd cli多標籤工具 原

鏈接: https://pan.baidu.com/s/184NM-KCBTNeLJRuYuNhqMw 密碼: tvky 源碼: https://github.com/cmderdev/cmder

原创 blockChain - 網絡位 原

0.0.0.0/8 子網掩碼有8個1,也就是8位是網絡位 二進制:11111111.0000000.0000000.0000000 十進制:255.0.0.0 RFC: 0.0.0.0/8 - Addresses in this block

原创 CDH-pyspark應用場景警告和錯誤 原

18/11/16 08:33:34 ERROR client.TransportResponseHandler: Still have 4 requests outstanding when connection from /100.66.