原创 Python 單例模式
首先，我們先創建一個測試用例 def test_sig(sig_class): a = sig_class(1) print("a = {}(1)\na.value={}".format(sig_class.__name__
2019-09-06 22:15:01
原创 lxml 解析巨大深嵌套DOM樹的問題
今天客戶反映，我們的微信爬蟲，有一篇文章的信息不全：問題鏈接 仔細觀察之後，我們發現，這篇文章是由135微信編輯器生成的，正文內容的DOM樹非常深，有幾百層。 使用 lxml.etree.HTML(text).xp(xpath)進行解析的時
2018-11-22 15:39:29
1
原创 mongo性能： TPS從1000到20000
我在redis裏存了一個10億的set。別問我爲啥存這麼多……………… 然後佔了接近100G內存……………… 然後我就想倒出來，參考了幾篇文章，把TPS從1000多提升到了2萬。 多線程（最主要的） batch insert redis
2018-09-18 18:24:17