原创 使用happybase訪問HBase出現Broken pipe問題---兩個“驚天”大bug

來源使用happybase通過thrift接口向HBase讀取、寫入數據時,出現Broken pipe的錯誤。排查步驟: 1、查看hbase的日誌: Java HotSpot(TM) 64-Bit Server VM warning: Us

原创 python拷貝list

來源 引用和值 在 Python 語言中,一個變量保存的值除了基本類型保存的是值外,其它都是引用(引用是指保存的值爲對象的地址),因此對於它們的使用就需要小心一些,特別是複製list和dict時。下面舉個例子: 問題描述:已知一個列表,求生

原创 用python3的多進程和協程處理MySQL的數據

本文介紹用python3的多進程 + 協程處理MySQL的數據,主要邏輯是拉取MySQL的數據,然後使用flashtext匹配關鍵字,在存回MySQL,代碼如下(async_mysql.py): import time import asy