原创 python讀取指定文件中的字符串報錯問題

錯誤彙總: 1.json.decoder.JSONDecodeError: Expecting property name enclosed in double quotes: line 1 column 2 (char 1)

原创 Centos7.5.64 python2.7升級python3.7

安裝步驟: https://techglimpse.com/install-python-openssl-support-tutorial/ 安裝啓發: https://stackoverflow.com/questions/52

原创 RHSA-2018:3157-中危: curl 和 nss-pem 安全和BUG修復更新

Curl低版本重定向中的HTTP身份驗證泄漏漏洞: 官網解釋: https://curl.haxx.se/docs/CVE-2018-1000007.html Curl版本升級解決漏洞: https://www.cnblogs.

原创 SecureCRT 遠程無法進行退格刪除問題和超時自動退出問題

初次使用secureCRT,連接Mongodb操作時,發現退格鍵無法使用,有花了不少時間搞好這個。其實很簡單,如圖,選擇linux就好了! Options ====> Session Options ====> 如下圖操作

原创 Window 10 安裝 Mongo

Window 10 安裝 Mongo 下載: https://www.mongodb.com/download-center/community?jmp=docs 安裝: https://www.cnblogs.com/wesch

原创 StreamSets從MySQL實時同步數據到Hbase問題總結

問題一:找不到zookeeper的/hbase/master org.apache.hadoop.hbase.MasterNotRunningException: org.apache.hadoop.hbase.MasterNot

原创 Docker Python啓動報:Bind for 0.0.0.0:8080 failed: port is already allocated

一句話總結就是容器佔用的port還沒有完全釋放 查看進程,發現相關的容器並沒有在運行,而 docker-proxy 卻依然綁定着端口: $ docker ps 檢查docker鏡像 $ ps -aux | grep -v gre

原创 運行spark項目的問題

運行spark項目的問題: [root@aaaaaaa apptooljar]# spark-submit --master spark://aaaaaaa:6066 --deploy-mode client --class c

原创 集體智慧導言-第一章

技術人對於集體智慧的定義 爲了創造新的想法,而將一羣人的行爲/偏好或思想組合在一起 什麼是機器學習 機器學習是人工智能(AI,artificial intelligence)領域中與算法相關的一個子域,它允許計算機不斷地進行學習。

原创 重拾hadoop,spark的Cloudera Manager BUGHeart

總有你遇到的Question ### 版本問題: NoSuchMethodError: scala.Predef$.ArrowAssoc(Ljava/lang/Object;)Ljava/lang/Object 解決方案:就是你程

原创 Spark(本地)操作Hadoop常見問題彙總

問題一: Failed to connect to bioyuana/ip:1004 for block BP-1366618129-172.16.1.176-1576652184324:blk_1073760623_19803,

原创 C#去掉TabControl的邊框(非TabPage)

C#去掉TabControl的外邊框(非TabPage) 太難了,找了好久,終於找到了去除TabControl邊框的解決方案 問題如下圖: 話不多說,直接上代碼 using System; using System.Collec

原创 mysql update select 從查詢結果中更新數據

update select 語句(注意:必須使用inner join) 語法 update a inner join (select yy from b) c on a.id =c.id set a.xx = c.yy updat

原创 Spark Scala API讀Hbase(帶Kerberos安全認證)

Spark Scala API讀Hbase(帶Kerberos安全認證) 各個組件版本 <!-- Languages --> <java.version>1.8</java.version> <scala.version>2.1

原创 StreamSets集成Kerberos詳解(Mysql實時同步數據到HBASE)

StreamSets集成Kerberos步驟如下: StreamSets的安裝部署省略 1、進入到安裝kerberos的服務器生成指定keytab文件 1、進入到Kerberos管理界面 kadmin.local 2、在管理界面指