原创 redash on spark-thriftserver

 redash 的 數據源中不包括spark-thriftserver,  而spark-thriftserver 的出現是爲了替代 hiveserver2 直接執行sql。  嘗試修改 redash 中 hive  相關的邏輯 以此來支

原创 aws s3 授權方式

refer:https://hadoop.apache.org/docs/current/hadoop-aws/tools/hadoop-aws/index.html#Authenticating_with_S3

原创 clickhouse 執行計劃查看

clickhouse-client -u xxxx --password xxxxxx --send_logs_level=trace <<< 'your query sql' > /dev/null

原创 git 常用命令

原创 java 模擬telnet 發動http 請求

1. telnet 方式: 1.1 telnet map.baidu.com 1.2 輸入:Alt + ] 1.3 輸入:GET /?qt=ipLocation HTTP/1.1 1.4 輸入:HOST:map.baidu.com 1.5

原创 被執行失信人員名單查詢

http://www.online-service.vip/shixin/api

原创 基於騰訊api 語言識別

功能: 錄音文件的識別 準備: https://cloud.tencent.com/document/product/1093/35800 註冊帳號, 申請 SECTET_Id, SECRET_KEY 1. 發送請求 import or

原创 微信域名攔截檢測

微信域名攔截採用雲攔截的機制, 那麼如果檢測一個域名是否被攔截那? 1. 第一步:瀏覽器打開地址: https://wx.qq.com/ 登錄網頁微信 2. 打開瀏覽器調試模式, 一般爲F12, 找到: 找到Cookie 和User-ag

原创 跨域多站點獨立用戶分析

問題:如何把不同站點的用戶進行關聯起來 A、B、C、D 多個站點可能是一級域名相同, 可能是完全兩個不同的域名, 如何把多個站點兒的用戶關聯起來那?   實例:假設要計算A、B、C、D的獨立用戶數 1. 準備cookeicenter 服務

原创 計算機學習 常用站點

計算機技術學習

原创 frp 基於阿里雲跳板 暴露內網機器作爲服務器調試、提供服務

背景:把內網研發機器(沒有公網)暴露在公網上提供服務:真實提供服務,小程序、公衆號碼測試 環境: linux, 阿里雲機器(A), 本地內網機器(B) 1. 下載 frp wget https://github.com/fatedier/

原创 個人建站基本流程

背景:基於阿里雲搭建個人小站 1. 註冊阿里雲賬號:阿里雲註冊 填寫暱稱、密碼、手機號即可。這裏有一個限制, 也是個人不喜歡的, 就是手機號不能使用阿里雲小號   2. 首先需要一個自己的域名, 購買一個自己的域名, 便宜的大約10元左

原创 ip2region java ip地址解析

1. ip2Region:IP地址解析, 參考:https://gitee.com/lionsoul/ip2region 主要針對國內用戶,效率高。 2. java 測試: <dependency> <groupId>org.lion