原创 詳解Python解決抓取內容亂碼問題（decode和encode解碼）
這篇文章主要介紹了Python解決抓取內容亂碼問題（decode和encode解碼），文中通過示例代碼介紹的非常詳細，對大家的學習或者工作具有一定的參考學習價值，需要的朋友們下面隨着小編來一起學習學習吧 一、亂
2019-03-30 05:03:17
21
原创 Flink 任務打包、提交
一、Flink版本 flink-1.6.1-bin-hadoop26-scala_2.11 二、Flink任務打包 筆者將寫好的flink計算任務代碼發到服務器(ubuntu16.04)，在服務器端進行任務的打包 1、將項目工程導入服務器
2018-12-16 22:26:23
13
原创 Flink 單機部署
一、Flink版本 flink-1.6.1-bin-hadoop26-scala_2.11.tgz 二、單機部署 1、先將flink包解壓之後放到相應目錄下，如下圖 2、啓動flink root@VM-0-3-ubuntu:/usr/
2018-12-16 22:26:12
1
原创 2018我在大學裏的流年
過去的2018，大學的流年 說說爲什麼以在大學裏的流年爲題吧，因爲明年這個時候，可能我已經離開大學，已經實習了，大學也即將成爲過去式。已經不打算考研的我，很多人會質疑，這一年，我耳邊聽到過無數次質疑的話。我從來不會反駁，因爲自己選的路
2018-12-16 22:26:12
原创 SpringBoot集成Kafka實現消息上報
一、該篇博客使用技術版本 SpringBoot：1.5.9.RELEASE zookeeper：zookeeper-3.4.5 kafka：kafka_2.10-0.10.2.1 二、SpringBoot集成Kafka 1、首先修改kaf
2018-12-09 22:26:28
1
原创 kafka環境搭建
一、使用技術版本 kafka_2.10-0.10.2.1.tar zookeeper-3.4.5.tar 二、環境搭建 因爲kafka環境依賴於zookeeper，所以先搭建zookeeper 1、zookeeper搭建 先創建一個
2018-12-09 22:26:28
3
原创 SpringCloud Zuul網關整合Swagger
一、關於Swagger Swagger能成爲最受歡迎的REST APIs文檔生成工具之一，有以下幾個原因： Swagger 可以生成一個具有互動性的API控制檯，開發者可以用來快速學習和嘗試API。 Swagger 可以生成客戶端SDK代
2018-12-07 23:03:20
原创 logstash-input-jdbc增量、全量數據同步
一、場景 筆者在mysql數據同步到ES中，發現第一次同步時需要全量的數據，之後則需要定時去同步增量數據，所以筆者提供增量和全量同步的conf供讀者參考 二、解決方案 1、全量數據同步 具體如何執行可參考https://blog.csdn
2018-11-28 13:13:41
原创 實現MySQL數據同步到ElasticSearch中
一、場景 筆者最近在寫全文搜索引擎服務，用到的是ElasticSearch框架，該篇博客就如何實現MySQL數據同步到ES中進行闡述 二、解決方案 運行系統：mac系統下 採用到的技術：ES2.4、logstash-2.4.1 用到的相關
2018-11-28 13:13:40
原创 SpringCloud Zuul實現負載均衡和熔斷機制
一、場景 筆者就Zuul網關下實現其負載均衡與熔斷機制(雪崩)進行實踐，前提是已經導入zuul相關依賴 springboot版本：1.5.9.RELEASE springcloud版本：Dalston.SR5 <dependencies
2018-11-08 07:39:07
原创 Python 實現MySQL數據導入Excel
一、場景 場景如題，將mysql中的表數據導入到excel 二、場景實現 1、創建mysql_util.py 將對mysql的操作寫在這個py文件下 mysql_conf = { 'host': '主機host', 'u
2018-11-07 07:46:38
2
原创 Java處理JSON數據返回到前端的反斜槓
一、場景簡述 在寫後端返回JSON數據到前端的時候，遇到了前端一直無法獲得後端傳輸的數據，但實際已經後端已經傳輸到前端了。在看前端獲取到後端返回的數據的時候發現JSON中含有反斜槓，如下圖 想必一定是這個轉義符導致前端顯示數據失敗。 二
2018-11-04 08:26:00
原创 Python 解決地址欄中文編碼問題
一、場景簡述 筆者發現在天貓搜索店鋪頁面，如果輸入中文，在url中會進行轉碼，輸入英文則不變，如下圖 url中的將男裝進行了轉碼，本應q=男裝 具體url：https://list.tmall.com/search_product.htm
2018-10-27 07:58:22
1