原创 基於Apache Kylin大數據多維查詢分析平臺實踐

https://blog.csdn.net/liuxinli/article/details/84345248

原创 重複寫文件腳本,測試數據專用

import os with open(’/opt/bh/hub/flipos_order_info/5/1574611200/2019_order_info.csv’,“a+”) as f1: for i in range(10

原创 【Jsoup學習禮記】解析一個body片斷

問題 假如你有一個HTML片斷 (比如. 一個 div 包含一對 p 標籤; 一個不完整的HTML文檔) 想對它進行解析。這個HTML片斷可以是用戶提交的一條評論或在一個CMS頁面中編輯body部分。 辦法 使用Jsoup.pa

原创 【Jsoup學習禮記】從一個文件加載一個文檔

問題 在本機硬盤上有一個HTML文件,需要對它進行解析從中抽取數據或進行修改。 辦法 可以使用靜態 Jsoup.parse(File in, String charsetName, String baseUri) 方法: Fil

原创 python md5加密代碼實現

代碼如下: coding: UTF-8 * import os import hashlib m = hashlib.md5() rootPath = “/home/dmp_ipg/yoga/data3” targetPa

原创 hive 基礎內容

(一): Hive 是什麼 在接觸一個新的事物首先要回到的問題是:這是什麼? 這裏引用 Hive wiki 上的介紹: Hive is a

原创 【Jsoup學習禮記】解析一個HTML字符串

存在問題 來自用戶輸入,一個文件或一個網站的HTML字符串,你可能需要對它進行解析並取其內容,或校驗其格式是否完整,或想修改它。怎麼辦?jsonu能夠幫你輕鬆解決這些問題 解決方法 使用靜態Jsoup.parse(String

原创 【Jsoup學習禮記】從一個URL加載一個Document

存在問題 你需要從一個網站獲取和解析一個HTML文檔,並查找其中的相關數據。你可以使用下面解決方法: 解決方法 使用 Jsoup.connect(String url)方法: Document doc = Jsoup.conne

原创 Hadoop集羣(第5期)_Hadoop安裝配置

1、集羣部署介紹 1.1 Hadoop簡介   Hadoop是Apache軟件基金會旗下的一個開源分佈式計算平臺。以Hadoop分佈式文件系統(HDFS,Hadoop Distributed Filesystem)和Ma

原创 【Jsoup學習禮記】解析和遍歷一個HTML文檔

如何解析一個HTML文檔: String html = "<html><head><title>First parse</title></head>" + "<body><p>Parsed HTML into a doc.</p><

原创 【Jsoup的學習禮記】使用選擇器語法來查找元素

問題 你想使用類似於CSS或jQuery的語法來查找和操作元素。 方法 可以使用Element.select(String selector) 和 Elements.select(String selector) 方法實現:

原创 HTTP 協議詳解

 相關文章:HTTP 協議之壓縮   當今web程序的開發技術真是百家爭鳴,ASP.NET, PHP, JSP,Perl, AJAX 等等。 無論Web技術在未來如何發展,理解Web程序之間通信的基本協議相當重要, 因爲它讓我們理解了

原创 【Jsoup學習禮記】使用DOM方法來遍歷一個文檔

問題 你有一個HTML文檔要從中提取數據,並瞭解這個HTML文檔的結構。 方法 將HTML解析成一個Document之後,就可以使用類似於DOM的方法進行操作。示例代碼: File input = new File("/tmp/i

原创 U盤安裝centos6.5教程(kowems博客)

U盤安裝centos6.5和安裝centos6.3沒啥本質區別 所需工具: 一、UltraISO(用來製作 U 盤啓動) 二、CentOS 6.5 位系統鏡像(建議下載bin版鏡像,minimal也行) 三、U 盤一隻 要求:U 盤容

原创 linux遠程下載文件 的兩種方法之 ftp命令和scp命令

ftp命令:  服務器有安裝ftp Server,另外一臺linux可以使用ftp的client程序來進行文件的拷貝讀取和下載。  1. 連接ftp服務器   格式:ftp [hostname| ip-address]   a)在lin