原创 遠程使用Windows編寫Hadoop代碼出現的權限問題

截圖沒了,大概意思就是:告訴你Windows當前用戶Administrator沒有權限進行寫操作。 解決辦法一:Administrator是Windows上面的賬號,當然在HDFS中沒有寫權限了。那麼我們可以在安裝Hadoop的Maste

原创 pip出現ImportError: No module named _internal

ImportError: No module named _internal錯誤描述解決辦法:強制重新安裝pip3 錯誤描述 在使用tensorflow的時候出現tf的版本問題,想要重裝tensorflow發現conda的市場裏沒

原创 阿里本地生活電話面試

1.優化數據庫批量導入數據(項目) 2.HashMap的實現源碼 3.線程池每個參數的含義 4.Linux查看實時性能,每個字段的含義 5.單例模式的代碼實現 6.排序算法,查找算法,遍歷算法 7.B-樹與B+樹的區別 8.分佈式

原创 conda創建虛擬環境及常用conda命令

一、Conda創建虛擬環境 1、什麼是虛擬環境  它是一個虛擬化,從電腦獨立開闢出來的環境。通俗的來講,虛擬環境就是藉助虛擬機docker來把一部分內容獨立出來,我們把這部分獨立出來的東西稱作“容器”,在這個容器中,我們可以只安裝

原创 pip常見問題綜合

一、pip常用安裝命令 安裝指定版本 pip install tensorflow==1.2.0 升級到最新版本 pip install –upgrade tensorflow 卸載 pip uninstall Tenso

原创 Hexo+GitHub搭建個人博客

前言 之前一直在用CSDN在記錄學習中的一些雜七雜八的積累,斷斷續續好幾年也沒有好好整理一下,最近趕在秋招前重新審視一下自己,新建一個個人博客來記錄日常學習到的知識點與難點,希望能幫到有需要的人。 要搭建一個個人博客需要的東西如下

原创 ssh不能免密碼登錄自己

問題描述:在搭建Hadoop集羣的時候需要設置集羣之間的ssh免密登錄(搜一下很多教程,在此就不列出)。當我設置好以後之後發現ssh登錄其他slave時可以實現免密碼登錄,但是唯獨ssh master(本機)時提示需要輸入密碼。 這個問題

原创 遠程使用Eclipse對HDFS上的文件進行追加操作出現錯誤

錯誤詳情:java.io.IOException: Failed to replace a bad datanode on the existing pipeline due to no more good datanodes being

原创 Hadoop初體驗之分佈式安裝

〇、集羣結構及IP地址 安裝前準備 此次安裝是分佈式安裝,使用三節點(一個主節點,兩個從節點)。 操作系統爲:Ubuntu 16.04LTS。 0)修改每臺機器的IP地址 #修改配置文件interfaces sudo vim /etc

原创 題目1:賦值運算符函數

題目:爲如下類型CMyString的聲明,請爲該類型添加賦值運算符函數。 class CMyString { public: CMyString(char* pData = null); CMyS

原创 使用Python進行文本屬性提取

1.文本格式分析 先來貼一張文本截圖: 可以發現這樣的規律:16行~28行,31行~43行可以看成兩個結構相同的塊,塊與塊之間有兩個空行,塊內分別有兩個空行。 首先我們把文檔中的空行去掉,代碼見下: # coding:utf-8 s

原创 Ubuntu搭建Tomcat服務器環境

安裝包下載 需要安裝包:JDK、Tomcat 下載地址JDK:https://www.oracle.com/technetwork/java/javase/downloads/index.html Tomcat:https://tomca

原创 求質數的算法

利用質數的倍數不是質數來實現 int range//範圍 boolean[] isPrime//初始化爲true,isPrime[1]=false; int n=sqrt(range) for(int i=1;i<n;i++) {    

原创 使用Python處理fasta文件

由於已有的UTR.fasta文件包含3'UTR與5'UTR,但是5'UTR不是想要的,需要刪除掉。源文件有20 W行,手動刪除有點不現實,所以想到使用Python來處理。由於是第一次使用Python,短短几行代碼寫了一上午才寫完,故記錄下