原创 設置數據庫自啓腳本

設置數據庫自啓腳本: cd /usr/u01/app/product/11.2.0/dbhome_1/bin [oracle@200-168-1-4 bin]$ vi dbstart 添加: ORACLE_HOME="/usr/u01

原创 數值精度展示問題

SQL> SELECT to_char(1890.55, '$0G000D00') FROM dual; TO_CHAR(1890.55,'$0G000D00') ---------------------------- $1,890.

原创 ETL調度開發(5)——連接數據庫執行數據庫命令子程序

ETL調度中讀寫數據信息,都需要連接數據庫,下面的子程序通過傳入的數據庫連接字符串和數據庫命令(或SQL)執行所需要的操作: #!/usr/bin/bash #created by lubinsu #2014 source ~/.bas

原创 【ELK】ELK安裝部署

● 摘要:ELK是當前很流行的日誌分析系統,Elasticsearch是一款基於Apache Lucene的開源分佈式引擎。Logstash是用於日誌的收集、轉換、並輸出到ES,其中有豐富的插件用於集成諸如Filebeat、Flume、

原创 【Scala】基於akka的多線程應用程序日誌收集服務

    Akka is a toolkit and runtime for building highly concurrent,distributed, and resilient message-driven application

原创 Scala循環表達式

今天我們來看看Scala的循環表達式。在很多場景中我們需要將同樣的操作執行多次,而一般的順序執行語句只能執行一次,這就需要使用循環結構來完成,大部分編程語言中都提供了三種主要的循環結構(for、while和do...while),Sca

原创 【Hadoop】在Idea環境中編譯Hadoop 2.7.6源碼(Linux)

本次內容,我們來演示如何在Linux Idea環境中編譯Hadoop 2.7.6 源碼安裝mavenwget http://mirror.bit.edu.cn/apache/maven/maven-3/3.5.3/binaries/ap

原创 ORA-39700: database must be opened with UPGRADE option

數據庫啓動的時候報錯: SQL> startup ORACLE instance started. Total System Global Area 534462464 bytes Fixed Size 2215064 bytes Va

原创 Oracle客戶端連接慢,SSH連接數據庫主機也慢的原因

最近通過客戶端連接數據庫:sqlplus system/11111@lubinsu 或者通過SSH方式連接主機的時候,都非常慢,但是ping卻是正常的: 原因爲:DNS服務器配置不正確,在主機上並不需要配置DNS服務器: [root@20

原创 手工創建數據庫

Step 1: Specify an Instance Identifier (SID) : [oracle@200-168-1-4 ~]$ ORACLE_SID=lubinsu  [oracle@200-168-1-4 ~]$ exp

原创 Oracle sys_context()函數

網上搜集的關於Oracle上下文信息獲取方式: --用戶的認證類型 select sys_context('USERENV','AUTHENTICATION_TYPE') from dual; --未知 select sys_contex

原创 【Kafka】Kafka 1.0.1案例詳解之Kafka Streams

在這之前我們已經講解了Kafka的安裝部署和最核心的發佈訂閱功能,本次章節我們來介紹Kafka的新特性——Kafka Streams。首先,要研究一樣新東西,我們需要知道它是做什麼的:Kafka Streams is a client

原创 【Kafka】Kafka分佈式流式處理平臺

本博客文章如無特別說明,均爲原創!轉載請註明出處:Big data enthusiast(http://www.lubinsu.com/)本文鏈接地址:【Kafka】Kafka分佈式流式處理平臺(http://www.lubinsu.c

原创 【Kafka 1.x】快速入門

本博客文章如無特別說明,均爲原創!轉載請註明出處:Big data enthusiast(http://www.lubinsu.com/)本文鏈接地址:【Kafka 1.x】快速入門(http://www.lubinsu.com/ind

原创 【Kafka】Kafka 1.0.1案例詳解之Kafka Connect

Kafka Connect是一個用於Kafka與外部系統之間高可靠的、可擴展的流數據傳輸工具。它使得我們能夠簡單快速的定義數據集合在Kafka與外部系統之間輸入輸出。Kafka Connect可以從數據庫或者應用程序服務器中手機數據指標