shell通過通道批量插入大量數據到redis

前言:

當我們需要短時間內快速插入大量數據到redis中,就需要一個行之有效的方式。
實踐發現redis的(Redis Mass Insertion – Redis)是個比較高效的方法。

藉助於pipline插入

  1. 首先通過簡單的腳本生成例如如下的:

    SET Key0 Value0
    SET Key1 Value1
    ...
    SET KeyN ValueN

    的目標文本文件。

  2. linux上生成的文件不能直接來跑,需要進行轉換一下。
    轉換的方法有好多種:
    a. 利用todos進行轉化。如未進行安裝可參考這裏

    todos set_ins_redis.txt

    b. 利用vim格式化

    $ vim set_ins_redis.txt
    :set fileformat=dos
    :wq
  3. 最後執行如下命令:

    cat set_ins_redis.txt | redis-cli  -p 8244 --pipe

    執行成功後會出現如下信息:

    All data transferred. Waiting for the last reply...
    Last reply received from server.
    errors: 0, replies: 10654294

Done

發表評論
所有評論
還沒有人評論,想成為第一個評論的人麼? 請在上方評論欄輸入並且點擊發布.
相關文章