原创 搜索引擎 Query Analysis
在搜索引擎的算法優化中，Query分析有相當多的論文，其中主題包括： Query的類目預測。例如搜索“運動鞋”，可能包括：男士運動鞋、女士運動鞋、兒童運動鞋等類目，預測Query所在的類目對提高搜索結果的相關性非常重要。如果能夠識
2019-01-05 21:48:05
原创 excel 常用技巧
LOOKUP 的注意知識點：1、LOOKUP要查詢一個明確的值或者範圍的時候(也就是知道在查找的數據列是肯定包含被查找的值)，查詢列必須按照升序排列。（在EXCEL幫助文檔裏也是這麼說的）如果所查詢值爲明確的值，則返回值對應的結果行，如果
2018-09-04 18:13:02
原创 wordPress 安裝
使用阿里雲鏡像：https://market.aliyun.com/products/53616009/cmjj018048.html?spm=5176.730005.0.0.Xbpat7 wordpress設置類目別名一定不要用中文。
2018-09-04 18:12:59
原创 開源報表工具 Metabase 使用技巧- 通過外表解決英文轉中文的功能
在管理界面找到具體的報表名稱和字段： 選擇設置： 外表的定義： CREATE TABLE `dim_search_scenario_info` ( `scenario` varchar(50) COLLATE utf8mb4_
2018-09-04 18:12:59
原创 python3.5 如何在virtural env 下面使用libsvm
首先把python3 配置到~/py3env 下面： 然後去下載libsvm版本，從下載列表中選擇使用了 libsvm-3.16 版本： http://www.csie.ntu.edu.tw/~cjlin/libsvm/ol
2018-09-04 18:12:59
原创 閱讀GRU 用於推薦的代碼
https://github.com/hidasib/GRU4Rec/blob/master/examples/rsc15/preprocess.pypython preprocess.pyFull train set Events: 3
2018-09-04 18:12:58
原创 1.找出所有shell 裏面，2.找出含有cluster 字符串的文件
找到所有shell find /opt/task/ | grep -v pyspark2 | grep ".sh$" > a.sh 過濾其中有submit 和 cluster 字符串的shell文件： import os w
2018-09-04 18:12:58
原创 阿里雲數加Max Compute的Java Map Reduce程序讀取文本資源及其命令行和IDE運行配置
最近有個業務是想從商品數據中解析出需要的關鍵詞。關鍵詞來自一個詞庫，詞庫文件包括產品類目詞、菜品詞等等。選擇用阿里雲Max Compute 的Map Reduce（MR）來實現。 開始以爲MR不能讀取文件，後來發現
2018-09-04 18:12:58
原创 placeholder 和 計算
import tensorflow as tf import numpy as np # 設計一個3維數組 x = tf.placeholder('float', [None,2,2]) # 加法器 y = tf.add(x,x)
2018-09-04 18:12:57
原创 圖像相似性搜索思路
爲什麼做圖像相似性搜索？商品秒殺不夠準確豐富，希望通過圖像相似性找到相關作品。應用場景：新發布作品，通過圖片找最相似的作品。各種推薦場景，可以把圖像相似性的特徵用在計算相似作品上面。算法思路：用AutoEncoder，發現用卷積的方法無法
2018-09-04 18:12:57
原创 安裝openCC 需要先安裝cmake
https://github.com/BYVoid/OpenCC 安裝openCC 在centOS 操作系統，需要先安裝cmake，然後再make。 Opencc 繁體和簡體之間的轉換 pipinstall opencc p
2018-09-04 18:12:56
原创 中文維基百科word2vec訓練及其代碼
參考文章：中英文維基百科語料上的Word2Vec實驗數據來自：https://dumps.wikimedia.org/zhwiki/latest/zhwiki-latest-pages-articles.xml.bz2繁體轉爲簡體： op
2018-09-04 18:12:56
原创 如何根據模型來畫決策面？
_author__ = 'm.bashari'import numpy as np from sklearn import datasets, linear_model import matplotlib.pyplot as plt
2018-09-04 18:12:56
2
原创 spark 安裝standalone 的坑
idea intellij 用sbt管理包 編譯：sbt package 執行： ./bin/spark-submit --class "com.dongjia.chapter.helloword.MyHelloWorld" \
2018-09-04 18:12:56