ElasticSearch是什麼?
ElasticSearch是一個基於Lucene的搜索服務器。它提供了一個分佈式多用戶能力的全文搜索引擎,基於RESTful web接口。Elasticsearch是用Java開發的,並作爲Apache許可條款下的開放源碼發佈,是當前流行的企業級搜索引擎。設計用於雲計算中,能夠達到實時搜索,穩定,可靠,快速,安裝使用方便。
簡單來說就是用來做網站/APP搜索功能
mac下環境安裝
brew install elasticsearch
還需要安裝logstash和mysql-connector用於同步mysql數據
brew install logstash
mysql-connector 在phpstorm目錄下就會有這個文件
/Users/wcc/Library/Preferences/PhpStorm2018.1/jdbc-drivers/MySQL Connector/J/5.1.46/mysql-connector-java-5.1.46.ja
所以這裏我就不安裝了,需要安裝的自行搜索
安裝logstash之後進入logstash的bin目錄執行
logstash-plugin install logstash-input-jdbc
搜索
curl -XGET 'http://localhost:9200/request_log/_search?pretty&q=source:WWW'
使用ElasticSearch
配置同步規則
在bin目錄下新增request_mysql.conf
input {
jdbc {
jdbc_driver_library => "/Users/wcc/Library/Preferences/PhpStorm2018.1/jdbc-drivers/MySQL Connector/J/5.1.46/mysql-connector-java-5.1.46.jar"
jdbc_driver_class => "com.mysql.jdbc.Driver"
jdbc_connection_string => "jdbc:mysql://localhost:3306/test?characterEncoding=UTF-8&useSSL=false"
jdbc_user => "root"
jdbc_password => "root"
statement => "SELECT * FROM pre_request_logs_20180524 where update_time > :sql_last_value"
jdbc_paging_enabled => "true"
jdbc_page_size => "50000"
schedule => "* * * * *"
}
}
filter {
json {
source => "message"
remove_field => ["message"]
}
}
output {
stdout {
codec => rubydebug
}
elasticsearch {
hosts => "localhost"
index => "request_log"
}
}
注意statement對於的sql語句就是要同步數據時執行的sql
update_time > :sql_last_value代表每次同步新增的數據,只有就不會導出重複同步數據
執行配置文件
logstash -f request_mysql.conf
每隔一分鐘就會執行一次sql用來同步數據
查看所有索引
curl 'localhost:9200/_cat/indices?v'
在PHP中使用
下載elasticsearch的php擴展
composer.json文件中新增
{
"require": {
"elasticsearch/elasticsearch": "~6.0",
"monolog/monolog": "~1.0"
}
}
composer update
文件目錄如下
先試試搜索功能
搜索source=WEB的所有行
use Elasticsearch\ClientBuilder;
require '../vendor/autoload.php';
$client = ClientBuilder::create()
->build();
$params = [
'index' => 'request_log',
'body' => [
'query' => [
'match' => [
'source' => 'WEB'
]
]
]
];
$response = $client->search($params);
print_r($response);
total:搜索到的行數
hits:搜索到數據的具體內容