Tuesday, May 1, 2018

Elastic Search Example: Part 3


Donghuas-MacBook-Air:elasticsearch-6.2.4 donghua$ curl -XGET  -u elastic:elastic 'localhost:9200/_cat/allocation?help'
shards       | s              | number of shards on node      
disk.indices | di,diskIndices | disk used by ES indices       
disk.used    | du,diskUsed    | disk used (total, not just ES)
disk.avail   | da,diskAvail   | disk available                
disk.total   | dt,diskTotal   | total capacity of all volumes 
disk.percent | dp,diskPercent | percent disk used             
host         | h              | host of node                  
ip           |                | ip of node                    
node         | n              | name of node                  

Donghuas-MacBook-Air:elasticsearch-6.2.4 donghua$ curl -XGET  -u elastic:elastic 'localhost:9200/_cat/allocation'
11 8.8mb 52gb 60.7gb 112.8gb 46 127.0.0.1 127.0.0.1 0rArjNg
 5                                                  UNASSIGNED

Donghuas-MacBook-Air:elasticsearch-6.2.4 donghua$ curl -XGET  -u elastic:elastic 'localhost:9200/_cat/allocation?v&h=host,disk.total,disk.avail'
host      disk.total disk.avail
127.0.0.1    112.8gb     60.7gb
                               
Donghuas-MacBook-Air:elasticsearch-6.2.4 donghua$ curl -XGET  -u elastic:elastic 'localhost:9200/_cat/allocation?v'
shards disk.indices disk.used disk.avail disk.total disk.percent host      ip        node
    11        8.8mb      52gb     60.7gb    112.8gb           46 127.0.0.1 127.0.0.1 0rArjNg
     5                                                                               UNASSIGNED
Donghuas-MacBook-Air:elasticsearch-6.2.4 donghua$ curl -XGET  -u elastic:elastic 'localhost:9200/_cat/shards?v'
index                         shard prirep state      docs  store ip        node
.watcher-history-7-2018.04.30 0     p      STARTED     910    1mb 127.0.0.1 0rArjNg
.watches                      0     p      STARTED       6 33.2kb 127.0.0.1 0rArjNg
.security-6                   0     p      STARTED       3  9.8kb 127.0.0.1 0rArjNg
.monitoring-es-6-2018.04.30   0     p      STARTED    8123  7.8mb 127.0.0.1 0rArjNg
.monitoring-alerts-6          0     p      STARTED       3   18kb 127.0.0.1 0rArjNg
blogs                         3     p      STARTED       1  5.2kb 127.0.0.1 0rArjNg
blogs                         3     r      UNASSIGNED                       
blogs                         2     p      STARTED       1  5.3kb 127.0.0.1 0rArjNg
blogs                         2     r      UNASSIGNED                       
blogs                         1     p      STARTED       1  5.3kb 127.0.0.1 0rArjNg
blogs                         1     r      UNASSIGNED                       
blogs                         4     p      STARTED       0   230b 127.0.0.1 0rArjNg
blogs                         4     r      UNASSIGNED                       
blogs                         0     p      STARTED       0   230b 127.0.0.1 0rArjNg
blogs                         0     r      UNASSIGNED                       
.triggered_watches            0     p      STARTED       0 63.2kb 127.0.0.1 0rArjNg

Donghuas-MacBook-Air:elasticsearch-6.2.4 donghua$ curl -XGET  -u elastic:elastic 'localhost:9200/_cat/shards/blogs/?v'
index shard prirep state      docs store ip        node
blogs 3     p      STARTED       1 5.2kb 127.0.0.1 0rArjNg
blogs 3     r      UNASSIGNED                      
blogs 2     p      STARTED       1 5.3kb 127.0.0.1 0rArjNg
blogs 2     r      UNASSIGNED                      
blogs 1     p      STARTED       1 5.3kb 127.0.0.1 0rArjNg
blogs 1     r      UNASSIGNED                      
blogs 4     p      STARTED       0  230b 127.0.0.1 0rArjNg
blogs 4     r      UNASSIGNED                      
blogs 0     p      STARTED       0  230b 127.0.0.1 0rArjNg
blogs 0     r      UNASSIGNED                      

Donghuas-MacBook-Air:elasticsearch-6.2.4 donghua$ curl -XGET  -u elastic:elastic 'localhost:9200/_cat/master?v'
id                     host      ip        node
0rArjNgoSY2LaVL62XU5rQ 127.0.0.1 127.0.0.1 0rArjNg
Donghuas-MacBook-Air:elasticsearch-6.2.4 donghua$ 
Donghuas-MacBook-Air:elasticsearch-6.2.4 donghua$ curl -XGET  -u elastic:elastic 'localhost:9200/_cat/nodes?v'
ip        heap.percent ram.percent cpu load_1m load_5m load_15m node.role master name
127.0.0.1           38         100  34    2.95                  mdi       *      0rArjNg

Donghuas-MacBook-Air:elasticsearch-6.2.4 donghua$ curl -XGET  -u elastic:elastic 'localhost:9200/_cat/indices?v'
health status index                         uuid                   pri rep docs.count docs.deleted store.size pri.store.size
green  open   .triggered_watches            6MzxbYxdQ_C0njT4053-TA   1   0          0            0     63.2kb         63.2kb
green  open   .monitoring-alerts-6          KWHtzA78S2CK4wTYNer1zA   1   0          4            0     24.5kb         24.5kb
green  open   .monitoring-es-6-2018.04.30   ynwB-RSOStO_4f7wAFfVVg   1   0       8145           16      7.5mb          7.5mb
green  open   .watches                      GPsfCDzLSUydWzKEFfA4-Q   1   0          6            0     75.2kb         75.2kb
green  open   .security-6                   ax9wqeX6S3qNK8RzapGfwA   1   0          3            0      9.8kb          9.8kb
green  open   .watcher-history-7-2018.04.30 ov_uuro6QuKD4M5q1VdvBg   1   0        920            0      1.1mb          1.1mb
yellow open   blogs                         NWKFGM2GQe-fS481ZI7EuA   5   1          3            0     16.4kb         16.4kb

Donghuas-MacBook-Air:elasticsearch-6.2.4 donghua$ curl -XGET  -u elastic:elastic 'localhost:9200/_cat/segments?v'
index                         shard prirep ip        segment generation docs.count docs.deleted   size size.memory committed searchable version compound
.triggered_watches            0     p      127.0.0.1 _2               2        474          474 62.9kb           0 true      false      7.2.1   true
.monitoring-es-6-2018.04.30   0     p      127.0.0.1 _nw            860       7953           16  3.5mb           0 true      false      7.2.1   false
.monitoring-es-6-2018.04.30   0     p      127.0.0.1 _nx            861         27           16 57.1kb           0 true      false      7.2.1   true
.monitoring-es-6-2018.04.30   0     p      127.0.0.1 _ny            862         27           16 57.2kb           0 true      false      7.2.1   true
.monitoring-es-6-2018.04.30   0     p      127.0.0.1 _nz            863         27           16 57.2kb           0 true      false      7.2.1   true
.monitoring-es-6-2018.04.30   0     p      127.0.0.1 _o0            864         27           16 57.1kb           0 true      false      7.2.1   true
.monitoring-es-6-2018.04.30   0     p      127.0.0.1 _o1            865         27           16 57.2kb           0 true      false      7.2.1   true
.monitoring-es-6-2018.04.30   0     p      127.0.0.1 _o2            866         27           16 57.1kb           0 true      false      7.2.1   true
.monitoring-es-6-2018.04.30   0     p      127.0.0.1 _o3            867         27           16 57.1kb           0 true      false      7.2.1   true
.monitoring-es-6-2018.04.30   0     p      127.0.0.1 _o4            868         27            0   57kb           0 true      false      7.2.1   true
.monitoring-es-6-2018.04.30   0     p      127.0.0.1 _og            880       8118           16  3.5mb       21904 false     true       7.2.1   false
.monitoring-es-6-2018.04.30   0     p      127.0.0.1 _oh            881         11           16 56.7kb        6896 false     true       7.2.1   true
.monitoring-es-6-2018.04.30   0     p      127.0.0.1 _oi            882         27            0 56.7kb        6896 false     true       7.2.1   true
.watcher-history-7-2018.04.30 0     p      127.0.0.1 _b4            400        910            0    1mb       22205 true      true       7.2.1   false
.watcher-history-7-2018.04.30 0     p      127.0.0.1 _b5            401          1            0 22.5kb       11958 false     true       7.2.1   true
.watcher-history-7-2018.04.30 0     p      127.0.0.1 _b6            402          1            0 22.6kb       11958 false     true       7.2.1   true
.watcher-history-7-2018.04.30 0     p      127.0.0.1 _b7            403          4            0 33.4kb       17085 false     true       7.2.1   true
.watcher-history-7-2018.04.30 0     p      127.0.0.1 _b8            404          4            0 32.6kb       16899 false     true       7.2.1   true
.monitoring-alerts-6          0     p      127.0.0.1 _0               0          1            0  5.8kb        2153 true      true       7.2.1   true
.monitoring-alerts-6          0     p      127.0.0.1 _1               1          1            0  5.8kb        2153 true      true       7.2.1   true
.monitoring-alerts-6          0     p      127.0.0.1 _21             73          1            0  5.9kb           0 true      false      7.2.1   true
.monitoring-alerts-6          0     p      127.0.0.1 _22             74          2            0  6.5kb        2155 false     true       7.2.1   true
blogs                         1     p      127.0.0.1 _0               0          1            0    5kb        2726 true      true       7.2.1   true
blogs                         2     p      127.0.0.1 _0               0          1            0  4.9kb        2726 true      true       7.2.1   true
blogs                         3     p      127.0.0.1 _2               2          1            0  4.9kb        2726 true      true       7.2.1   true
.watches                      0     p      127.0.0.1 _8w            320          3            0   12kb           0 true      false      7.2.1   true
.watches                      0     p      127.0.0.1 _8x            321          1            0  9.6kb           0 true      false      7.2.1   true
.watches                      0     p      127.0.0.1 _8y            322          2            0 11.2kb           0 true      false      7.2.1   true
.watches                      0     p      127.0.0.1 _8z            323          1            0  9.7kb        3757 false     true       7.2.1   true
.watches                      0     p      127.0.0.1 _90            324          2            0 11.4kb        3757 false     true       7.2.1   true
.watches                      0     p      127.0.0.1 _91            325          1            0  9.6kb        3757 false     true       7.2.1   true
.watches                      0     p      127.0.0.1 _92            326          2            0 11.2kb        3943 false     true       7.2.1   true
.security-6                   0     p      127.0.0.1 _0               0          1            0  3.1kb        1120 true      true       7.2.1   true
.security-6                   0     p      127.0.0.1 _1               1          1            0  3.1kb        1120 true      true       7.2.1   true
.security-6                   0     p      127.0.0.1 _3               3          1            0  3.1kb        1120 true      true       7.2.1   true

Donghuas-MacBook-Air:elasticsearch-6.2.4 donghua$ curl -XGET  -u elastic:elastic 'localhost:9200/_cat/segments/blogs?v'
index shard prirep ip        segment generation docs.count docs.deleted  size size.memory committed searchable version compound
blogs 1     p      127.0.0.1 _0               0          1            0   5kb        2726 true      true       7.2.1   true
blogs 2     p      127.0.0.1 _0               0          1            0 4.9kb        2726 true      true       7.2.1   true
blogs 3     p      127.0.0.1 _2               2          1            0 4.9kb        2726 true      true       7.2.1   true

Donghuas-MacBook-Air:elasticsearch-6.2.4 donghua$ curl -XGET  -u elastic:elastic 'localhost:9200/_cat/count?v'
epoch      timestamp count
1525132485 07:54:45  8951

Donghuas-MacBook-Air:elasticsearch-6.2.4 donghua$ curl -XGET  -u elastic:elastic 'localhost:9200/_cat/count/blogs?v'
epoch      timestamp count
1525132491 07:54:51  3

Donghuas-MacBook-Air:elasticsearch-6.2.4 donghua$ curl -XGET  -u elastic:elastic 'localhost:9200/_cat/recovery?v'
index                         shard time  type           stage source_host source_node target_host target_node repository snapshot files files_recovered files_percent files_total bytes bytes_recovered bytes_percent bytes_total translog_ops translog_ops_recovered translog_ops_percent
.triggered_watches            0     472ms existing_store done  n/a         n/a         127.0.0.1   0rArjNg     n/a        n/a      0     0               100.0%        5           0     0               100.0%        64788       0            0                      100.0%
.monitoring-es-6-2018.04.30   0     381ms existing_store done  n/a         n/a         127.0.0.1   0rArjNg     n/a        n/a      0     0               100.0%        44          0     0               100.0%        4176166     0            0                      100.0%
.watcher-history-7-2018.04.30 0     180ms existing_store done  n/a         n/a         127.0.0.1   0rArjNg     n/a        n/a      0     0               100.0%        15          0     0               100.0%        1082799     0            0                      100.0%
.monitoring-alerts-6          0     330ms existing_store done  n/a         n/a         127.0.0.1   0rArjNg     n/a        n/a      0     0               100.0%        10          0     0               100.0%        18450       0            0                      100.0%
blogs                         0     121ms existing_store done  n/a         n/a         127.0.0.1   0rArjNg     n/a        n/a      0     0               100.0%        1           0     0               100.0%        230         0            0                      100.0%
blogs                         1     179ms existing_store done  n/a         n/a         127.0.0.1   0rArjNg     n/a        n/a      0     0               100.0%        4           0     0               100.0%        5524        0            0                      100.0%
blogs                         2     193ms existing_store done  n/a         n/a         127.0.0.1   0rArjNg     n/a        n/a      0     0               100.0%        4           0     0               100.0%        5435        0            0                      100.0%
blogs                         3     198ms existing_store done  n/a         n/a         127.0.0.1   0rArjNg     n/a        n/a      0     0               100.0%        4           0     0               100.0%        5394        0            0                      100.0%
blogs                         4     538ms existing_store done  n/a         n/a         127.0.0.1   0rArjNg     n/a        n/a      0     0               100.0%        1           0     0               100.0%        230         0            0                      100.0%
.watches                      0     600ms existing_store done  n/a         n/a         127.0.0.1   0rArjNg     n/a        n/a      0     0               100.0%        10          0     0               100.0%        34088       0            0                      100.0%
.security-6                   0     543ms existing_store done  n/a         n/a         127.0.0.1   0rArjNg     n/a        n/a      0     0               100.0%        10          0     0               100.0%        10095       0            0                      100.0%

Donghuas-MacBook-Air:elasticsearch-6.2.4 donghua$ curl -XGET  -u elastic:elastic 'localhost:9200/_cat/recovery/blogs?v'
index shard time  type           stage source_host source_node target_host target_node repository snapshot files files_recovered files_percent files_total bytes bytes_recovered bytes_percent bytes_total translog_ops translog_ops_recovered translog_ops_percent
blogs 0     121ms existing_store done  n/a         n/a         127.0.0.1   0rArjNg     n/a        n/a      0     0               100.0%        1           0     0               100.0%        230         0            0                      100.0%
blogs 1     179ms existing_store done  n/a         n/a         127.0.0.1   0rArjNg     n/a        n/a      0     0               100.0%        4           0     0               100.0%        5524        0            0                      100.0%
blogs 2     193ms existing_store done  n/a         n/a         127.0.0.1   0rArjNg     n/a        n/a      0     0               100.0%        4           0     0               100.0%        5435        0            0                      100.0%
blogs 3     198ms existing_store done  n/a         n/a         127.0.0.1   0rArjNg     n/a        n/a      0     0               100.0%        4           0     0               100.0%        5394        0            0                      100.0%
blogs 4     538ms existing_store done  n/a         n/a         127.0.0.1   0rArjNg     n/a        n/a      0     0               100.0%        1           0     0               100.0%        230         0            0                      100.0%

Donghuas-MacBook-Air:elasticsearch-6.2.4 donghua$ curl -XGET  -u elastic:elastic 'localhost:9200/_cat/health?v'
epoch      timestamp cluster       status node.total node.data shards pri relo init unassign pending_tasks max_task_wait_time active_shards_percent
1525132506 07:55:06  elasticsearch yellow          1         1     11  11    0    0        5             0                  -                 68.8%

Donghuas-MacBook-Air:elasticsearch-6.2.4 donghua$ curl -XGET  -u elastic:elastic 'localhost:9200/_cat/pending_tasks?v'
insertOrder timeInQueue priority source

Donghuas-MacBook-Air:elasticsearch-6.2.4 donghua$ curl -XGET  -u elastic:elastic 'localhost:9200/_cat/aliases?v'
alias     index       filter routing.index routing.search
.security .security-6 -      -             -

Donghuas-MacBook-Air:elasticsearch-6.2.4 donghua$ curl -XGET  -u elastic:elastic 'localhost:9200/_cat/thread_pool?v'
node_name name                active queue rejected
0rArjNg   bulk                     0     0        0
0rArjNg   fetch_shard_started      0     0        0
0rArjNg   fetch_shard_store        0     0        0
0rArjNg   flush                    0     0        0
0rArjNg   force_merge              0     0        0
0rArjNg   generic                  0     0        0
0rArjNg   get                      0     0        0
0rArjNg   index                    0     0        0
0rArjNg   listener                 0     0        0
0rArjNg   management               1     0        0
0rArjNg   ml_autodetect            0     0        0
0rArjNg   ml_datafeed              0     0        0
0rArjNg   ml_utility               0     0        0
0rArjNg   refresh                  0     0        0
0rArjNg   search                   0     0        0
0rArjNg   security-token-key       0     0        0
0rArjNg   snapshot                 0     0        0
0rArjNg   warmer                   0     0        0
0rArjNg   watcher                  0     0        0
Donghuas-MacBook-Air:elasticsearch-6.2.4 donghua$ 
Donghuas-MacBook-Air:elasticsearch-6.2.4 donghua$ curl -XGET  -u elastic:elastic 'localhost:9200/_cat/plugins?v'
name    component          version
0rArjNg x-pack-core        6.2.4
0rArjNg x-pack-deprecation 6.2.4
0rArjNg x-pack-graph       6.2.4
0rArjNg x-pack-logstash    6.2.4
0rArjNg x-pack-ml          6.2.4
0rArjNg x-pack-monitoring  6.2.4
0rArjNg x-pack-security    6.2.4
0rArjNg x-pack-upgrade     6.2.4
0rArjNg x-pack-watcher     6.2.4

Donghuas-MacBook-Air:elasticsearch-6.2.4 donghua$ curl -XGET  -u elastic:elastic 'localhost:9200/_cat/fielddata?v'
id host ip node field size