私のブックマーク
ブックマークを追加
ブックマークを削除検索結果の折りたたみ
フィールド値に基づいて検索結果を折りたたむには、collapseパラメータを使用できます。折りたたみは、各折りたたみキーごとに上位のソートされたドキュメントのみを選択することによって行われます。
たとえば、次の検索はuser.idで結果を折りたたみ、http.response.bytesでソートします。
Python
resp = client.search(index="my-index-000001",query={"match": {"message": "GET /search"}},collapse={"field": "user.id"},sort=[{"http.response.bytes": {"order": "desc"}}],from_=0,)print(resp)
Js
const response = await client.search({index: "my-index-000001",query: {match: {message: "GET /search",},},collapse: {field: "user.id",},sort: [{"http.response.bytes": {order: "desc",},},],from: 0,});console.log(response);
コンソール
GET my-index-000001/_search{"query": {"match": {"message": "GET /search"}},"collapse": {"field": "user.id"},"sort": [{"http.response.bytes": {"order": "desc"}}],"from": 0}
user.idフィールドを使用して結果セットを折りたたむ |
|
http.response.bytesで結果をソートする |
|
| 最初の折りたたまれた結果のオフセットを定義する |
レスポンス内のヒットの総数は、折りたたみなしで一致するドキュメントの数を示します。異なるグループの総数は不明です。
折りたたみに使用されるフィールドは、単一値のkeywordまたはnumericフィールドで、doc_valuesが有効になっている必要があります。
折りたたみは上位のヒットのみに適用され、集計には影響しません。
折りたたみ結果の展開
inner hitsオプションを使用して、各折りたたまれた上位ヒットを展開することも可能です。
Python
resp = client.search(index="my-index-000001",query={"match": {"message": "GET /search"}},collapse={"field": "user.id","inner_hits": {"name": "most_recent","size": 5,"sort": [{"@timestamp": "desc"}]},"max_concurrent_group_searches": 4},sort=[{"http.response.bytes": {"order": "desc"}}],)print(resp)
Js
const response = await client.search({index: "my-index-000001",query: {match: {message: "GET /search",},},collapse: {field: "user.id",inner_hits: {name: "most_recent",size: 5,sort: [{"@timestamp": "desc",},],},max_concurrent_group_searches: 4,},sort: [{"http.response.bytes": {order: "desc",},},],});console.log(response);
コンソール
GET /my-index-000001/_search{"query": {"match": {"message": "GET /search"}},"collapse": {"field": "user.id","inner_hits": {"name": "most_recent","size": 5,"sort": [ { "@timestamp": "desc" } ]},"max_concurrent_group_searches": 4},"sort": [{"http.response.bytes": {"order": "desc"}}]}
user.idフィールドを使用して結果セットを折りたたむ |
|
| レスポンス内のインナーヒットセクションに使用される名前 | |
各折りたたみキーごとに取得するinner_hitsの数 |
|
| 各グループ内のドキュメントをソートする方法 | |
各グループごとにinner_hitsを取得するために許可される同時リクエストの数 |
サポートされているオプションの完全なリストとレスポンスの形式については、インナーヒットを参照してください。
各折りたたまれたヒットに対して複数のinner hitsをリクエストすることも可能です。これは、折りたたまれたヒットの複数の表現を取得したい場合に便利です。
Python
resp = client.search(index="my-index-000001",query={"match": {"message": "GET /search"}},collapse={"field": "user.id","inner_hits": [{"name": "largest_responses","size": 3,"sort": [{"http.response.bytes": {"order": "desc"}}]},{"name": "most_recent","size": 3,"sort": [{"@timestamp": {"order": "desc"}}]}]},sort=["http.response.bytes"],)print(resp)
Js
const response = await client.search({index: "my-index-000001",query: {match: {message: "GET /search",},},collapse: {field: "user.id",inner_hits: [{name: "largest_responses",size: 3,sort: [{"http.response.bytes": {order: "desc",},},],},{name: "most_recent",size: 3,sort: [{"@timestamp": {order: "desc",},},],},],},sort: ["http.response.bytes"],});console.log(response);
コンソール
GET /my-index-000001/_search{"query": {"match": {"message": "GET /search"}},"collapse": {"field": "user.id","inner_hits": [{"name": "largest_responses","size": 3,"sort": [{"http.response.bytes": {"order": "desc"}}]},{"name": "most_recent","size": 3,"sort": [{"@timestamp": {"order": "desc"}}]}]},"sort": ["http.response.bytes"]}
user.idフィールドを使用して結果セットを折りたたむ |
|
| ユーザーのために3つの最大HTTPレスポンスを返す | |
| ユーザーのために3つの最新のHTTPレスポンスを返す |
グループの展開は、レスポンスで返された各折りたたまれたヒットに対してinner_hitリクエストごとに追加のクエリを送信することによって行われます。グループやinner_hitリクエストが多すぎると、検索が大幅に遅くなる可能性があります。
[`````collapse`````]は[スクロール](238327401f76c2ac.md#scroll-search-results)と併用することはできません。## search_afterによる折りたたみフィールドの折りたたみは、[`````search_after`````](238327401f76c2ac.md#search-after)パラメータと一緒に使用できます。`````search_after`````を使用するのは、同じフィールドでソートおよび折りたたみを行う場合のみサポートされています。二次ソートも許可されていません。たとえば、`````user.id`````で折りたたみおよびソートし、`````search_after`````を使用して結果をページングできます:#### Python``````pythonresp = client.search(index="my-index-000001",query={"match": {"message": "GET /search"}},collapse={"field": "user.id"},sort=["user.id"],search_after=["dd5ce1ad"],)print(resp)`
Js
const response = await client.search({index: "my-index-000001",query: {match: {message: "GET /search",},},collapse: {field: "user.id",},sort: ["user.id"],search_after: ["dd5ce1ad"],});console.log(response);
コンソール
GET /my-index-000001/_search{"query": {"match": {"message": "GET /search"}},"collapse": {"field": "user.id"},"sort": [ "user.id" ],"search_after": ["dd5ce1ad"]}
折りたたみ結果の再スコアリング
rescore検索パラメータとともにフィールドの折りたたみを使用できます。再スコアラーは、折りたたみフィールドごとの上位ランクのドキュメントに対して各シャードで実行されます。信頼できる順序を維持するために、同じ折りたたみフィールド値を共有するドキュメントを1つのシャードにクラスタリングすることをお勧めします。これは、インデックス作成時に折りたたみフィールド値をルーティングキーとして割り当てることによって実現されます:
Python
resp = client.index(index="my-index-000001",routing="xyz",document={"@timestamp": "2099-11-15T13:12:00","message": "You know for search!","user.id": "xyz"},)print(resp)
Js
const response = await client.index({index: "my-index-000001",routing: "xyz",document: {"@timestamp": "2099-11-15T13:12:00",message: "You know for search!","user.id": "xyz",},});console.log(response);
コンソール
POST /my-index-000001/_doc?routing=xyz{"@timestamp": "2099-11-15T13:12:00","message": "You know for search!","user.id": "xyz"}
折りたたみフィールド値でルーティングを割り当てる(user.id)。 |
これにより、折りたたみキーごとに1つの上位ドキュメントのみがグローバルに再スコアリングされることが保証されます。
次のリクエストは、user.idフィールドでフィールドの折りたたみを利用し、次にクエリ再スコアラーで上位グループを再スコアリングします:
Python
resp = client.search(index="my-index-000001",query={"match": {"message": "you know for search"}},collapse={"field": "user.id"},rescore={"window_size": 50,"query": {"rescore_query": {"match_phrase": {"message": "you know for search"}},"query_weight": 0.3,"rescore_query_weight": 1.4}},)print(resp)
Js
const response = await client.search({index: "my-index-000001",query: {match: {message: "you know for search",},},collapse: {field: "user.id",},rescore: {window_size: 50,query: {rescore_query: {match_phrase: {message: "you know for search",},},query_weight: 0.3,rescore_query_weight: 1.4,},},});console.log(response);
コンソール
GET /my-index-000001/_search{"query": {"match": {"message": "you know for search"}},"collapse": {"field": "user.id"},"rescore" : {"window_size" : 50,"query" : {"rescore_query" : {"match_phrase": {"message": "you know for search"}},"query_weight" : 0.3,"rescore_query_weight" : 1.4}}}
再スコアラーはinner hitsには適用されません。
第二レベルの折りたたみ
第二レベルの折りたたみもサポートされており、inner_hitsに適用されます。
たとえば、次の検索はgeo.country_nameで結果を折りたたみます。各geo.country_name内で、インナーヒットはuser.idで折りたたまれます。
第二レベルの折りたたみではinner_hitsは許可されません。
Python
resp = client.search(index="my-index-000001",query={"match": {"message": "GET /search"}},collapse={"field": "geo.country_name","inner_hits": {"name": "by_location","collapse": {"field": "user.id"},"size": 3}},)print(resp)
Js
const response = await client.search({index: "my-index-000001",query: {match: {message: "GET /search",},},collapse: {field: "geo.country_name",inner_hits: {name: "by_location",collapse: {field: "user.id",},size: 3,},},});console.log(response);
コンソール
GET /my-index-000001/_search{"query": {"match": {"message": "GET /search"}},"collapse": {"field": "geo.country_name","inner_hits": {"name": "by_location","collapse": { "field": "user.id" },"size": 3}}}
コンソール-結果
{"hits" : {"hits" : [{"_index" : "my-index-000001","_id" : "oX9uXXoB0da05OCR3adK","_score" : 0.5753642,"_source" : {"@timestamp" : "2099-11-15T14:12:12","geo" : {"country_name" : "Amsterdam"},"http" : {"request" : {"method" : "get"},"response" : {"bytes" : 1070000,"status_code" : 200},"version" : "1.1"},"message" : "GET /search HTTP/1.1 200 1070000","source" : {"ip" : "127.0.0.1"},"user" : {"id" : "kimchy"}},"fields" : {"geo.country_name" : ["Amsterdam"]},"inner_hits" : {"by_location" : {"hits" : {"total" : {"value" : 1,"relation" : "eq"},"max_score" : 0.5753642,"hits" : [{"_index" : "my-index-000001","_id" : "oX9uXXoB0da05OCR3adK","_score" : 0.5753642,"_source" : {"@timestamp" : "2099-11-15T14:12:12","geo" : {"country_name" : "Amsterdam"},"http" : {"request" : {"method" : "get"},"response" : {"bytes" : 1070000,"status_code" : 200},"version" : "1.1"},"message" : "GET /search HTTP/1.1 200 1070000","source" : {"ip" : "127.0.0.1"},"user" : {"id" : "kimchy"}},"fields" : {"user.id" : ["kimchy"]}}]}}}}]}}
スコアの追跡
collapseがフィールドでsortと共に使用されると、スコアは計算されません。track_scoresをtrueに設定すると、Elasticsearchにスコアを計算して追跡するよう指示します。
