ストップアナライザー

stop アナライザーは simple アナライザー と同じですが、ストップワードを削除するサポートが追加されています。デフォルトでは _english_ ストップワードを使用します。

例の出力

Python

  1. resp = client.indices.analyze(
  2. analyzer="stop",
  3. text="The 2 QUICK Brown-Foxes jumped over the lazy dog's bone.",
  4. )
  5. print(resp)

Ruby

  1. response = client.indices.analyze(
  2. body: {
  3. analyzer: 'stop',
  4. text: "The 2 QUICK Brown-Foxes jumped over the lazy dog's bone."
  5. }
  6. )
  7. puts response

Js

  1. const response = await client.indices.analyze({
  2. analyzer: "stop",
  3. text: "The 2 QUICK Brown-Foxes jumped over the lazy dog's bone.",
  4. });
  5. console.log(response);

コンソール

  1. POST _analyze
  2. {
  3. "analyzer": "stop",
  4. "text": "The 2 QUICK Brown-Foxes jumped over the lazy dog's bone."
  5. }

上記の文は次の用語を生成します:

テキスト

  1. [ quick, brown, foxes, jumped, over, lazy, dog, s, bone ]

設定

stop アナライザーは次のパラメーターを受け入れます:

stopwords _english_ のような事前定義されたストップワードリストまたはストップワードのリストを含む配列。デフォルトは _english_ です。
stopwords_path ストップワードを含むファイルへのパス。このパスは Elasticsearch config ディレクトリに対して相対的です。

ストップワードの設定に関する詳細は ストップトークンフィルター を参照してください。

例の設定

この例では、stop アナライザーを使用して指定された単語のリストをストップワードとして設定します:

Python

  1. resp = client.indices.create(
  2. index="my-index-000001",
  3. settings={
  4. "analysis": {
  5. "analyzer": {
  6. "my_stop_analyzer": {
  7. "type": "stop",
  8. "stopwords": [
  9. "the",
  10. "over"
  11. ]
  12. }
  13. }
  14. }
  15. },
  16. )
  17. print(resp)
  18. resp1 = client.indices.analyze(
  19. index="my-index-000001",
  20. analyzer="my_stop_analyzer",
  21. text="The 2 QUICK Brown-Foxes jumped over the lazy dog's bone.",
  22. )
  23. print(resp1)

Ruby

  1. response = client.indices.create(
  2. index: 'my-index-000001',
  3. body: {
  4. settings: {
  5. analysis: {
  6. analyzer: {
  7. my_stop_analyzer: {
  8. type: 'stop',
  9. stopwords: [
  10. 'the',
  11. 'over'
  12. ]
  13. }
  14. }
  15. }
  16. }
  17. }
  18. )
  19. puts response
  20. response = client.indices.analyze(
  21. index: 'my-index-000001',
  22. body: {
  23. analyzer: 'my_stop_analyzer',
  24. text: "The 2 QUICK Brown-Foxes jumped over the lazy dog's bone."
  25. }
  26. )
  27. puts response

Js

  1. const response = await client.indices.create({
  2. index: "my-index-000001",
  3. settings: {
  4. analysis: {
  5. analyzer: {
  6. my_stop_analyzer: {
  7. type: "stop",
  8. stopwords: ["the", "over"],
  9. },
  10. },
  11. },
  12. },
  13. });
  14. console.log(response);
  15. const response1 = await client.indices.analyze({
  16. index: "my-index-000001",
  17. analyzer: "my_stop_analyzer",
  18. text: "The 2 QUICK Brown-Foxes jumped over the lazy dog's bone.",
  19. });
  20. console.log(response1);

コンソール

  1. PUT my-index-000001
  2. {
  3. "settings": {
  4. "analysis": {
  5. "analyzer": {
  6. "my_stop_analyzer": {
  7. "type": "stop",
  8. "stopwords": ["the", "over"]
  9. }
  10. }
  11. }
  12. }
  13. }
  14. POST my-index-000001/_analyze
  15. {
  16. "analyzer": "my_stop_analyzer",
  17. "text": "The 2 QUICK Brown-Foxes jumped over the lazy dog's bone."
  18. }

上記の例は次の用語を生成します:

テキスト

  1. [ quick, brown, foxes, jumped, lazy, dog, s, bone ]

定義

それは次のように構成されています:

stop アナライザーを設定パラメーターを超えてカスタマイズする必要がある場合は、custom アナライザーとして再作成し、通常はトークンフィルターを追加して修正する必要があります。これにより、組み込みの stop アナライザーが再作成され、さらなるカスタマイズの出発点として使用できます:

Python

  1. resp = client.indices.create(
  2. index="stop_example",
  3. settings={
  4. "analysis": {
  5. "filter": {
  6. "english_stop": {
  7. "type": "stop",
  8. "stopwords": "_english_"
  9. }
  10. },
  11. "analyzer": {
  12. "rebuilt_stop": {
  13. "tokenizer": "lowercase",
  14. "filter": [
  15. "english_stop"
  16. ]
  17. }
  18. }
  19. }
  20. },
  21. )
  22. print(resp)

Ruby

  1. response = client.indices.create(
  2. index: 'stop_example',
  3. body: {
  4. settings: {
  5. analysis: {
  6. filter: {
  7. english_stop: {
  8. type: 'stop',
  9. stopwords: '_english_'
  10. }
  11. },
  12. analyzer: {
  13. rebuilt_stop: {
  14. tokenizer: 'lowercase',
  15. filter: [
  16. 'english_stop'
  17. ]
  18. }
  19. }
  20. }
  21. }
  22. }
  23. )
  24. puts response

Js

  1. const response = await client.indices.create({
  2. index: "stop_example",
  3. settings: {
  4. analysis: {
  5. filter: {
  6. english_stop: {
  7. type: "stop",
  8. stopwords: "_english_",
  9. },
  10. },
  11. analyzer: {
  12. rebuilt_stop: {
  13. tokenizer: "lowercase",
  14. filter: ["english_stop"],
  15. },
  16. },
  17. },
  18. },
  19. });
  20. console.log(response);

コンソール

  1. PUT /stop_example
  2. {
  3. "settings": {
  4. "analysis": {
  5. "filter": {
  6. "english_stop": {
  7. "type": "stop",
  8. "stopwords": "_english_"
  9. }
  10. },
  11. "analyzer": {
  12. "rebuilt_stop": {
  13. "tokenizer": "lowercase",
  14. "filter": [
  15. "english_stop"
  16. ]
  17. }
  18. }
  19. }
  20. }
  21. }
デフォルトのストップワードは stopwords
または stopwords_path パラメーターで上書きできます。
english_stop の後に任意のトークンフィルターを追加します。