Skip to content

Instantly share code, notes, and snippets.

@andrei15

andrei15/elasticsearch_ru_stemming_and_morphology.py

Forked from svartalf/elasticsearch_ru_stemming_and_morphology.py
Created June 18, 2014 13:43
Show Gist options
  • Save andrei15/aa863d9b7d29cb1d6ed3 to your computer and use it in GitHub Desktop.
Save andrei15/aa863d9b7d29cb1d6ed3 to your computer and use it in GitHub Desktop.
Download ZIP

Revisions

  1. @svartalf svartalf revised this gist Jan 19, 2014. 1 changed file with 1 addition and 1 deletion.
    2 changes: 1 addition & 1 deletion elasticsearch_ru_stemming_and_morphology.py
    View file
    Original file line number Diff line number Diff line change
    @@ -5,7 +5,7 @@
    'ru': {
    'type': 'custom',
    'tokenizer': 'standard',
    "filter": ['lowercase', 'russian_morphology', 'english_morphology', 'ru_stopwords', 'ru_stemming'],
    "filter": ['lowercase', 'russian_morphology', 'english_morphology', 'ru_stopwords'],
    },
    },
    'filter': {
  2. @svartalf svartalf revised this gist Oct 3, 2013. 1 changed file with 2 additions and 3 deletions.
    5 changes: 2 additions & 3 deletions elasticsearch_ru_stemming_and_morphology.py
    View file
    Original file line number Diff line number Diff line change
    @@ -11,12 +11,11 @@
    'filter': {
    'ru_stopwords': {
    'type': 'stop',
    'stopwords':
    u'а,без,более,бы,был,была,были,было,быть,в,вам,вас,весь,во,вот,все,всего,всех,вы,где,да,даже,для,до,его,ее,если,есть,еще,же,за,здесь,и,из,или,им,их,к,как,ко,когда,кто,ли,либо,мне,может,мы,на,надо,наш,не,него,нее,нет,ни,них,но,ну,о,об,однако,он,она,они,оно,от,очень,по,под,при,с,со,так,также,такой,там,те,тем,то,того,тоже,той,только,том,ты,у,уже,хотя,чего,чей,чем,что,чтобы,чье,чья,эта,эти,это,я,a,an,and,are,as,at,be,but,by,for,if,in,into,is,it,no,not,of,on,or,such,that,the,their,then,there,these,they,this,to,was,will,with',
    'stopwords': u'а,без,более,бы,был,была,были,было,быть,в,вам,вас,весь,во,вот,все,всего,всех,вы,где,да,даже,для,до,его,ее,если,есть,еще,же,за,здесь,и,из,или,им,их,к,как,ко,когда,кто,ли,либо,мне,может,мы,на,надо,наш,не,него,нее,нет,ни,них,но,ну,о,об,однако,он,она,они,оно,от,очень,по,под,при,с,со,так,также,такой,там,те,тем,то,того,тоже,той,только,том,ты,у,уже,хотя,чего,чей,чем,что,чтобы,чье,чья,эта,эти,это,я,a,an,and,are,as,at,be,but,by,for,if,in,into,is,it,no,not,of,on,or,such,that,the,their,then,there,these,they,this,to,was,will,with',
    },
    'ru_stemming': {
    'type': 'snowball',
    'languare': 'Russian',
    'language': 'Russian',
    }
    },

  3. @svartalf svartalf created this gist Jan 6, 2013.
    25 changes: 25 additions & 0 deletions elasticsearch_ru_stemming_and_morphology.py
    View file
    Original file line number Diff line number Diff line change
    @@ -0,0 +1,25 @@
    requests.put('http://localhost:9200/site/', data=json.dumps({
    'settings': {
    'analysis': {
    'analyzer': {
    'ru': {
    'type': 'custom',
    'tokenizer': 'standard',
    "filter": ['lowercase', 'russian_morphology', 'english_morphology', 'ru_stopwords', 'ru_stemming'],
    },
    },
    'filter': {
    'ru_stopwords': {
    'type': 'stop',
    'stopwords':
    u'а,без,более,бы,был,была,были,было,быть,в,вам,вас,весь,во,вот,все,всего,всех,вы,где,да,даже,для,до,его,ее,если,есть,еще,же,за,здесь,и,из,или,им,их,к,как,ко,когда,кто,ли,либо,мне,может,мы,на,надо,наш,не,него,нее,нет,ни,них,но,ну,о,об,однако,он,она,они,оно,от,очень,по,под,при,с,со,так,также,такой,там,те,тем,то,того,тоже,той,только,том,ты,у,уже,хотя,чего,чей,чем,что,чтобы,чье,чья,эта,эти,это,я,a,an,and,are,as,at,be,but,by,for,if,in,into,is,it,no,not,of,on,or,such,that,the,their,then,there,these,they,this,to,was,will,with',
    },
    'ru_stemming': {
    'type': 'snowball',
    'languare': 'Russian',
    }
    },

    }
    }
    }))