import snowballstemmer
import re

def stemp(text):

  with open('/Users/ekaterinadubcova/Documents/2.txt', 'a') as file:
   text = open('/Users/ekaterinadubcova/Documents/2.txt', 'w')
  text = text.lower() # приведение в lowercase,

  text = re.sub( r'https?://[\S]+', ' url ', text) # замена интернет ссылок
  text = re.sub( r'[\w\./]+\.[a-z]+', ' url ', text)

  text = re.sub( r'\d+[-/\.]\d+[-/\.]\d+', ' date ', text) # замена даты и времени
  text = re.sub( r'\d+ ?гг?', ' date ', text)
  text = re.sub( r'\d+:\d+(:\d+)?', ' time ', text)
  text = re.sub( r'<[^>]*>', ' ', text) # удаление html тегов
  text = re.sub( r'[\W]+', ' ', text ) # удаление лишних символов

  stemmer = snowballstemmer.stemmer('russian');
  text = ' '.join( stemmer.stemWords( text.split() ) )

  stw = ['в', 'по', 'на', 'из', 'и', 'или', 'не', 'но', 'за', 'над', 'под', 'то','a', 'at', 'on', 'of', 'and', 'or', 'in', 'for', 'at']
  remove = r'\b('+'|'.join(stw)+')\b'
  text = re.sub(remove,' ', text)

  text = re.sub( r'\b\w\b', ' ', text ) # удаление отдельно стоящих букв

  text = re.sub( r'\b\d+\b', ' digit ', text ) # замена цифр

  file.write('input')
  text.close()

  return text