akupriyanovhse

BERT Tone

Apr 16th, 2026 (edited)
77
0
Never
Not a member of Pastebin yet? Sign Up, it unlocks many cool features!
Python 2.47 KB | None | 0 0
  1. import os
  2. from transformers import pipeline, AutoTokenizer, AutoModelForSequenceClassification
  3.  
  4. # ══════════════════════════════════════════════
  5. # НАСТРОЙКИ
  6. # ══════════════════════════════════════════════
  7. MODEL_NAME = "blanchefort/rubert-base-cased-sentiment"   # тональность: POSITIVE / NEGATIVE / NEUTRAL
  8. MODELS_DIR = "models"
  9.  
  10. # ══════════════════════════════════════════════
  11. # Загрузка модели: с диска или из интернета
  12. # ══════════════════════════════════════════════
  13. local_path = os.path.join(MODELS_DIR, MODEL_NAME.replace("/", "_"))
  14.  
  15. if os.path.exists(local_path):
  16.     print(f"✓ Модель найдена на диске: {local_path}")
  17. else:
  18.     print(f"⏳ Модель не найдена на диске.")
  19.     print(f"   Скачиваю «{MODEL_NAME}» с HuggingFace...")
  20.     print(f"   Это может занять несколько минут при первом запуске.\n")
  21.     tokenizer = AutoTokenizer.from_pretrained(MODEL_NAME)
  22.     model = AutoModelForSequenceClassification.from_pretrained(MODEL_NAME)
  23.     os.makedirs(local_path, exist_ok=True)
  24.     tokenizer.save_pretrained(local_path)
  25.     model.save_pretrained(local_path)
  26.     print(f"✓ Модель сохранена в: {local_path}\n")
  27.  
  28. classifier = pipeline("sentiment-analysis", model=local_path)
  29.  
  30. # ══════════════════════════════════════════════
  31. # Анализ тональности
  32. # ══════════════════════════════════════════════
  33. texts = [
  34.     "Отличный фильм, рекомендую всем!",
  35.     "Скучно и неинтересно, зря потратил время.",
  36.     "Нормальный продукт, ничего особенного.",
  37.     "Жаль, что фильм закончился. Смотрел бы и смотрел",
  38. ]
  39.  
  40. for t in texts:
  41.     res = classifier(t)[0]
  42.     print(f"{res['label']:>10}  {res['score']:.0%}  ← {t[:45]}")
Tags: bert
Advertisement
Add Comment
Please, Sign In to add comment