Praktikum_mf

Задача 1

Dec 14th, 2021
1,702
0
Never
Not a member of Pastebin yet? Sign Up, it unlocks many cool features!
C++ 11.12 KB | None | 0 0
  1. #include <algorithm>
  2. #include <cmath>
  3. #include <iostream>
  4. #include <map>
  5. #include <set>
  6. #include <string>
  7. #include <utility>
  8. #include <vector>
  9.  
  10. using namespace std;
  11.  
  12.  
  13. const int MAX_RESULT_DOCUMENT_COUNT = 5;
  14.  
  15. string ReadLine() {
  16.     string s;
  17.     getline(cin, s);
  18.     return s;
  19. }
  20.  
  21. int ReadLineWithNumber() {
  22.     int result;
  23.     cin >> result;
  24.     ReadLine();
  25.     return result;
  26. }
  27.  
  28. vector<string> SplitIntoWords(const string& text) {
  29.     vector<string> words;
  30.     string word;
  31.     for (const char c : text) {
  32.         if (c == ' ') {
  33.             if (!word.empty()) {
  34.                 words.push_back(word);
  35.                 word.clear();
  36.             }
  37.         } else {
  38.             word += c;
  39.         }
  40.     }
  41.     if (!word.empty()) {
  42.         words.push_back(word);
  43.     }
  44.  
  45.     return words;
  46. }
  47.    
  48. struct Document {
  49.     int id;
  50.     double relevance;
  51.     int rating;
  52. };
  53.  
  54. enum class DocumentStatus {
  55.     ACTUAL,
  56.     IRRELEVANT,
  57.     BANNED,
  58.     REMOVED,
  59. };
  60.  
  61. class SearchServer {
  62. public:
  63.     void SetStopWords(const string& text) {
  64.         for (const string& word : SplitIntoWords(text)) {
  65.             stop_words_.insert(word);
  66.         }
  67.     }    
  68.    
  69.     void AddDocument(int document_id, const string& document, DocumentStatus status, const vector<int>& ratings) {
  70.         const vector<string> words = SplitIntoWordsNoStop(document);
  71.         const double inv_word_count = 1.0 / words.size();
  72.         for (const string& word : words) {
  73.             word_to_document_freqs_[word][document_id] += inv_word_count;
  74.         }
  75.         documents_.emplace(document_id,
  76.             DocumentData{
  77.                 ComputeAverageRating(ratings),
  78.                 status
  79.             });
  80.     }
  81.  
  82.     template <typename DocumentPredicate>
  83.     vector<Document> FindTopDocuments(const string& raw_query, DocumentPredicate document_predicate) const {            
  84.         const Query query = ParseQuery(raw_query);
  85.         auto matched_documents = FindAllDocuments(query, document_predicate);
  86.        
  87.         sort(matched_documents.begin(), matched_documents.end(),
  88.              [](const Document& lhs, const Document& rhs) {
  89.                 if (abs(lhs.relevance - rhs.relevance) < 1e-6) {
  90.                     return lhs.rating > rhs.rating;
  91.                 } else {
  92.                     return lhs.relevance > rhs.relevance;
  93.                 }
  94.              });
  95.         if (matched_documents.size() > MAX_RESULT_DOCUMENT_COUNT) {
  96.             matched_documents.resize(MAX_RESULT_DOCUMENT_COUNT);
  97.         }
  98.         return matched_documents;
  99.     }
  100.  
  101.     vector<Document> FindTopDocuments(const string& raw_query, DocumentStatus status) const {            
  102.         return FindTopDocuments(raw_query, [status](int document_id, DocumentStatus document_status, int rating) { return document_status == status; });
  103.     }
  104.  
  105.     vector<Document> FindTopDocuments(const string& raw_query) const {            
  106.         return FindTopDocuments(raw_query, DocumentStatus::ACTUAL);
  107.     }
  108.  
  109.     int GetDocumentCount() const {
  110.         return documents_.size();
  111.     }
  112.    
  113.     tuple<vector<string>, DocumentStatus> MatchDocument(const string& raw_query, int document_id) const {
  114.         const Query query = ParseQuery(raw_query);
  115.         vector<string> matched_words;
  116.         for (const string& word : query.plus_words) {
  117.             if (word_to_document_freqs_.count(word) == 0) {
  118.                 continue;
  119.             }
  120.             if (word_to_document_freqs_.at(word).count(document_id)) {
  121.                 matched_words.push_back(word);
  122.             }
  123.         }
  124.         for (const string& word : query.minus_words) {
  125.             if (word_to_document_freqs_.count(word) == 0) {
  126.                 continue;
  127.             }
  128.             if (word_to_document_freqs_.at(word).count(document_id)) {
  129.                 matched_words.clear();
  130.                 break;
  131.             }
  132.         }
  133.         return {matched_words, documents_.at(document_id).status};
  134.     }
  135.    
  136. private:
  137.     struct DocumentData {
  138.         int rating;
  139.         DocumentStatus status;
  140.     };
  141.  
  142.     set<string> stop_words_;
  143.     map<string, map<int, double>> word_to_document_freqs_;
  144.     map<int, DocumentData> documents_;
  145.    
  146.     bool IsStopWord(const string& word) const {
  147.         return stop_words_.count(word) > 0;
  148.     }
  149.    
  150.     vector<string> SplitIntoWordsNoStop(const string& text) const {
  151.         vector<string> words;
  152.         for (const string& word : SplitIntoWords(text)) {
  153.             if (!IsStopWord(word)) {
  154.                 words.push_back(word);
  155.             }
  156.         }
  157.         return words;
  158.     }
  159.    
  160.     static int ComputeAverageRating(const vector<int>& ratings) {
  161.         if (ratings.empty()) {
  162.             return 0;
  163.         }
  164.         int rating_sum = 0;
  165.         for (const int rating : ratings) {
  166.             rating_sum += rating;
  167.         }
  168.         return rating_sum / static_cast<int>(ratings.size());
  169.     }
  170.    
  171.     struct QueryWord {
  172.         string data;
  173.         bool is_minus;
  174.         bool is_stop;
  175.     };
  176.    
  177.     QueryWord ParseQueryWord(string text) const {
  178.         bool is_minus = false;
  179.         // Word shouldn't be empty
  180.         if (text[0] == '-') {
  181.             is_minus = true;
  182.             text = text.substr(1);
  183.         }
  184.         return {
  185.             text,
  186.             is_minus,
  187.             IsStopWord(text)
  188.         };
  189.     }
  190.    
  191.     struct Query {
  192.         set<string> plus_words;
  193.         set<string> minus_words;
  194.     };
  195.    
  196.     Query ParseQuery(const string& text) const {
  197.         Query query;
  198.         for (const string& word : SplitIntoWords(text)) {
  199.             const QueryWord query_word = ParseQueryWord(word);
  200.             if (!query_word.is_stop) {
  201.                 if (query_word.is_minus) {
  202.                     query.minus_words.insert(query_word.data);
  203.                 } else {
  204.                     query.plus_words.insert(query_word.data);
  205.                 }
  206.             }
  207.         }
  208.         return query;
  209.     }
  210.    
  211.     // Existence required
  212.     double ComputeWordInverseDocumentFreq(const string& word) const {
  213.         return log(GetDocumentCount() * 1.0 / word_to_document_freqs_.at(word).size());
  214.     }
  215.  
  216.     template <typename DocumentPredicate>
  217.     vector<Document> FindAllDocuments(const Query& query, DocumentPredicate document_predicate) const {
  218.         map<int, double> document_to_relevance;
  219.         for (const string& word : query.plus_words) {
  220.             if (word_to_document_freqs_.count(word) == 0) {
  221.                 continue;
  222.             }
  223.             const double inverse_document_freq = ComputeWordInverseDocumentFreq(word);
  224.             for (const auto [document_id, term_freq] : word_to_document_freqs_.at(word)) {
  225.                 const auto& document_data = documents_.at(document_id);
  226.                 if (document_predicate(document_id, document_data.status, document_data.rating)) {
  227.                     document_to_relevance[document_id] += term_freq * inverse_document_freq;
  228.                 }
  229.             }
  230.         }
  231.        
  232.         for (const string& word : query.minus_words) {
  233.             if (word_to_document_freqs_.count(word) == 0) {
  234.                 continue;
  235.             }
  236.             for (const auto [document_id, _] : word_to_document_freqs_.at(word)) {
  237.                 document_to_relevance.erase(document_id);
  238.             }
  239.         }
  240.  
  241.         vector<Document> matched_documents;
  242.         for (const auto [document_id, relevance] : document_to_relevance) {
  243.             matched_documents.push_back({
  244.                 document_id,
  245.                 relevance,
  246.                 documents_.at(document_id).rating
  247.             });
  248.         }
  249.         return matched_documents;
  250.     }
  251. };
  252.  
  253.  
  254. // ==================== для примера =========================
  255.  
  256.  
  257. void PrintDocument(const Document& document) {
  258.     cout << "{ "s
  259.          << "document_id = "s << document.id << ", "s
  260.          << "relevance = "s << document.relevance << ", "s
  261.          << "rating = "s << document.rating
  262.          << " }"s << endl;
  263. }
  264.  
  265. int main() {
  266.     SearchServer search_server;
  267.     search_server.SetStopWords("и в на"s);
  268.  
  269.     search_server.AddDocument(0, "белый кот и модный ошейник"s,        DocumentStatus::ACTUAL, {8, -3});
  270.     search_server.AddDocument(1, "пушистый кот пушистый хвост"s,       DocumentStatus::ACTUAL, {7, 2, 7});
  271.     search_server.AddDocument(2, "ухоженный пёс выразительные глаза"s, DocumentStatus::ACTUAL, {5, -12, 2, 1});
  272.     search_server.AddDocument(3, "ухоженный скворец евгений"s,         DocumentStatus::BANNED, {9});
  273.  
  274.     cout << "ACTUAL by default:"s << endl;
  275.     for (const Document& document : search_server.FindTopDocuments("пушистый ухоженный кот"s)) {
  276.         PrintDocument(document);
  277.     }
  278.  
  279.     cout << "BANNED:"s << endl;
  280.     for (const Document& document : search_server.FindTopDocuments("пушистый ухоженный кот"s, DocumentStatus::BANNED)) {
  281.         PrintDocument(document);
  282.     }
  283.  
  284.     cout << "Even ids:"s << endl;
  285.     for (const Document& document : search_server.FindTopDocuments("пушистый ухоженный кот"s, [](int document_id, DocumentStatus status, int rating) { return document_id % 2 == 0; })) {
  286.         PrintDocument(document);
  287.     }
  288. }
  289.  
  290.  
  291. // ==================== для тестирования =========================
  292.  
  293.  
  294. // может быть в сданном коде
  295. SearchServer CreateSearchServer() {
  296.     SearchServer search_server;
  297.     search_server.SetStopWords(ReadLine());
  298.  
  299.     const int document_count = ReadLineWithNumber();
  300.     for (int document_id = 0; document_id < document_count; ++document_id) {
  301.         const string document = ReadLine();
  302.  
  303.         int status_raw;
  304.         cin >> status_raw;
  305.  
  306.         int ratings_size;
  307.         cin >> ratings_size;
  308.        
  309.         vector<int> ratings(ratings_size, 0);
  310.        
  311.         for (int& rating : ratings) {
  312.             cin >> rating;
  313.         }
  314.        
  315.         search_server.AddDocument(document_id, document, static_cast<DocumentStatus>(status_raw), ratings);
  316.         ReadLine();
  317.     }
  318.    
  319.     return search_server;
  320. }
  321.  
  322. void PrintMatchDocumentResult(int document_id, const vector<string>& words, DocumentStatus status) {
  323.     cout << "{ "s
  324.          << "document_id = "s << document_id << ", "s
  325.          << "status = "s << static_cast<int>(status) << ", "s
  326.          << "words ="s;
  327.     for (const string& word : words) {
  328.         cout << ' ' << word;
  329.     }
  330.     cout << "}"s << endl;
  331. }
  332.  
  333. int test_main() {
  334.     const SearchServer search_server = CreateSearchServer();
  335.  
  336.     const string query = ReadLine();
  337.  
  338.     cout << "Top documents for query:"s << endl;
  339.     for (const Document& document : search_server.FindTopDocuments(query)) {
  340.         PrintDocument(document);
  341.     }
  342.  
  343.     cout << "Documents' statuses:"s << endl;
  344.     const int document_count = search_server.GetDocumentCount();
  345.     for (int document_id = 0; document_id < document_count; ++document_id) {
  346.         const auto [words, status] = search_server.MatchDocument(query, document_id);
  347.         PrintMatchDocumentResult(document_id, words, status);
  348.     }
  349.  
  350.     return 0;
  351. }
Advertisement
Add Comment
Please, Sign In to add comment