Advertisement
chevengur

СПРИНТ № 5 | Итераторы | Урок 9: Выводим результаты поиска страницами

Feb 3rd, 2024 (edited)
979
0
Never
Not a member of Pastebin yet? Sign Up, it unlocks many cool features!
C++ 14.30 KB | None | 0 0
  1. #include <algorithm>
  2. #include <cmath>
  3. #include <iostream>
  4. #include <map>
  5. #include <set>
  6. #include <stdexcept>
  7. #include <string>
  8. #include <utility>
  9. #include <vector>
  10.  
  11. using namespace std;
  12.  
  13. const int MAX_RESULT_DOCUMENT_COUNT = 5;
  14.  
  15. string ReadLine() {
  16.     string s;
  17.     getline(cin, s);
  18.     return s;
  19. }
  20.  
  21. int ReadLineWithNumber() {
  22.     int result;
  23.     cin >> result;
  24.     ReadLine();
  25.     return result;
  26. }
  27.  
  28. vector<string> SplitIntoWords(const string& text) {
  29.     vector<string> words;
  30.     string word;
  31.     for (const char c : text) {
  32.         if (c == ' ') {
  33.             if (!word.empty()) {
  34.                 words.push_back(word);
  35.                 word.clear();
  36.             }
  37.         } else {
  38.             word += c;
  39.         }
  40.     }
  41.     if (!word.empty()) {
  42.         words.push_back(word);
  43.     }
  44.  
  45.     return words;
  46. }
  47.  
  48. struct Document {
  49.     Document() = default;
  50.  
  51.     Document(int id, double relevance, int rating)
  52.         : id(id)
  53.         , relevance(relevance)
  54.         , rating(rating) {
  55.     }
  56.  
  57.     int id = 0;
  58.     double relevance = 0.0;
  59.     int rating = 0;
  60. };
  61.  
  62. ostream& operator<<(ostream& out, const Document& document) {
  63.     out << "{ "s
  64.         << "document_id = "s << document.id << ", "s
  65.         << "relevance = "s << document.relevance << ", "s
  66.         << "rating = "s << document.rating << " }"s;
  67.     return out;
  68. }
  69.  
  70. template <typename StringContainer>
  71. set<string> MakeUniqueNonEmptyStrings(const StringContainer& strings) {
  72.     set<string> non_empty_strings;
  73.     for (const string& str : strings) {
  74.         if (!str.empty()) {
  75.             non_empty_strings.insert(str);
  76.         }
  77.     }
  78.     return non_empty_strings;
  79. }
  80.  
  81. enum class DocumentStatus {
  82.     ACTUAL,
  83.     IRRELEVANT,
  84.     BANNED,
  85.     REMOVED,
  86. };
  87.  
  88. class SearchServer {
  89. public:
  90.     template <typename StringContainer>
  91.     explicit SearchServer(const StringContainer& stop_words)
  92.         : stop_words_(MakeUniqueNonEmptyStrings(stop_words))  // Extract non-empty stop words
  93.     {
  94.         if (!all_of(stop_words_.begin(), stop_words_.end(), IsValidWord)) {
  95.             throw invalid_argument("Some of stop words are invalid"s);
  96.         }
  97.     }
  98.  
  99.     explicit SearchServer(const string& stop_words_text)
  100.         : SearchServer(SplitIntoWords(stop_words_text))  // Invoke delegating constructor
  101.                                                          // from string container
  102.     {
  103.     }
  104.  
  105.     void AddDocument(int document_id, const string& document, DocumentStatus status, const vector<int>& ratings) {
  106.         if ((document_id < 0) || (documents_.count(document_id) > 0)) {
  107.             throw invalid_argument("Invalid document_id"s);
  108.         }
  109.         const auto words = SplitIntoWordsNoStop(document);
  110.  
  111.         const double inv_word_count = 1.0 / words.size();
  112.         for (const string& word : words) {
  113.             word_to_document_freqs_[word][document_id] += inv_word_count;
  114.         }
  115.         documents_.emplace(document_id, DocumentData{ComputeAverageRating(ratings), status});
  116.         document_ids_.push_back(document_id);
  117.     }
  118.  
  119.     template <typename DocumentPredicate>
  120.     vector<Document> FindTopDocuments(const string& raw_query, DocumentPredicate document_predicate) const {
  121.         const auto query = ParseQuery(raw_query);
  122.  
  123.         auto matched_documents = FindAllDocuments(query, document_predicate);
  124.  
  125.         sort(matched_documents.begin(), matched_documents.end(), [](const Document& lhs, const Document& rhs) {
  126.             if (abs(lhs.relevance - rhs.relevance) < 1e-6) {
  127.                 return lhs.rating > rhs.rating;
  128.             } else {
  129.                 return lhs.relevance > rhs.relevance;
  130.             }
  131.         });
  132.         if (matched_documents.size() > MAX_RESULT_DOCUMENT_COUNT) {
  133.             matched_documents.resize(MAX_RESULT_DOCUMENT_COUNT);
  134.         }
  135.  
  136.         return matched_documents;
  137.     }
  138.  
  139.     vector<Document> FindTopDocuments(const string& raw_query, DocumentStatus status) const {
  140.         return FindTopDocuments(raw_query, [status](int document_id, DocumentStatus document_status, int rating) {
  141.             return document_status == status;
  142.         });
  143.     }
  144.  
  145.     vector<Document> FindTopDocuments(const string& raw_query) const {
  146.         return FindTopDocuments(raw_query, DocumentStatus::ACTUAL);
  147.     }
  148.  
  149.     int GetDocumentCount() const {
  150.         return documents_.size();
  151.     }
  152.  
  153.     int GetDocumentId(int index) const {
  154.         return document_ids_.at(index);
  155.     }
  156.  
  157.     tuple<vector<string>, DocumentStatus> MatchDocument(const string& raw_query, int document_id) const {
  158.         const auto query = ParseQuery(raw_query);
  159.  
  160.         vector<string> matched_words;
  161.         for (const string& word : query.plus_words) {
  162.             if (word_to_document_freqs_.count(word) == 0) {
  163.                 continue;
  164.             }
  165.             if (word_to_document_freqs_.at(word).count(document_id)) {
  166.                 matched_words.push_back(word);
  167.             }
  168.         }
  169.         for (const string& word : query.minus_words) {
  170.             if (word_to_document_freqs_.count(word) == 0) {
  171.                 continue;
  172.             }
  173.             if (word_to_document_freqs_.at(word).count(document_id)) {
  174.                 matched_words.clear();
  175.                 break;
  176.             }
  177.         }
  178.         return {matched_words, documents_.at(document_id).status};
  179.     }
  180.  
  181. private:
  182.     struct DocumentData {
  183.         int rating;
  184.         DocumentStatus status;
  185.     };
  186.     const set<string> stop_words_;
  187.     map<string, map<int, double>> word_to_document_freqs_;
  188.     map<int, DocumentData> documents_;
  189.     vector<int> document_ids_;
  190.  
  191.     bool IsStopWord(const string& word) const {
  192.         return stop_words_.count(word) > 0;
  193.     }
  194.  
  195.     static bool IsValidWord(const string& word) {
  196.         // A valid word must not contain special characters
  197.         return none_of(word.begin(), word.end(), [](char c) {
  198.             return c >= '\0' && c < ' ';
  199.         });
  200.     }
  201.  
  202.     vector<string> SplitIntoWordsNoStop(const string& text) const {
  203.         vector<string> words;
  204.         for (const string& word : SplitIntoWords(text)) {
  205.             if (!IsValidWord(word)) {
  206.                 throw invalid_argument("Word "s + word + " is invalid"s);
  207.             }
  208.             if (!IsStopWord(word)) {
  209.                 words.push_back(word);
  210.             }
  211.         }
  212.         return words;
  213.     }
  214.  
  215.     static int ComputeAverageRating(const vector<int>& ratings) {
  216.         if (ratings.empty()) {
  217.             return 0;
  218.         }
  219.         int rating_sum = 0;
  220.         for (const int rating : ratings) {
  221.             rating_sum += rating;
  222.         }
  223.         return rating_sum / static_cast<int>(ratings.size());
  224.     }
  225.  
  226.     struct QueryWord {
  227.         string data;
  228.         bool is_minus;
  229.         bool is_stop;
  230.     };
  231.  
  232.     QueryWord ParseQueryWord(const string& text) const {
  233.         if (text.empty()) {
  234.             throw invalid_argument("Query word is empty"s);
  235.         }
  236.         string word = text;
  237.         bool is_minus = false;
  238.         if (word[0] == '-') {
  239.             is_minus = true;
  240.             word = word.substr(1);
  241.         }
  242.         if (word.empty() || word[0] == '-' || !IsValidWord(word)) {
  243.             throw invalid_argument("Query word "s + text + " is invalid");
  244.         }
  245.  
  246.         return {word, is_minus, IsStopWord(word)};
  247.     }
  248.  
  249.     struct Query {
  250.         set<string> plus_words;
  251.         set<string> minus_words;
  252.     };
  253.  
  254.     Query ParseQuery(const string& text) const {
  255.         Query result;
  256.         for (const string& word : SplitIntoWords(text)) {
  257.             const auto query_word = ParseQueryWord(word);
  258.             if (!query_word.is_stop) {
  259.                 if (query_word.is_minus) {
  260.                     result.minus_words.insert(query_word.data);
  261.                 } else {
  262.                     result.plus_words.insert(query_word.data);
  263.                 }
  264.             }
  265.         }
  266.         return result;
  267.     }
  268.  
  269.     // Existence required
  270.     double ComputeWordInverseDocumentFreq(const string& word) const {
  271.         return log(GetDocumentCount() * 1.0 / word_to_document_freqs_.at(word).size());
  272.     }
  273.  
  274.     template <typename DocumentPredicate>
  275.     vector<Document> FindAllDocuments(const Query& query, DocumentPredicate document_predicate) const {
  276.         map<int, double> document_to_relevance;
  277.         for (const string& word : query.plus_words) {
  278.             if (word_to_document_freqs_.count(word) == 0) {
  279.                 continue;
  280.             }
  281.             const double inverse_document_freq = ComputeWordInverseDocumentFreq(word);
  282.             for (const auto& [document_id, term_freq] : word_to_document_freqs_.at(word)) {
  283.                 const auto& document_data = documents_.at(document_id);
  284.                 if (document_predicate(document_id, document_data.status, document_data.rating)) {
  285.                     document_to_relevance[document_id] += term_freq * inverse_document_freq;
  286.                 }
  287.             }
  288.         }
  289.  
  290.         for (const string& word : query.minus_words) {
  291.             if (word_to_document_freqs_.count(word) == 0) {
  292.                 continue;
  293.             }
  294.             for (const auto& [document_id, _] : word_to_document_freqs_.at(word)) {
  295.                 document_to_relevance.erase(document_id);
  296.             }
  297.         }
  298.  
  299.         vector<Document> matched_documents;
  300.         for (const auto& [document_id, relevance] : document_to_relevance) {
  301.             matched_documents.push_back({document_id, relevance, documents_.at(document_id).rating});
  302.         }
  303.         return matched_documents;
  304.     }
  305. };
  306.  
  307. void PrintDocument(const Document& document) {
  308.     cout << "{ "s
  309.          << "document_id = "s << document.id << ", "s
  310.          << "relevance = "s << document.relevance << ", "s
  311.          << "rating = "s << document.rating << " }"s << endl;
  312. }
  313.  
  314. void PrintMatchDocumentResult(int document_id, const vector<string>& words, DocumentStatus status) {
  315.     cout << "{ "s
  316.          << "document_id = "s << document_id << ", "s
  317.          << "status = "s << static_cast<int>(status) << ", "s
  318.          << "words ="s;
  319.     for (const string& word : words) {
  320.         cout << ' ' << word;
  321.     }
  322.     cout << "}"s << endl;
  323. }
  324.  
  325. void AddDocument(SearchServer& search_server, int document_id, const string& document, DocumentStatus status,
  326.                  const vector<int>& ratings) {
  327.     try {
  328.         search_server.AddDocument(document_id, document, status, ratings);
  329.     } catch (const invalid_argument& e) {
  330.         cout << "Ошибка добавления документа "s << document_id << ": "s << e.what() << endl;
  331.     }
  332. }
  333.  
  334. void FindTopDocuments(const SearchServer& search_server, const string& raw_query) {
  335.     cout << "Результаты поиска по запросу: "s << raw_query << endl;
  336.     try {
  337.         for (const Document& document : search_server.FindTopDocuments(raw_query)) {
  338.             PrintDocument(document);
  339.         }
  340.     } catch (const invalid_argument& e) {
  341.         cout << "Ошибка поиска: "s << e.what() << endl;
  342.     }
  343. }
  344.  
  345. void MatchDocuments(const SearchServer& search_server, const string& query) {
  346.     try {
  347.         cout << "Матчинг документов по запросу: "s << query << endl;
  348.         const int document_count = search_server.GetDocumentCount();
  349.         for (int index = 0; index < document_count; ++index) {
  350.             const int document_id = search_server.GetDocumentId(index);
  351.             const auto [words, status] = search_server.MatchDocument(query, document_id);
  352.             PrintMatchDocumentResult(document_id, words, status);
  353.         }
  354.     } catch (const invalid_argument& e) {
  355.         cout << "Ошибка матчинга документов на запрос "s << query << ": "s << e.what() << endl;
  356.     }
  357. }
  358.  
  359. template <typename Iterator>
  360. class IteratorRange {
  361. public:
  362.     IteratorRange(Iterator begin, Iterator end)
  363.         : first_(begin)
  364.         , last_(end)
  365.         , size_(distance(first_, last_)) {
  366.     }
  367.  
  368.     Iterator begin() const {
  369.         return first_;
  370.     }
  371.  
  372.     Iterator end() const {
  373.         return last_;
  374.     }
  375.  
  376.     size_t size() const {
  377.         return size_;
  378.     }
  379.  
  380. private:
  381.     Iterator first_, last_;
  382.     size_t size_;
  383. };
  384.  
  385. template <typename Iterator>
  386. ostream& operator<<(ostream& out, const IteratorRange<Iterator>& range) {
  387.     for (Iterator it = range.begin(); it != range.end(); ++it) {
  388.         out << *it;
  389.     }
  390.     return out;
  391. }
  392.  
  393. template <typename Iterator>
  394. class Paginator {
  395. public:
  396.     Paginator(Iterator begin, Iterator end, size_t page_size) {
  397.         for (size_t left = distance(begin, end); left > 0;) {
  398.             const size_t current_page_size = min(page_size, left);
  399.             auto current_page_end = next(begin, current_page_size);
  400.             pages_.push_back({begin, current_page_end});
  401.  
  402.             left -= current_page_size;
  403.             begin = current_page_end;
  404.         }
  405.     }
  406.  
  407.     auto begin() const {
  408.         return pages_.begin();
  409.     }
  410.  
  411.     auto end() const {
  412.         return pages_.end();
  413.     }
  414.  
  415.     size_t size() const {
  416.         return pages_.size();
  417.     }
  418.  
  419. private:
  420.     vector<IteratorRange<Iterator>> pages_;
  421. };
  422.  
  423. template <typename Container>
  424. auto Paginate(const Container& c, size_t page_size) {
  425.     return Paginator(begin(c), end(c), page_size);
  426. }
  427.  
  428. int main() {
  429.     SearchServer search_server("и в на"s);
  430.  
  431.     search_server.AddDocument(1, "пушистый кот пушистый хвост"s, DocumentStatus::ACTUAL, {7, 2, 7});
  432.     search_server.AddDocument(2, "пушистый пёс и модный ошейник"s, DocumentStatus::ACTUAL, {1, 2, 3});
  433.     search_server.AddDocument(3, "большой кот модный ошейник "s, DocumentStatus::ACTUAL, {1, 2, 8});
  434.     search_server.AddDocument(4, "большой пёс скворец евгений"s, DocumentStatus::ACTUAL, {1, 3, 2});
  435.     search_server.AddDocument(5, "большой пёс скворец василий"s, DocumentStatus::ACTUAL, {1, 1, 1});
  436.  
  437.     const auto search_results = search_server.FindTopDocuments("пушистый пёс"s);
  438.     int page_size = 2;
  439.     const auto pages = Paginate(search_results, page_size);
  440.  
  441.     // Выводим найденные документы по страницам
  442.     for (auto page = pages.begin(); page != pages.end(); ++page) {
  443.         cout << *page << endl;
  444.         cout << "Разрыв страницы"s << endl;
  445.     }
  446.  
  447.     return 0;
  448. }
  449.  
Advertisement
Add Comment
Please, Sign In to add comment
Advertisement