Advertisement
Not a member of Pastebin yet?
Sign Up,
it unlocks many cool features!
- #include <algorithm>
- #include <cmath>
- #include <iostream>
- #include <map>
- #include <set>
- #include <string>
- #include <utility>
- #include <vector>
- using namespace std;
- const int MAX_RESULT_DOCUMENT_COUNT = 5;
- // функция считывания слов
- string ReadLine() {
- string s;
- getline(cin, s);
- return s;
- }
- // функция считывания количества слов
- int ReadLineWithNumber() {
- int result;
- cin >> result;
- ReadLine();
- return result;
- }
- // функция разбиения на слова и записи в вектор слов words
- vector<string> SplitIntoWords(const string& text) {
- vector<string> words;
- string word;
- for (const char c : text) {
- if (c == ' ') {
- words.push_back(word);
- word = "";
- } else {
- word += c;
- }
- }
- words.push_back(word);
- return words;
- }
- // объявление структуры документов с двумя переменными: id и relevance
- struct Document {
- int id;
- double relevance;
- int rating;
- };
- // объявление перечисленных типов
- enum class DocumentStatus {
- ACTUAL, // актуальный
- IRRELEVANT, // устаревший
- BANNED, // отклонённый
- REMOVED // удалённый
- };
- // отдельная структура из подсказки для хранения рейтинга и статуса
- struct DocumentStatRat {
- int rating;
- DocumentStatus status;
- };
- // механизм поиска
- class SearchServer {
- public:
- // функция считывания стоп-слов и записи их в stop_words_
- void SetStopWords(const string& text) {
- for (const string& word : SplitIntoWords(text)) {
- stop_words_.insert(word);
- }
- }
- // функция добавления слов поискового запроса (без стоп-слов) в word_to_documents_
- void AddDocument(int document_id, const string& document, DocumentStatus status, const vector<int>& ratings) {
- const vector<string> words = SplitIntoWordsNoStop(document);
- const double inv_word_count = 1.0 / words.size();
- for (const string& word : words) {
- word_to_document_freqs_[word][document_id] += inv_word_count;
- }
- // сохраняем DocumentStatus status по его document_id
- document_ratings_.emplace(document_id, ComputeAverageRating(ratings));
- DocumentStatRat rating_status_;
- rating_status_.rating = ComputeAverageRating(ratings);
- rating_status_.status = status;
- document_status_.emplace(document_id, rating_status_);
- }
- // функция вывода 5 наиболее релевантных результатов из всех найденных
- vector<Document> FindTopDocuments(const string& raw_query, DocumentStatus status) const {
- const Query query = ParseQuery(raw_query);
- auto matched_documents = FindAllDocuments(query);
- // наполняем вектор документами со status
- vector<Document> matched_documents_with_status;
- for (const Document& document : matched_documents) {
- if (document_status_.at(document.id).status == status) {
- matched_documents_with_status.push_back(document);
- }
- }
- // сортировка и вывод 5 результатов
- sort(matched_documents_with_status.begin(), matched_documents_with_status.end(),
- [](const Document& lhs, const Document& rhs) {
- return lhs.relevance > rhs.relevance;
- });
- if (matched_documents_with_status.size() > MAX_RESULT_DOCUMENT_COUNT) {
- matched_documents_with_status.resize(MAX_RESULT_DOCUMENT_COUNT);
- }
- return matched_documents_with_status;
- }
- private:
- set<string> stop_words_;
- map<string, map<int, double>> word_to_document_freqs_;
- map<int, int> document_ratings_;
- map<int, DocumentStatRat> document_status_;
- bool IsStopWord(const string& word) const {
- return stop_words_.count(word) > 0;
- }
- // функция считывания слов поискового запроса и удаления из него стоп-слов (считывание плюс-слов)
- vector<string> SplitIntoWordsNoStop(const string& text) const {
- vector<string> words;
- for (const string& word : SplitIntoWords(text)) {
- if (!IsStopWord(word)) {
- words.push_back(word);
- }
- }
- return words;
- }
- static int ComputeAverageRating(const vector<int>& ratings) {
- if (ratings.empty()) {
- return 0;
- }
- int rating_sum = 0;
- for (const int rating : ratings) {
- rating_sum += rating;
- }
- return rating_sum / static_cast<int>(ratings.size());
- }
- struct QueryWord {
- string data;
- bool is_minus;
- bool is_stop;
- };
- // обработка минус-слов запроса
- QueryWord ParseQueryWord(string text) const {
- bool is_minus = false;
- // Word shouldn't be empty
- if (text[0] == '-') {
- is_minus = true;
- text = text.substr(1);
- }
- return {
- text,
- is_minus,
- IsStopWord(text)
- };
- }
- struct Query {
- set<string> plus_words;
- set<string> minus_words;
- };
- Query ParseQuery(const string& text) const {
- Query query;
- for (const string& word : SplitIntoWords(text)) {
- const QueryWord query_word = ParseQueryWord(word);
- if (!query_word.is_stop) {
- if (query_word.is_minus) {
- query.minus_words.insert(query_word.data);
- } else {
- query.plus_words.insert(query_word.data);
- }
- }
- }
- return query;
- }
- // вычисляем IDF - делим количество документов где встречается слово на количество всех документов и берём нат.логарифм
- double ComputeWordInverseDocumentFreq(const string& word) const {
- return log(document_ratings_.size() * 1.0 / word_to_document_freqs_.at(word).size());
- }
- // НОВАЯ функция вывода ВСЕХ найденных результатов по релевантности по формуле TF-IDF
- vector<Document> FindAllDocuments(const Query& query) const {
- map<int, double> document_to_relevance;
- for (const string& word : query.plus_words) {
- if (word_to_document_freqs_.count(word) == 0) {
- continue;
- }
- const double inverse_document_freq = ComputeWordInverseDocumentFreq(word);
- for (const auto [document_id, term_freq] : word_to_document_freqs_.at(word)) {
- document_to_relevance[document_id] += term_freq * inverse_document_freq;
- }
- }
- for (const string& word : query.minus_words) {
- if (word_to_document_freqs_.count(word) == 0) {
- continue;
- }
- for (const auto [document_id, _] : word_to_document_freqs_.at(word)) {
- document_to_relevance.erase(document_id);
- }
- }
- vector<Document> matched_documents;
- for (const auto [document_id, relevance] : document_to_relevance) {
- matched_documents.push_back({
- document_id,
- relevance,
- document_ratings_.at(document_id)
- });
- }
- return matched_documents;
- }
- };
- /*
- // считываем всё с ввода
- SearchServer CreateSearchServer() {
- SearchServer search_server;
- search_server.SetStopWords(ReadLine());
- const int document_count = ReadLineWithNumber();
- for (int document_id = 0; document_id < document_count; ++document_id) {
- const string document = ReadLine();
- int ratings_size;
- cin >> ratings_size;
- // создали вектор размера ratings_size из нулей
- vector<int> ratings(ratings_size, 0);
- // считали каждый элемент с помощью ссылки
- for (int& rating : ratings) {
- cin >> rating;
- }
- search_server.AddDocument(document_id, document, status, ratings);
- ReadLine();
- }
- return search_server;
- }
- int main() {
- const SearchServer search_server = CreateSearchServer();
- const string query = ReadLine();
- // вывод результата поиска
- for (const Document& document : search_server.FindTopDocuments(query)) {
- cout << "{ "
- << "document_id = " << document.id << ", "
- << "relevance = " << document.relevance << ", "
- << "rating = " << document.rating
- << " }" << endl;
- }
- }*/
Advertisement
Add Comment
Please, Sign In to add comment
Advertisement