Решаем задачи Python

Девис Джеймс

– Эта функция принимает текст в качестве входного параметра и возвращает словарь, в котором ключами являются слова из текста, а значениями – количество раз, которое каждое слово встречается в тексте.

– Сначала текст приводится к нижнему регистру с помощью метода `lower`, чтобы учесть слова с разным регистром как одинаковые.

– Затем с помощью регулярного выражения `re.findall(r'\b\w+\b', text)` текст разбивается на слова, игнорируя знаки пунктуации.

– Функция возвращает объект `Counter`, который

создается из списка слов. `Counter` – это подкласс словаря Python, который используется для эффективного подсчета хэшируемых объектов.

2. Функция `most_common_words`:

– Эта функция принимает объект `Counter` и возвращает список из `n` наиболее часто встречающихся элементов в порядке убывания частоты.

– По умолчанию `n` равно 10.

– Метод `most_common` объекта `Counter` используется для получения наиболее часто встречающихся элементов.

3. Пример текста:

– В тексте представлены несколько предложений для демонстрации работы кода.

4. Подсчет слов и вывод наиболее часто встречающихся слов:

– Сначала вызывается функция `count_words`, чтобы подсчитать количество встречаемости каждого слова в тексте.

– Затем вызывается функция `most_common_words`, чтобы получить список из 10 наиболее часто встречающихся слов.

– Затем эти слова выводятся вместе с их количеством встречаний.

Этот код позволяет анализировать текст и извлекать информацию о самых часто встречающихся словах в нем.

18. Задача определение настроения (тональности) текста.

В этой задаче мы будем анализировать текст и определять, является ли он позитивным, негативным или нейтральным.

Идея решения будет следующей:

1. Использовать библиотеку для анализа тональности текста, например, TextBlob или VADER (Valence Aware Dictionary and sEntiment Reasoner).

2. Провести анализ текста и получить его тональность.

3. Вывести результат анализа, указав настроение текста.

Пример кода на Python для решения этой задачи с использованием библиотеки TextBlob:

```python

from textblob import TextBlob

def analyze_sentiment(text):

# Создаем объект TextBlob для анализа текста

blob = TextBlob(text)

# Определяем тональность текста

sentiment = blob.sentiment.polarity

if sentiment > 0:

return "Позитивный"

elif sentiment < 0:

return "Негативный"

else:

return "Нейтральный"

# Пример текста

text = """

Этот фильм был ужасен. Я полностью разочарован.

"""

# Анализ тональности текста

sentiment = analyze_sentiment(text)

print("Настроение текста:", sentiment)

```

Этот код анализирует текст и определяет его тональность как позитивную, негативную или нейтральную. В данном

примере текст считается негативным из-за использования отрицательных слов "ужасен" и «разочарован".

Пояснения к коду:

1. Импорт библиотеки TextBlob:

– На первой строке импортируется класс `TextBlob` из библиотеки `textblob`. `TextBlob` – это библиотека для анализа текста с открытым исходным кодом, которая предоставляет простой интерфейс для обработки текста и выполнения различных операций, таких как определение тональности.

2. Функция `analyze_sentiment`:

– Эта функция принимает текст в качестве входного параметра и использует `TextBlob` для анализа его тональности.

– Сначала создается объект `TextBlob` для анализа текста.

– Затем используется метод `sentiment.polarity`, чтобы определить тональность текста. Значение полярности лежит в диапазоне от -1 до 1, где отрицательные значения указывают на негативную тональность, положительные – на позитивную, а нулевое значение – на нейтральную.

– Функция возвращает строку, указывающую на настроение текста: "Позитивный", "Негативный" или "Нейтральный".

3. Пример текста:

– В этом примере представлен негативно окрашенный текст: "Этот фильм был ужасен. Я полностью разочарован."

4. Анализ тональности текста:

– Вызывается функция `analyze_sentiment` с текстом в качестве аргумента.

– Функция анализирует текст и возвращает его тональность.

– Результат анализа выводится на экран. В данном случае текст считается негативным, поэтому выводится сообщение "Настроение текста: Негативный".

Этот код демонстрирует простой способ анализа тональности текста с использованием библиотеки TextBlob.

19. Задача генерация краткого описания (сжатого содержания) текста.

В этой задаче мы будем брать длинный текст и создавать краткое описание, которое содержит основную суть текста.

Идея решения будет следующей:

1. Разбить текст на предложения.

2. Подсчитать частоту встречаемости каждого слова в тексте.

3. Определить вес каждого предложения на основе суммы весов слов, входящих в него.

4. Выбрать предложения с наибольшим весом для включения в краткое описание.

Вот пример кода на Python для решения этой задачи:

```python

from nltk.tokenize import sent_tokenize, word_tokenize

from collections import Counter

def generate_summary(text, num_sentences=3):

# Разбиваем текст на предложения

sentences = sent_tokenize(text)

# Разбиваем каждое предложение на слова

words = [word_tokenize(sentence.lower) for sentence in sentences]

# Подсчитываем частоту встречаемости каждого слова

word_freq = Counter