Pashkovskaya Polina - #1
Conversation
Added: * File htmlparser. Contain all parsing functionality of program. * Added docstrings in all files. * Added logging. To use write '--verbose' after filename. * Added converting to JSON. Also now available output all news articles in JSON format. Change: * Functionality of class RSSReader. All parsing work removed into htmlparser module. Fixed all files with PEP8
| data = feedparser.parse(url) | ||
| if data['bozo']: | ||
| raise ValueError("Wrong URL address or there is no access to the Internet") | ||
| self.feed = data['feed'].get('title', None) | ||
| entries = data['entries'] if count < 0 else data['entries'][:count] | ||
| self.items = [] | ||
| for entry in entries: | ||
| title = unescape(entry.get('title', 'No title')) | ||
| date = entry.get('published', 'Unknown') | ||
| link = entry.get('link', 'No link') | ||
| html = entry.get('summary', None) | ||
| content = NewsContent.get_content_from_html(html) | ||
| self.items.append(NewsItem(title, date, link, content)) |
There was a problem hiding this comment.
Советую сделать тут небольшой рефакторинг.
Основная идея __init__ функции -- это базовая инициализация объекта.
В данном случае получается, что при создании объекта News, будут идти запросы на получение RSS, его парсинг и тд.
я бы посоветовал эту логику вынести в отдельные методы и где-нибудь явно их вызывать.
| return len(self.items) | ||
| class NewsItem: |
There was a problem hiding this comment.
Это не критично, но как совет на будущее.
Выглядит так, что этот класс является обычным контейнером данных.
Для того, чтобы просто красиво хранить данные в какой-то структуре, можно использовать namedtuple из библиотеки collections или дата классы. (повторюсь, это дело вкуса)
| logger.info('Program completed') | ||
| if args.verbose: |
There was a problem hiding this comment.
Логгер в пайтоне можно настроить так, чтобы он писал логи одновременно в файл и в консоль.
Есть много способов, некоторые можно найти вот тут:
https://stackoverflow.com/questions/13733552/logger-configuration-to-log-to-file-and-print-to-stdout
| result += str(item) + '\n\n' | ||
| return result | ||
| def json(self): |
There was a problem hiding this comment.
Я бы переименовал название метода так, чтобы оно показывало действие
например to_json или convert_to_json
| with open("README.md", "r") as fh: | ||
| long_description = fh.read() | ||
| setuptools.setup( |
There was a problem hiding this comment.
Не прописаны зависимости, из-за этого после установке в чистом докер контейнере падает вот такая ошибка:
# rss-reader --help
Traceback (most recent call last):
File "/usr/local/bin/rss-reader", line 5, in<module>
from rss_reader.rss_reader import main
File "/usr/local/lib/python3.8/site-packages/rss_reader/rss_reader.py", line 12, in<module>
from rss_reader.news import News
File "/usr/local/lib/python3.8/site-packages/rss_reader/news.py", line 5, in<module>
import feedparser
ModuleNotFoundError: No module named 'feedparser'| @@ -0,0 +1,72 @@ | |||
| import os | |||
There was a problem hiding this comment.
pycodestyle выдает несколько минимальных стилистических ошибок
# pycodestyle --max-line-length=120 .
./setup.py:14:17: E251 unexpected spaces around keyword / parameter equals
./setup.py:14:19: E251 unexpected spaces around keyword / parameter equals
./rss_reader/__init__.py:1:1: W391 blank line at end of file
./rss_reader/rss_reader.py:64:1: E302 expected 2 blank lines, found 1| @@ -0,0 +1,72 @@ | |||
| import os | |||
| import json | |||
There was a problem hiding this comment.
выводится первая версия продукта, хотя по идее как минимум вторая :)
# rss-reader --version
1.0AlexeiBuzuma
commented
Jan 9, 2020
Код красивый, легко читается, в основном хорошо декомпозирован. Ниже приведены основные моменты по этой работе. Хорошие моменты:
Что может быть улучшено:
|
No description provided.