- core/ — общий слой: fetch, throttle, output, state, runner - forums/base.py — абстрактный BaseAdapter - forums/xenforo/ — адаптер для XenForo (vwts.ru) - forums/phpbb/ — адаптер для phpBB (нива-лада.рф) - __main__.py — точка входа CLI - history/001-initial-structure.md — журнал изменений Также на ВМ (не в этом коммите): - lada_scraper/parse.py — пропуск sticky-тем при многопоточном парсинге
5 lines
206 B
Python
5 lines
206 B
Python
# scraper.core — общий слой парсера
|
|
# Содержит модули, независимые от движка форума.
|
|
# См. fetch.py, throttle.py, output.py, state.py, runner.py.
|
|
|