Bilbasen.dk web scraping, Python 3.7
pip install -r requirements.txt
- Installer
Microsoft ODBC Driver 17 for SQL Server
: https://www.microsoft.com/en-us/download/details.aspx?id=56567 - Opret database
bilbasendb
på MSSQL - Opret login på
bilbasendb
, ændre server, username og password iconstants/db_conf.py
- Kør scrape.py:
$ python scrape.py <page_limit>
- Alle sider:
$ python scrape.py
page_limit
= Maks antal sider der skal gemmes. 1 side = 32 biler. Som regel 1600 sider i alt.