Salve,
Sviluppo dei web crawler per estrarre informazioni da qualsiasi sito e salvarle in un formato (ODT, CSV, TXT, XML). Opzionalmente, i dati estratti possono essere memorizzati in un database MySQL, MariaDB o SQLite. Inoltre, posso analizzare i dati scaricati eseguendo una pulizia in Python. La pulizia dei dati viene eseguita utilizzando Jupyter Notebook, Apache Zeppelin o uno strumento a riga di comando in Python.
Sono possibili i seguenti casi d'uso:
1) Monitoraggio dei prezzi
2) Monitoraggio del marchio: Scaricare dei feedback dai canali di social media
3) Aggregazione di annunci di lavoro
4) Osservazione dei prezzi delle valute o delle azioni
5) Estrazione di dati sui prodotti
6) Raccolta di notizie su qualsiasi argomento
7) Ricerca: scaricare enormi quantità di dati
8) Reddit: scaricare i temi più popolari su un canale
9) Scraping regolare di classifiche musicali
10) Scraping di dati da Google Maps
11) Scaricare file da un sito web o da un server FTP
12) Sviluppo di un bot per scaricare video da Vimeo.
Le mie conoscenze coprono i metodi più comuni di scraping del web:
- requests library
- Scrapy Framework
- Beautifulsoup
- Mechanical Soup
- API Reddit
- Database (MySQL, MariaDB, SQLite)
Ho una conoscenza avanzata di Python, avendo completato un Nano-Degree in Data Analysis su Udacity e scrivendo tutorial su argomenti relativi a Python. Inoltre, ho superato il corso di Probabilità e Statistica I presso il Georgia Tech. Inoltre, ho diversi anni di esperienza professionale nel settore informatico. Tra le altre cose, ho lavorato a progetti di siti web in Python e sviluppato programmi in Java e Haskell. Ho anche sviluppato programmi di database utilizzando LibreOffice Base o Java. Mi sono specializzato in MySQL, MariaDB e SQLite.
Parlo tedesco, inglese e italiano. Chiudi
Luogo: Piemonte - Vercelli
Aggiunto a 10 giorni fa e scade il 25 May
ID annuncio: 305872
[ ]
47 visite
