Een web scraper die zowel screenshots maakt van webpagina's (met JS) als de broncode opslaat. Heeft geen URLs nodig om te beginnen.
senicup/README.md

24 lines
856 B

## Omschrijving
Gebaseerd op het scannen van niet-prive IPv4 netwerken in volgorde van _Class A_ naar _Class E_ en het maken van rDNS _requests_ als een web-gerelateerde port open is.
## Dependencies
* Selenium::Firefox
* Net::DNS
* Net::Curl::Easy
## SeniCuP in actie
In deze _repository_ is een [voorbeeld in video-formaat](sample/senicup.webm) beschikbaar voor het bekijken in browsers.
## TODO
- [ ] Add DB support for storing HTMLs, b64 screenshots, etc..
- [ ] Utilize the DB for randomizing the scanning of IPv4 blocks and supporting seemless continuation.
- [ ] Add RE-based querying system for scoped IPv4/domain scrapes.
- [ ] Reliably detect when being blocked by companies that own (too) much network space and delay requests appropriately (might not be necessary if various parts are sufficiently randomized).
- [ ] Windows support.