Program do scrapingu danych

Zleceniodawca
no avatar
TrioNet
Opis

Zlecę opracowanie softu do importowania/scrapingu danych z www oraz zapisania w bazie danych:

1 - rozwiazanie na zewnętrznym wskazanym hostingu, zabezpieczenie przez banem. Jeśli koszty hostingu będą wysokie to zakładam lokalnie Intel NUC + dyski SSD +światłowód

2 - możliwy długi czas pobierania całej bazy zgodny z limitami - do 1-3-4 miesiące Zapytania do stron w losowych odstępach czasu i kolejności

3 - pobranie bazowe wszystkich rekordów + cykliczne pobieranie w interwałach nowych wpisów (po rosnącym ID lub innym parametrze). Zestaw danych: nick, miejscowość, nazwa i cena produktu/usługi, tel./email,

4 - zapis w bazie danych SQL/postgres

5 - możliwość oparcia całości projektu o gotowe rozwiązania opensource

6 - prezentacja statusu pracy/błędów

Interesują mnie 2 strony z ogólnymi ogłoszeniami, 2 z moto, 2 z nieruchomości.

Proszę o podanie ceny za realizację.

Opublikowano
2024-11-08
Wymagane funkcje:
1 - zewnętrzny hostingu, zabezpieczenie przez banem lub stacja PC lokalnie 2 - długi czas importu całej bazy zgodny z limitami 3 - pobranie wszystkich rekordów + cykliczne pobieranie w interwałach nowych wpisów 4 - zapis w bazie danych SQL/postgres 5 - możliwość oparcia całości projektu o gotowe rozwiązania opensource 6 - prezentacja statusu pracy/błędów

Wysłane oferty (13)

no avatar
majk23
6 umów
2024-11-15
angielski
aplikacje webowe
bazy danych
+ 9 więcej
android
aplikacje mobilne
aplikacje webowe
+ 7 więcej
Budżet
Do negocjacji
Prawa autorskie
-
Ważne przez
30 dni

Najnowsze zlecenia z kategorii