Web scraper and data pipeline
A scheduled scraper that lands clean data in your database or sheet.
Diego FerreiraFull-stack developer, automation and dataÜber diesen Gig
Built mostly by a coding agent from my spec, then hardened by hand against layout changes and rate limits. I only scrape sites whose terms allow it.
Runs on a schedule in your cloud.
Was enthalten ist
- Scraper for one site
- Scheduled runs
- Output to a database or sheet
Extras
- Each additional site+250 $ · +2 Tage
KI-Offenlegung
Wie diese Arbeit entsteht.
KI-Beteiligung
KI-geführt
76%
Ein Maß, keine Note: Ein höherer Wert heißt, KI hat die Arbeit stärker geprägt – nicht, dass sie schlechter ist. Berechnet aus den Phasen unten, gewichtet danach, wie stark jede zählt. Die Person kann den Wert nicht selbst eintragen.
Phase für Phase
| Phase | Rolle der KI | Gewicht |
|---|---|---|
| Konzept / Ideen | Echtes Hin und Her zwischen Person und KI | 15% |
| Recherche | KI hat es erstellt; die Person hat gelenkt und ausgewählt | 10% |
| Produktion / Entwurf | KI-Ergebnis im Wesentlichen unverändert geliefert | 40% |
| Verfeinerung / Bearbeitung | KI hat es erstellt; die Person hat gelenkt und ausgewählt | 25% |
| Qualitätskontrolle | KI hat unterstützt; die Person hat das Ergebnis erstellt | 10% |
Tools und wofür sie genutzt werden
- Claude CodeOpus 5
Writing the scraper and pipeline
Was die Person selbst tut
The spec, checking the site's terms, and hardening the scraper.
Erklärungen
- Ausgangsmaterial
- Gemischt
- Ein Mensch prüft jede Lieferung
- Ja
- Prompt-Protokolle oder Quelldateien auf Anfrage
- Ja
- Dein Material und KI-Tools
- Nur mit Tools geteilt, die nichts speichern
- KI-Nutzung gegenüber deinen eigenen Kunden offenlegen
- Nicht nötig
- Tool-Lizenzen erlauben kommerzielle Lieferung
- Ja
Prüfung durch das Team
Noch nicht verifiziert. Die Verifizierung ist gründlicher als die Prüfung, die jeder Gig vor dem Livegang durchläuft.
KI-Beteiligung im Zeitverlauf
Jede Änderung des Werts bleibt erhalten, damit ein Gig nicht unbemerkt ändern kann, wie er entsteht.
- KI-geführt76%
Was die Person von dir braucht
- What should it do, and what does done look like?Text · Pflicht
- Link to the repository or the tools involvedLink · Optional
Über die Person
Diego Ferreira
Full-stack developer, automation and data
I build web apps, glue SaaS tools together and clean up data, mostly for small teams without an engineer. I write code with agents every day and review every line they produce.
- KI-Tools, mit denen sie arbeitet
- Claude CodeAgentic coding on whole features, with my review
- CursorDay-to-day editing and refactoring
- GitHub CopilotCompletions in the editor
- n8nWorkflow automation with AI steps
- ZapierIntegrations for non-technical teams
- Wie sie mit KI arbeitet
Coding agents write a lot of my first drafts. I design the architecture, review every diff, and test against real data before anything ships. Audits and reviews are done by hand, because judgement is the product there.
- Fähigkeiten
- TypeScript
- Next.js
- Python
- SQL
- n8n
- Zapier
- Sprachen
- Portugiesisch · Muttersprache / zweisprachig
- Englisch · Fließend
- Spanisch · Gesprächssicher