Python-Entwickler: Web Scraping. Scrapy in iPublisher

iPublisher entwickelt sich weiter. Wir starten das mobile Immobilienprojekt Clever neu. Dabei handelt es sich um ein CRM zur Verwaltung der Arbeit von Immobilienmaklern. Teil dieses Projekts ist die Sammlung von Daten von Immobilien-Websites. Derzeit wollen wir dieses Projekt auf andere Städte ausweiten. Als Teil des Teams arbeiten Sie an der Sammlung, Speicherung, Verarbeitung und Analyse riesiger Datensätze. Die Hauptaufgabe besteht darin, einen Parser zu entwickeln: Python; Zennopostercapmonster.cloud, das eigentliche Tool zum Parsen von Django; Ein Team, das sich mit Leidenschaft für Ihre Arbeit einsetzt, und gemeinsam implementieren Sie fortschrittliche Technologien in eine benutzerfreundliche Anwendung. Wir haben eine weiße Parser-Anwendung. Wir müssen einige der defekten Parser reparieren (z. B. Olh) und dann die Anzahl der Websites erhöhen, von denen wir Daten analysieren. Was Sie tun werden: – Web-Erfassungstools erstellen und Fehler beheben; – Datenerfassungsseiten erweitern (Analyse); Umgehung des Parsing-Schutzes – Verbesserung der Parsing-Algorithmen; Behebung defekter Parser – Analyse von Zielwebsites, einschließlich Reverse Engineering, Identifizierung von Abwehrmaßnahmen und Einsatz bewährter Verfahren zur Datenerfassung; – Erstellung und Pflege von Lösungen zum Speichern gesammelter Informationen; – Analyse der von Ihnen erhaltenen Daten, Extrahieren benannter Objekte, Durchführen von Klassifizierungen, Benchmarking usw. Unsere Ziel ist es, Daten zu sammeln, deren Speicherung und Nutzung zu optimieren und sie analysieren zu können. Arbeitsbedingungen: – Teilzeit; – Remote-Arbeit; – wirklich tolles Team und Partnerschaft.