2025-06-19 07:00:10 [scrapy.utils.log] INFO: Scrapy 2.13.2 started (bot: scrapybot) 2025-06-19 07:00:10 [scrapy.utils.log] INFO: Versions: {'lxml': '5.4.0', 'libxml2': '2.13.8', 'cssselect': '1.3.0', 'parsel': '1.10.0', 'w3lib': '2.3.1', 'Twisted': '25.5.0', 'Python': '3.10.18 (main, Jun 10 2025, 23:52:59) [GCC 12.2.0]', 'pyOpenSSL': '25.1.0 (OpenSSL 3.5.0 8 Apr 2025)', 'cryptography': '45.0.4', 'Platform': 'Linux-6.8.0-55-generic-x86_64-with-glibc2.36'} 2025-06-19 07:00:10 [scrapy.addons] INFO: Enabled addons: [] 2025-06-19 07:00:10 [scrapy.utils.log] DEBUG: Using reactor: twisted.internet.epollreactor.EPollReactor 2025-06-19 07:00:10 [scrapy.middleware] INFO: Enabled extensions: ['scrapy.extensions.corestats.CoreStats', 'scrapy.extensions.memusage.MemoryUsage', 'scrapy.extensions.logstats.LogStats', 'scrapy.extensions.throttle.AutoThrottle'] 2025-06-19 07:00:10 [scrapy.crawler] INFO: Overridden settings: {'AUTOTHROTTLE_DEBUG': True, 'AUTOTHROTTLE_ENABLED': True, 'AUTOTHROTTLE_TARGET_CONCURRENCY': 4.0, 'COMMANDS_MODULE': 'houses.commands', 'CONCURRENT_REQUESTS': 8, 'DEFAULT_ITEM_CLASS': 'houses.items.HousesItem', 'DOWNLOAD_DELAY': 0.3, 'FTP_PASSWORD': 'H4KgYJ4zNyTTVokQGa_4', 'FTP_USER': 'ftpuser', 'HTTPCACHE_DIR': '/etc/scrapyd_cache', 'HTTPCACHE_ENABLED': True, 'HTTPCACHE_POLICY': 'crawler_utils.httpcache.GradualExpiresPolicy', 'HTTPCACHE_STORAGE': 'crawler_utils.httpcache.FilesystemCacheStorage', 'LOG_FILE': '/app/logs/rental_nl/mijnhuisverhuren/061097424cdb11f089dfae2447f2c79f.log', 'NEWSPIDER_MODULE': 'houses.spiders', 'RANDOMIZE_DOWNLOAD_DELAY': False, 'SPIDER_MODULES': ['houses.spiders'], 'TELNETCONSOLE_ENABLED': False, 'TWISTED_REACTOR': 'twisted.internet.epollreactor.EPollReactor', 'URLLENGTH_LIMIT': 5000, 'USER_AGENT': 'Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, ' 'like Gecko) Chrome/29.0.1547.65 Safari/537.36'} 2025-06-19 07:00:10 [scrapy.middleware] INFO: Enabled downloader middlewares: ['scrapy.downloadermiddlewares.offsite.OffsiteMiddleware', 'scrapy.downloadermiddlewares.httpproxy.HttpProxyMiddleware', 'houses.middlewares.Fake404Middleware', 'crawler_utils.middlewares.MyUserAgentMiddleware', 'scrapy.downloadermiddlewares.httpauth.HttpAuthMiddleware', 'scrapy.downloadermiddlewares.downloadtimeout.DownloadTimeoutMiddleware', 'scrapy.downloadermiddlewares.defaultheaders.DefaultHeadersMiddleware', 'scrapy.downloadermiddlewares.retry.RetryMiddleware', 'scrapy.downloadermiddlewares.redirect.MetaRefreshMiddleware', 'scrapy.downloadermiddlewares.httpcompression.HttpCompressionMiddleware', 'scrapy.downloadermiddlewares.redirect.RedirectMiddleware', 'rotating_proxies.middlewares.RotatingProxyMiddleware', 'rotating_proxies.middlewares.BanDetectionMiddleware', 'scrapy.downloadermiddlewares.cookies.CookiesMiddleware', 'scrapy.downloadermiddlewares.stats.DownloaderStats', 'scrapy.downloadermiddlewares.httpcache.HttpCacheMiddleware'] 2025-06-19 07:00:10 [scrapy.middleware] INFO: Enabled spider middlewares: ['scrapy.spidermiddlewares.start.StartSpiderMiddleware', 'scrapy.spidermiddlewares.httperror.HttpErrorMiddleware', 'scrapy.spidermiddlewares.referer.RefererMiddleware', 'scrapy.spidermiddlewares.urllength.UrlLengthMiddleware', 'scrapy.spidermiddlewares.depth.DepthMiddleware'] 2025-06-19 07:00:10 [crawler_utils.yaml_export_pipeline] INFO: YamlExportPipeline initialized with FTP host: crawler-data.boligzonen.dk, user: ftpuser 2025-06-19 07:00:10 [crawler_utils.yaml_export_pipeline] INFO: Output directories: ['upload/rental_nl'] 2025-06-19 07:00:10 [crawler_utils.yaml_export_pipeline] INFO: Output tempdir: /tmp/rental_nl 2025-06-19 07:00:10 [crawler_utils.yaml_export_pipeline] INFO: Using PostCodeValidator for project: rental_nl 2025-06-19 07:00:10 [scrapy.middleware] INFO: Enabled item pipelines: ['houses.pipelines.DuplicatesPipeline', 'crawler_utils.yaml_export_pipeline.YamlExportPipeline'] 2025-06-19 07:00:10 [scrapy.core.engine] INFO: Spider opened 2025-06-19 07:00:10 [py.warnings] WARNING: /usr/local/lib/python3.10/site-packages/scrapy/core/spidermw.py:433: ScrapyDeprecationWarning: houses.spiders.mijnhuisverhuren.MijnhuisverhurenSpider defines the deprecated start_requests() method. start_requests() has been deprecated in favor of a new method, start(), to support asynchronous code execution. start_requests() will stop being called in a future version of Scrapy. If you use Scrapy 2.13 or higher only, replace start_requests() with start(); note that start() is a coroutine (async def). If you need to maintain compatibility with lower Scrapy versions, when overriding start_requests() in a spider class, override start() as well; you can use super() to reuse the inherited start() implementation without copy-pasting. See the release notes of Scrapy 2.13 for details: https://docs.scrapy.org/en/2.13/news.html warn( 2025-06-19 07:00:10 [scrapy.extensions.logstats] INFO: Crawled 0 pages (at 0 pages/min), scraped 0 items (at 0 items/min) 2025-06-19 07:00:10 [rotating_proxies.middlewares] INFO: Proxies(good: 0, dead: 0, unchecked: 7, reanimated: 0, mean backoff time: 0s) 2025-06-19 07:00:11 [scrapy.extensions.throttle] INFO: slot: de.proxymesh.com | conc: 1 | delay: 2546 ms (-2453) | latency: 373 ms | size: 6776 bytes 2025-06-19 07:00:11 [crawler_utils.httpcache] INFO: ***Dont cache 2025-06-19 07:00:11 [rotating_proxies.expire] DEBUG: Proxy is GOOD 2025-06-19 07:00:11 [scrapy.core.engine] DEBUG: Crawled (200) (referer: None) 2025-06-19 07:00:11 [scrapy.extensions.throttle] INFO: slot: fr.proxymesh.com | conc: 1 | delay: 2553 ms (-2446) | latency: 429 ms | size: 7446 bytes 2025-06-19 07:00:11 [crawler_utils.httpcache] INFO: ***Dont cache 2025-06-19 07:00:11 [rotating_proxies.expire] DEBUG: Proxy is GOOD 2025-06-19 07:00:11 [scrapy.core.engine] DEBUG: Crawled (200) (referer: https://mijnhuisverhuren.nl/aanbod/) 2025-06-19 07:00:11 [logger] INFO: Got result for (Hilversum,Eikbosserweg,Netherlands) from cache 2025-06-19 07:00:11 [logger] WARNING: [Google::get_zip] Did not get any results for house number: None, street: Hilversum, city:Eikbosserweg, country:Netherlands, trying reverse geocode 2025-06-19 07:00:11 [logger] INFO: Got result for (52.2110026,5.1736861) from cache 2025-06-19 07:00:11 [scrapy.core.scraper] DEBUG: Scraped from <200 https://mijnhuisverhuren.nl/aanbod/hilversum-eikbosserweg/> {'area': 150, 'available': '2020-11-01', 'description': '.\n' 'Omschrijving.\n' 'Sfeervolle halfvrijstaande villa met 4 slaapkamers en een ' 'mooie tuin in Hilversum Zuid. Gelegen nabij de Internationale ' 'School en dicht bij zowel winkel- als natuurgebieden. Deze ' 'woning wordt gestoffeerd te huur aangeboden. Meubilering in ' 'overleg..\n' 'Indeling: hal met toegang tot woonkamer, keuken, toilet en ' 'kelder. De woon- en eetkamer is L-vormig en heeft een fraaie ' 'en gezellige open haard. De living met mooie parketvloer kan ' 'in twee aparte kamers worden gedeeld door het sluiten van de ' 'originele en-suitedeuren tussen de woon- en eetkamer. De ' 'achterkamer is door openslaande deuren verbonden met het ' 'terras en de achtertuin. De keuken is volledig uitgerust, met ' 'vijf pits gasfornuis, combi-oven, vaatwasser en koelkast..\n' 'Eerste verdieping: 3 slaapkamers en een ruime badkamer met ' 'stoomdouche, dubbele wastafel, tweede toilet en jacuzzi ' 'ligbad..\n' 'Een vaste trap leidt u naar de tweede verdieping met toegang ' 'tot de vierde slaapkamer en een zolder met wasmachine, droger ' 'en opslagruimte..\n' 'In de kelder vindt u de HR cv-installatie met ' 'warmwatervoorziening en veel opslagcapaciteit..\n' 'De royale tuin rondom het huis heeft een heerlijke ' 'zonligging, biedt veel privacy en is voorzien van een stenen ' 'schuur voor tuingereedschap, fietsen etc..\n' 'Als u het tuinhek uitwandelt bent u binnen enkele minuten in ' 'het bos en loopt u vandaar zo de heide op: de Kolhoornse ' 'Heide, die verbonden is met uitgestrekte natuurgebieden, o.a. ' 'het Goois Natuurreservaat. Het nabijgelegen dorp Loosdrecht ' 'biedt vele watersportactiviteiten en kan in 5 minuten worden ' 'bereikt..\n' 'De villa ligt op korte afstand van de belangrijkste ' 'verkeersaders en openbaar vervoer en er is vrije ' 'parkeergelegenheid aan de voorkant van het huis. Er zijn 2 ' 'nabij gelegen treinstations op ca 8 minuten afstand. Het ' 'mooie dorp Laren is zo’n 12 minuten rijden, Utrecht (20 m), ' 'Amersfoort (20 m), Amsterdam (25 m) en de luchthaven Schiphol ' '(30 m) zijn ook gemakkelijk bereikbaar..', 'elevator': False, 'external_property_attributes': {'external_property_id': 'fed124ebee7dcaa2c1554746df8bde29', 'external_provider_id': 821, 'property_url': 'https://mijnhuisverhuren.nl/aanbod/hilversum-eikbosserweg/'}, 'house_number': '248', 'images': ['https://mijnhuisverhuren.nl/app/uploads/2020/06/Voorkant-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/06/Voorkant-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/06/woonkamer-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/06/eetkamer-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/06/Leuken-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/06/slaapkamer-1-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/06/slaapkamer-2-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/06/slaapkamer-3-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/06/Badkamer-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/06/hal-boven-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/06/pad-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/06/slaapkamer-4-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/06/tuin-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/06/zolder-1200x0-c-default.jpg'], 'property_type': 'House', 'rent': 2950, 'rooms': 8, 'street_name': 'Eikbosserweg', 'zip_code_code': '1213 SC'} 2025-06-19 07:00:14 [scrapy.extensions.throttle] INFO: slot: jp.proxymesh.com | conc: 1 | delay: 2837 ms (-2162) | latency: 2696 ms | size: 8124 bytes 2025-06-19 07:00:14 [crawler_utils.httpcache] INFO: ***Dont cache 2025-06-19 07:00:14 [rotating_proxies.expire] DEBUG: Proxy is GOOD 2025-06-19 07:00:14 [scrapy.core.engine] DEBUG: Crawled (200) (referer: https://mijnhuisverhuren.nl/aanbod/) 2025-06-19 07:00:14 [logger] INFO: Got result for (Loosdrecht,Molenmeent,Netherlands) from cache 2025-06-19 07:00:14 [scrapy.core.scraper] DEBUG: Scraped from <200 https://mijnhuisverhuren.nl/aanbod/loosdrecht-molenmeent/> {'area': 510, 'available': None, 'description': '.\n' 'Loosdrecht.\n' '– .\n' '“De Poort van Loosdrecht” is beschikbaar!.\n' 'Monumentale vrijstaande representatieve en ruime villa met ' 'woon- en kantoor- of praktijkruimte op toplocatie. Aangezien ' 'het pand een gemengde bestemming heeft ook zeer geschikt als ' 'kantoor-aan-huis. Het pand is zeer centraal gelegen, nét ' 'buiten Hilversum, zowel Amsterdam als Utrecht zijn in 20 ' 'minuten te bereiken. Golfbaan en sportterreinen vindt u op ' 'korte loopafstand en de Loosdrechtse Plassen liggen op een ' 'steenworp van de villa verwijderd. Bushalte praktisch naast ' 'de deur..\n' '11 kamers, 2 keuken units, 4 toiletten, 2 kelders, ' 'binnenplaats, tuin rondom, 3 terrassen, parkeergelegenheid op ' 'eigen terrein naast volop parkeergelegenheid op aangrenzende ' 'parkeerplaats..\n' 'Goede bereikbaarheid en voorzien van representatieve ruimtes, ' 'verschillend in afmeting..\n' 'Indeling: entree met marmeren vloer, toilet, ruime keuken met ' 'eethoek, voorzien van vaatwasser, kastjes, spoelbak en ' 'koelkast. Grote suite kamer met veel licht en prachtig ' 'plafond en ruime zijkamer, gescheiden door monumentale gang. ' 'De begane grond van het hoofdgebouw is voorzien van een ' 'fraaie parketvloer..\n' 'Op de eerste etage bevinden zich een halletje, 4 kamers, een ' 'tweede keuken en toilet..\n' 'In dit gedeelte van het pand bevindt zich de eerste kelder ' 'van ca 5×4 meter..\n' 'De in 2006 aangebouwde vleugel heeft op de begane grond een ' 'grote woon-/werkkamer en een woonkeuken, op de eerste ' 'verdieping 2 werk-/slaapkamers en een badkamer. Er is een ' 'zeer grote tweede kelder onder dit gedeelte van het pand, ' 'deze meet ca 7×3 en is vanwege toetredend daglicht voor vele ' 'doeleinden geschikt..\n' 'Deelverhuur is mogelijk, aanvaarding in overleg.\n' 'Perceel ca 510 m2.\n' 'Totaal gebruiksoppervlak ca 310 m2.\n' 'Inhoud ca 860 m3.\n' 'Huurprijs excl. Btw..\n' 'Het pand is ook te koop, vraagprijs € 980.000- k.k..\n' 'Loosdrecht.\n' '– .\n' '“The Gate of Loosdrecht” is available!.\n' 'Monumental detached and spacious representative office or ' 'practice villa on prime location. Since the building has both ' 'residential and office destination it also is very suitable ' 'as home office. The villa is very centrally located, just ' 'outside Hilversum,, both Amsterdam and Utrecht can be reached ' 'in 20 minutes. Golf course and sports facilities on short ' 'walking distance and the “Loosdrechtse Plassen”(Lakes) are in ' 'the direct vicinity. Bus stop practically next door..\n' '11 rooms, 2 kitchen units, 4 toilets, 2 cellars, courtyard, ' 'garden all around, 3 terraces, private parking besides ample ' 'parking in adjacent parking..\n' 'Good accessibility and with representative rooms, different ' 'in size..\n' 'Layout: entrance with marble floor, toilet, large kitchen ' 'with dining area, dishwasher, cupboards, sink and ' 'refrigerator. Spacious and very light suite with beautiful ' 'ceiling and spacious chamber, separated by monumental ' 'corridor. The ground floor of the main building has a ' 'beautiful parquet floor..\n' 'On the first floor there are 4 bedrooms, a second kitchen and ' 'toilet..\n' 'There is a cellar of approx. 5×4 meters..\n' 'The attached wing that was built in 2006 has a large ' 'living/study and a kitchen on the ground floor, and a first ' 'floor with 2 rooms and a bathroom. There is a very large ' 'cellar under this part of the property, which measures ' 'approximately 7×4 meters and can be used for many purposes..\n' 'Partial rental options possible, acceptance agreement.\n' 'Plot approx 510 m2.\n' 'Total area approx 310 m2.\n' 'Volume approx 860 m3.\n' 'Price excluding VAT..\n' 'The property is also for sale, the asking price is € ' '980.000,- k.k. (costs for buyer).', 'elevator': False, 'external_property_attributes': {'external_property_id': 'f9b17d1207115abadafdbc7d0549dccc', 'external_provider_id': 821, 'property_url': 'https://mijnhuisverhuren.nl/aanbod/loosdrecht-molenmeent/'}, 'house_number': '', 'images': ['https://mijnhuisverhuren.nl/app/uploads/2020/07/image0-1200x0-c-default.jpeg', 'https://mijnhuisverhuren.nl/app/uploads/2020/07/woonkamer-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/07/keuken-1-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/07/keuken-2-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/07/slaapkamer-1-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/07/IMG_1331-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/07/E1E40718-D257-4965-9D19-F0A8CE39EB82-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/07/badkamer-2-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/07/douche-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/07/badkamer-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/07/binnentuin-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/07/binnentuin2-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/07/image1-1200x0-c-default.jpeg'], 'property_type': 'Apartment', 'rent': 6500, 'rooms': 11, 'street_name': 'Molenmeent', 'zip_code_code': '1231'} 2025-06-19 07:00:16 [scrapy.extensions.throttle] INFO: slot: de.proxymesh.com | conc: 1 | delay: 1295 ms (-1251) | latency: 178 ms | size: 6801 bytes 2025-06-19 07:00:16 [crawler_utils.httpcache] INFO: ***Dont cache 2025-06-19 07:00:16 [scrapy.core.engine] DEBUG: Crawled (200) (referer: https://mijnhuisverhuren.nl/aanbod/) 2025-06-19 07:00:16 [logger] INFO: Got result for (Amsterdam,Groenburgwal,Netherlands) from cache 2025-06-19 07:00:16 [scrapy.core.scraper] DEBUG: Scraped from <200 https://mijnhuisverhuren.nl/aanbod/amsterdam-groenburgwal/> {'area': 65, 'available': None, 'description': '.\n' 'Amsterdam.\n' '– .\n' 'Gemeubileerd één slaapkamer appartement, gelegen in een ' 'monumentaal pand in het hart van Amsterdam aan een van de ' 'mooiste grachten van de stad. De rustige heeft nauwelijks ' 'verkeer (voornamelijk fietsers en voetgangers). De opera, ' 'cafés, restaurants etc. zijn om de hoek. De belangrijkste ' 'winkelstraat van Amsterdam ligt op slechts 3 minuten lopen. ' 'Het appartement ligt vlakbij het Rembrandtplein, Nieuwmarkt ' 'en het Waterlooplein..\n' 'Stijlvol 65m2 gerenoveerd appartement. 10 minuten lopen van ' 'het Centraal Station. Het appartement bevindt zich op de ' 'derde verdieping en is volledig gemeubileerd. Knusse ' 'woonkamer met eetgedeelte en een tafel met 4 stoelen. Een ' 'ruime slaapkamer met tweepersoonsbed en een badkamer met ' 'douche en ligbad..\n' 'Het appartement heeft allerlei voorzieningen: centrale ' 'verwarming, volledig uitgeruste keuken, digitale tv, ' 'internet, radio / cd-speler en een combi wasmachine met ' 'aparte droogfunctie..\n' 'Openbaar vervoer.\n' 'Dichtstbijzijnde haltes:.\n' 'Trein: Station Amsterdam Centraal.\n' 'Tram : Spui (Rokin), tram 4, 9, 14 en 16..', 'elevator': False, 'external_property_attributes': {'external_property_id': '35831c9effc574bf7821efef6bfbb29e', 'external_provider_id': 821, 'property_url': 'https://mijnhuisverhuren.nl/aanbod/amsterdam-groenburgwal/'}, 'house_number': '', 'images': ['https://mijnhuisverhuren.nl/app/uploads/2020/07/aanzicht-2-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/07/woonkamer-2-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/07/eetkamer-1-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/07/eetkamer-2-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/07/badkamer-3-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/07/keuken-3-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/07/slaapkamer-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/07/badkamer-2-1-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/07/uitzicht-1200x0-c-default.jpg'], 'property_type': 'Apartment', 'rent': 1650, 'rooms': 1, 'street_name': 'Groenburgwal', 'zip_code_code': '1011'} 2025-06-19 07:00:17 [scrapy.extensions.throttle] INFO: slot: jp.proxymesh.com | conc: 1 | delay: 1505 ms (-1331) | latency: 696 ms | size: 7789 bytes 2025-06-19 07:00:17 [crawler_utils.httpcache] INFO: ***Dont cache 2025-06-19 07:00:17 [scrapy.core.engine] DEBUG: Crawled (200) (referer: https://mijnhuisverhuren.nl/aanbod/) 2025-06-19 07:00:17 [logger] INFO: Got result for (Amsterdam,Rubensstraat,Netherlands) from cache 2025-06-19 07:00:17 [scrapy.core.scraper] DEBUG: Scraped from <200 https://mijnhuisverhuren.nl/aanbod/rubensstraat-43-ii-amsterdam/> {'area': 120, 'available': '2020-12-21', 'description': '.\n' ' -II.\n' 'Heerlijk licht 4-kamer appartement wat gemeubileerd of ' 'ongemeubileerd opgeleverd kan worden. Deze ruime woning met ' 'een gebruiksoppervlakte van 120 m2 is gelegen op de tweede ' 'verdieping..\n' 'OMGEVING.\n' 'Aan de ligt dit rustig gelegen vier kamer appartement, nabij ' 'het Beatrixpark. Voor de dagelijkse boodschappen kunt u ' 'terecht in de Beethovenstraat en de Cornelis Schuytstraat, ' 'maar ook het vernieuwde Stadionplein is dicht bij. Het ' 'openbaar vervoer (de tram en diverse lijnbussen) stopt ' 'vrijwel voor de deur. Het centrum, het Concertgebouw, de PC ' 'Hooftstraat zijn op circa 5 minuten afstand met de fiets. ' 'Centraal gelegen ten opzichte van de Zuidas en vele scholen, ' 'waaronder de Brtish School. De ringweg A10 is snel te ' 'bereiken via de afslagen S108 en S109. Optimaal gelegen ten ' 'opzichte van de snelwegen A2 en A4. Station Amsterdam Zuid ' '(WTC) ligt op loopafstand met frequente treinverbindingen ' 'naar o. a. Schiphol..\n' 'INDELING.\n' 'Entree, ruime hal, twee slaapkamers aan de voorzijde, ruime ' 'en lichte woonkamer met erker en eiken visgraat houten vloer. ' 'Tussen de woonkamer en keuken bevindt zich een ' 'studeer/eetkamer. Fraaie separate keuken met inbouwapparatuur ' 'te weten: vaatwasser, 5 pits gasstel, afzuigkap, oven en een ' 'grote ijskast met vriezer..\n' 'Ruime balkons gelegen op het oosten. Van uit de hal direct ' 'toegang naar de badkamer met ligbad, inloopdouche en ' 'badkamermeubel..\n' '………..………………………………………………………………………………………………………………………………………………………………………………………..\n' ' -II.\n' 'Lovely bright 4-room apartment that can be rented furnished ' 'or unfurnished. This spacious house with a use area of 120 ' 'sqm/1300sqf is located on the second floor..\n' 'SURROUNDINGS.\n' 'This quietly located four-room apartment is located on , near ' 'the Beatrixpark. For daily shopping you can go to ' 'Beethovenstraat and Cornelis Schuytstraat, but the renovated ' 'Stadionplein is also close by. Public transport (the tram and ' 'various scheduled buses) stops almost in front of the door. ' 'The center, the Concertgebouw, the PC Hooftstraat are ' 'approximately 5 minutes away by bicycle. Centrally located to ' 'the Zuidas and many schools, including the Brtish School. The ' 'A10 ring road is quickly accessible via exits S108 and S109. ' 'Ideally located for the A2 and A4 motorways. Amsterdam South ' 'Station (WTC) is within walking distance with frequent train ' 'connections to Schiphol, among others..\n' 'LAYOUT.\n' 'Entrance, spacious hall, two bedrooms at the front, spacious ' 'and bright living room with bay window, Oak herringbone ' 'wooden floor. Study/dining between the living and kitchen. ' 'Modern open kitchen with sink and built-in appliances, ' 'namely: dishwasher, 5 burner stove, extractor, oven and a ' 'large fridge with freezer. Spacious balcony’s located on the ' 'east. From the hall you have direct access to the modern ' 'bathroom with bath, shower and bathroom cabinet..', 'elevator': False, 'external_property_attributes': {'external_property_id': '52e035419f0280530a27cdf68f5d530b', 'external_provider_id': 821, 'property_url': 'https://mijnhuisverhuren.nl/aanbod/rubensstraat-43-ii-amsterdam/'}, 'house_number': '43', 'images': ['https://mijnhuisverhuren.nl/app/uploads/2020/12/voorkant-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/12/WhatsApp-Image-2020-11-09-at-08.54.13-2-1200x0-c-default.jpeg', 'https://mijnhuisverhuren.nl/app/uploads/2020/12/WhatsApp-Image-2020-11-09-at-08.54.13-1200x0-c-default.jpeg', 'https://mijnhuisverhuren.nl/app/uploads/2020/12/WhatsApp-Image-2020-11-09-at-08.54.14-1200x0-c-default.jpeg', 'https://mijnhuisverhuren.nl/app/uploads/2020/12/WhatsApp-Image-2020-11-09-at-08.54.15-1200x0-c-default.jpeg', 'https://mijnhuisverhuren.nl/app/uploads/2020/12/WhatsApp-Image-2020-11-09-at-08.54.18-1200x0-c-default.jpeg', 'https://mijnhuisverhuren.nl/app/uploads/2020/12/WhatsApp-Image-2020-11-09-at-08.53.40-1200x0-c-default.jpeg', 'https://mijnhuisverhuren.nl/app/uploads/2020/12/WhatsApp-Image-2020-11-09-at-08.53.41-1200x0-c-default.jpeg', 'https://mijnhuisverhuren.nl/app/uploads/2020/12/WhatsApp-Image-2020-11-09-at-08.53.42-1200x0-c-default.jpeg', 'https://mijnhuisverhuren.nl/app/uploads/2020/12/WhatsApp-Image-2020-11-09-at-08.53.43-1200x0-c-default.jpeg', 'https://mijnhuisverhuren.nl/app/uploads/2020/12/WhatsApp-Image-2020-11-09-at-08.53.46-1200x0-c-default.jpeg', 'https://mijnhuisverhuren.nl/app/uploads/2020/12/WhatsApp-Image-2020-11-09-at-08.53.46-2-1200x0-c-default.jpeg', 'https://mijnhuisverhuren.nl/app/uploads/2020/12/WhatsApp-Image-2020-11-09-at-08.53.47-1200x0-c-default.jpeg', 'https://mijnhuisverhuren.nl/app/uploads/2020/12/WhatsApp-Image-2020-11-09-at-08.53.48-2-1200x0-c-default.jpeg', 'https://mijnhuisverhuren.nl/app/uploads/2020/12/WhatsApp-Image-2020-11-09-at-08.53.50-2-1200x0-c-default.jpeg', 'https://mijnhuisverhuren.nl/app/uploads/2020/12/WhatsApp-Image-2020-11-09-at-08.53.48-1200x0-c-default.jpeg', 'https://mijnhuisverhuren.nl/app/uploads/2020/12/WhatsApp-Image-2020-11-09-at-08.53.49-2-1200x0-c-default.jpeg', 'https://mijnhuisverhuren.nl/app/uploads/2020/12/WhatsApp-Image-2020-11-09-at-08.54.17-1200x0-c-default.jpeg', 'https://mijnhuisverhuren.nl/app/uploads/2020/12/WhatsApp-Image-2020-11-09-at-08.54.17-2-1200x0-c-default.jpeg', 'https://mijnhuisverhuren.nl/app/uploads/2020/12/plattegrond-1200x0-c-default.jpg'], 'property_type': 'Apartment', 'rent': 2750, 'rooms': 4, 'street_name': 'Rubensstraat', 'zip_code_code': '1077'} 2025-06-19 07:00:18 [scrapy.extensions.throttle] INFO: slot: de.proxymesh.com | conc: 1 | delay: 674 ms (-621) | latency: 214 ms | size: 7436 bytes 2025-06-19 07:00:18 [crawler_utils.httpcache] INFO: ***Dont cache 2025-06-19 07:00:18 [scrapy.core.engine] DEBUG: Crawled (200) (referer: https://mijnhuisverhuren.nl/aanbod/) 2025-06-19 07:00:18 [logger] INFO: Got result for (Amsterdam,Afroditekade,Netherlands) from cache 2025-06-19 07:00:18 [scrapy.core.scraper] DEBUG: Scraped from <200 https://mijnhuisverhuren.nl/aanbod/amsterdam-afroditekade/> {'area': 98, 'available': '2020-12-20', 'description': '.\n' 'Omschrijving.\n' 'Een licht en vooral prettig ruim opgezet appartement (ca. 98 ' 'm2) , op de tweede verdieping van dit moderne complex in het ' '“Olympisch Kwartier”. Vanuit het appartement heeft men aan de ' 'voorzijde een schitterend uitzicht over Stadiongracht en aan ' 'de achterzijde een vrij uitzicht over de gemeenschappelijke ' 'binnentuinen die onderdeel uitmaken van het ' 'appartementencomplex. De woning heeft veel vaste kasten en ' 'bergruimte. Verder bevindt zich in het complex een lift, een ' 'berging, gemeenschappelijke fietsenstalling en een ' 'parkeergarage met één parkeerplaats voor deze woning..\n' 'Ligging:.\n' 'Het appartement maakt deel uit van het woongebied “Olympisch ' 'Kwartier”. Op loopafstand bevinden zich gezellige ' 'restaurants, cafés, buurtwinkels en een grote supermarkt op ' 'het Stadionplein. Het Amsterdamse Bos en het Olympisch ' 'Stadion zijn dichtbij en bieden vele sport- en ' 'recreatiemogelijkheden. Het openbaar vervoer bevindt zich op ' 'loopafstand, er rijden diverse bus- en tramlijnen op de ' 'Amstelveenseweg en Stadionweg, ook de ring A10 (s108) is heel ' 'dichtbij..\n' 'Indeling:.\n' 'Gang met toegang tot alle vertrekken, toilet en inpandige ' 'berging met wasmachine/droger aansluiting. Ruime woonkamer ' 'gelegen aan de voorzijde met grote raampartij en een ' 'schitterend uitzicht op het water. Luxe open keuken met ' 'kookeiland, voorzien van een zwart stenen aanrechtblad, ' '4-pits inductiekookplaat, afzuigkap, afwasmachine, vriezer, ' 'koelkast en combi oven/magnetron. Zeer royale slaapkamer ' 'gelegen aan de voorzijde met moderne badkamer voorzien van ' 'ligbad, stortdouche en dubbele wastafel. Aan de achterzijde ' 'is een grote open ruimte (in overleg te veranderen in een ' 'extra slaapkamer )..\n' 'Bijzonderheden:.\n' '– Woning aan het water.\n' '– Vraagprijs inclusief 1 parkeerplaats.\n' '– Nieuwbouwcomplex uit 2008.\n' '– Gemeenschappelijke binnentuin.\n' '– VvE kosten inclusief.\n' '– Volledig geïsoleerd.\n' '– € 2.200,- inclusief parkeerplek tv/internet exclusief GWE ' 'en gemeenten belastingen.', 'elevator': True, 'external_property_attributes': {'external_property_id': '7de6a8de7fe4cc26ff85ed4aa0b7203d', 'external_provider_id': 821, 'property_url': 'https://mijnhuisverhuren.nl/aanbod/amsterdam-afroditekade/'}, 'house_number': '176', 'images': ['https://mijnhuisverhuren.nl/app/uploads/2020/04/IMG_7362-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/04/IMG_7332-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/04/IMG_7337-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/04/IMG_7338-e1590654474745-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/04/IMG_7341-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/04/IMG_7342-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/04/IMG_7345-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/04/IMG_7349-e1590654499299-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/04/IMG_7354-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/04/IMG_7355-e1590654487154-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/04/IMG_7358-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/04/IMG_7362-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2020/04/IMG_7786-1200x0-c-default.jpg'], 'property_type': 'Apartment', 'rent': 2000, 'rooms': 3, 'street_name': 'Afroditekade', 'zip_code_code': '1076'} 2025-06-19 07:00:19 [scrapy.extensions.throttle] INFO: slot: de.proxymesh.com | conc: 1 | delay: 362 ms (-311) | latency: 204 ms | size: 8499 bytes 2025-06-19 07:00:19 [crawler_utils.httpcache] INFO: ***Dont cache 2025-06-19 07:00:19 [scrapy.core.engine] DEBUG: Crawled (200) (referer: https://mijnhuisverhuren.nl/aanbod/) 2025-06-19 07:00:20 [logger] INFO: Got result for (Amsterdam,Churcill-Laan,Netherlands) from cache 2025-06-19 07:00:20 [logger] WARNING: [Google::get_zip] Did not get any results for house number: None, street: Amsterdam, city:Churcill-Laan, country:Netherlands, trying reverse geocode 2025-06-19 07:00:20 [logger] INFO: Got result for (52.346797,4.8943938) from cache 2025-06-19 07:00:20 [scrapy.core.scraper] DEBUG: Scraped from <200 https://mijnhuisverhuren.nl/aanbod/churchill-laan-21-ii-te-amsterdam/> {'area': 125, 'available': None, 'description': '.\n' 'PRACHTIG HIGH-END APPARTEMENT MET DAKTERRAS OP FANTASTISCHE ' 'LOCATIE IN AMSTERDAM ZUID!.\n' 'OMGEVING:.\n' 'Met gepaste trots presenteren wij dit zeer mooie high-end ' '4-kamer appartement dat volledig is gerenoveerd in 2010. De ' 'woning is gelegen aan de Churchill-laan. Een prachtige zeer ' 'brede straat met in het midden een mooie groenstrook met vele ' 'hoge bomen. Dit geeft ook in de woning een prachtig uitzicht. ' 'De benodigde winkels, leuke cafés en goede restaurants liggen ' 'op loopafstand aan de Rijnstraat, de Maasstraat en de ' 'Scheldestraat. Verder heeft het appartement een uitstekende ' 'ligging ten opzichte van openbaar vervoer en uitvalswegen ' 'naar de ring A10, A1 en A2..\n' 'INDELING:.\n' 'Tweede etage:.\n' 'De woning is gelegen in een prachtig jaren 30 complex. De ' 'woning heeft een eigen entree. Met het trappenhuis is de ' 'woning op de tweede etage te bereiken. De open hal geeft ' 'toegang tot verschillende vertrekken van de woning. Aan de ' 'straatzijde is de ruime en lichte zitkamer en de eetkamer. De ' 'twee ruimtes zijn via schuifdeuren te scheiden van elkaar. De ' 'moderne open keuken is gelegen aan de balkonzijde. De keuken ' 'is voorzien van alle hedendaagse gemakken zoals inbouw ' 'vaatwasser, 5 pits gas kookstel, oven, koel -/ ' 'vriescombinatie, en voldoende kastruimte. Naast de keuken is ' 'nog een leuke ruimte welke ook goed kan dienen als eetkamer ' 'of extra zitkamer (zoals het nu in gebruik is). Deze ruimte ' 'en de keuken geven toegang tot het balkon gelegen op het ' 'zuiden..\n' 'Op dezelfde etage bevindt zich ook een ruime slaapkamer en de ' 'badkamer. De slaapkamer is voorzien van fraaie inbouwkasten. ' 'De slaapkamer is eveneens gelegen aan de achterzijde van de ' 'woning. De badkamer is net als de rest van de woning zeer ' 'smaakvol. Het is voorzien van inloopdouche, ligbad, dubbele ' 'wastafel en vloerverwarming..\n' 'Vierde etage:.\n' 'Vanuit de hal op de tweede etage is via een vast trap de rest ' 'van de woning op de vierde etage te bereiken. Hier bevindt ' 'zich de tweede ruime slaapkamer met wederom mooie ' 'inbouwkasten. Verder is op deze etage een washok met ' 'bergruimte. Als kers op de taart geeft deze verdieping ' 'toegang tot een prachtig DAKTERRAS op het zonnige zuiden. Dit ' 'dakterras is te bereiken door de slaapkamer en heeft een ' 'perfecte ligging. Een leuke extra van dit dakterras is de ' 'verwarmde buitendouche. Dit dakterras is een garantie voor ' 'een gezellig avond op een mooie zomerdag..\n' 'Letop:.\n' 'Gezien de stijging in energie prijzen wil de eigenaar behoud ' 'van zijn vastgestelde energiecontract. voorschot GWE is € ' '185,- P.M..\n' 'BEAUTIFUL HIGH-ENG APARTMENT WITH ROOFTERRAS ON A FANTASTIC ' 'LOCATION IN AMSTERDAM SOUTH.\n' 'AREA:.\n' 'With proud we present this beautiful high-end 4-room ' 'apartment which is complete renovated in 2010. The apartment ' 'is located on the Churchill-laan. A beautiful wide street ' 'with in the middle a green area with high trees. This gives a ' 'beautiful view from the apartment. Various shops, café’s and ' 'restaurants are on walking distance at the Rijnstraat, the ' 'Maasstraat and the Scheldestraat. By car the A10, A1 and A2 ' 'are reached within minutes..\n' 'LAY OUT:.\n' 'Second floor:.\n' 'The apartment is in the beautiful 30’s coplex. The apartment ' 'has a private entrace. With the staircase you reach the ' 'living area on the second floor. The spacious hall gives ' 'entrance to the different rooms. On the street side is the ' 'open and light living room anex dining room. The two rooms ' 'are diveded by suite door. The modern kitchen is on the ' 'balcony side. The kitchen is equipped with all the now-a-day ' 'comforts like a build in dishwasher, 5-burner gas cooker, ' 'fridge-freezer combination and enough storage space. Next to ' 'the kitchen is a nice sitting are which you can use as a ' 'extra dining room or seating room (how it is used atm). This ' 'area and the kitchen give access to the balcony facing ' 'south..\n' 'On the same floor there is also a spacious bedroom and the ' 'bathroom. The bedroom has beautiful fitted wardrobes, and is ' 'also located at the rear of the house. The bathroom is just ' 'like the rest of the house very tastefull designed. It is ' 'equipped with walk-in shower, bath, double sink and ' 'underfloor heating..\n' 'Fourth floor:.\n' 'From the hall on the second floor you can reach the rest of ' 'the house on the fourth floor via a fixed staircase. Here is ' 'the second spacious bedroom with again beautiful fitted ' 'wardrobes. Furthermore, on this floor is a laundry room with ' 'storage space. As icing on the cake this floor gives access ' 'to a beautiful ROOF TERRACE on the sunny south. This roof ' 'terrace is accessible through the bedroom and has a perfect ' 'location. A nice extra of this roof terrace is the heated ' 'outdoor shower. This roof terrace is a guarantee for a ' 'pleasant evening on a beautiful summer day..', 'elevator': False, 'external_property_attributes': {'external_property_id': '21d783ead03e993f60a5aa19713698bd', 'external_provider_id': 821, 'property_url': 'https://mijnhuisverhuren.nl/aanbod/churchill-laan-21-ii-te-amsterdam/'}, 'house_number': '21', 'images': ['https://mijnhuisverhuren.nl/app/uploads/2021/12/1-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2021/12/2-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2021/12/3-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2021/12/4-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2021/12/5-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2021/12/6-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2021/12/7-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2021/12/8-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2021/12/9-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2021/12/10-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2021/12/11-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2021/12/12-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2021/12/13-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2021/12/14-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2021/12/15-rotated-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2021/12/16-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2021/12/17-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2021/12/18-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2021/12/19-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2021/12/20-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2021/12/tweede-verdieping-1200x0-c-default.jpg', 'https://mijnhuisverhuren.nl/app/uploads/2021/12/zolder-1200x0-c-default.jpg'], 'property_type': 'Apartment', 'rent': 2950, 'rooms': 4, 'street_name': 'Churcill-Laan', 'zip_code_code': '1078 DN'} 2025-06-19 07:00:20 [scrapy.core.engine] INFO: Closing spider (finished) 2025-06-19 07:00:20 [crawler_utils.yaml_export_pipeline] INFO: Uploading /tmp/rental_nl/mijnhuisverhuren_1750316411.yaml to /upload/rental_nl 2025-06-19 07:00:20 [crawler_utils.yaml_export_pipeline] INFO: FTP host: crawler-data.boligzonen.dk, user: ftpuser 2025-06-19 07:00:20 [paramiko.transport] DEBUG: starting thread (client mode): 0xcdbcb010 2025-06-19 07:00:20 [paramiko.transport] DEBUG: Local version/idstring: SSH-2.0-paramiko_3.5.1 2025-06-19 07:00:20 [paramiko.transport] DEBUG: Remote version/idstring: SSH-2.0-OpenSSH_9.6p1 Ubuntu-3ubuntu13.11 2025-06-19 07:00:20 [paramiko.transport] INFO: Connected (version 2.0, client OpenSSH_9.6p1) 2025-06-19 07:00:20 [paramiko.transport] DEBUG: === Key exchange possibilities === 2025-06-19 07:00:20 [paramiko.transport] DEBUG: kex algos: sntrup761x25519-sha512@openssh.com, curve25519-sha256, curve25519-sha256@libssh.org, ecdh-sha2-nistp256, ecdh-sha2-nistp384, ecdh-sha2-nistp521, diffie-hellman-group-exchange-sha256, diffie-hellman-group16-sha512, diffie-hellman-group18-sha512, diffie-hellman-group14-sha256, ext-info-s, kex-strict-s-v00@openssh.com 2025-06-19 07:00:20 [paramiko.transport] DEBUG: server key: rsa-sha2-512, rsa-sha2-256, ecdsa-sha2-nistp256, ssh-ed25519 2025-06-19 07:00:20 [paramiko.transport] DEBUG: client encrypt: chacha20-poly1305@openssh.com, aes128-ctr, aes192-ctr, aes256-ctr, aes128-gcm@openssh.com, aes256-gcm@openssh.com 2025-06-19 07:00:20 [paramiko.transport] DEBUG: server encrypt: chacha20-poly1305@openssh.com, aes128-ctr, aes192-ctr, aes256-ctr, aes128-gcm@openssh.com, aes256-gcm@openssh.com 2025-06-19 07:00:20 [paramiko.transport] DEBUG: client mac: umac-64-etm@openssh.com, umac-128-etm@openssh.com, hmac-sha2-256-etm@openssh.com, hmac-sha2-512-etm@openssh.com, hmac-sha1-etm@openssh.com, umac-64@openssh.com, umac-128@openssh.com, hmac-sha2-256, hmac-sha2-512, hmac-sha1 2025-06-19 07:00:20 [paramiko.transport] DEBUG: server mac: umac-64-etm@openssh.com, umac-128-etm@openssh.com, hmac-sha2-256-etm@openssh.com, hmac-sha2-512-etm@openssh.com, hmac-sha1-etm@openssh.com, umac-64@openssh.com, umac-128@openssh.com, hmac-sha2-256, hmac-sha2-512, hmac-sha1 2025-06-19 07:00:20 [paramiko.transport] DEBUG: client compress: none, zlib@openssh.com 2025-06-19 07:00:20 [paramiko.transport] DEBUG: server compress: none, zlib@openssh.com 2025-06-19 07:00:20 [paramiko.transport] DEBUG: client lang: 2025-06-19 07:00:20 [paramiko.transport] DEBUG: server lang: 2025-06-19 07:00:20 [paramiko.transport] DEBUG: kex follows: False 2025-06-19 07:00:20 [paramiko.transport] DEBUG: === Key exchange agreements === 2025-06-19 07:00:20 [paramiko.transport] DEBUG: Strict kex mode: True 2025-06-19 07:00:20 [paramiko.transport] DEBUG: Kex: curve25519-sha256@libssh.org 2025-06-19 07:00:20 [paramiko.transport] DEBUG: HostKey: ssh-ed25519 2025-06-19 07:00:20 [paramiko.transport] DEBUG: Cipher: aes128-ctr 2025-06-19 07:00:20 [paramiko.transport] DEBUG: MAC: hmac-sha2-256 2025-06-19 07:00:20 [paramiko.transport] DEBUG: Compression: none 2025-06-19 07:00:20 [paramiko.transport] DEBUG: === End of kex handshake === 2025-06-19 07:00:20 [paramiko.transport] DEBUG: Resetting outbound seqno after NEWKEYS due to strict mode 2025-06-19 07:00:20 [paramiko.transport] DEBUG: kex engine KexCurve25519 specified hash_algo 2025-06-19 07:00:20 [paramiko.transport] DEBUG: Switch to new keys ... 2025-06-19 07:00:20 [paramiko.transport] DEBUG: Resetting inbound seqno after NEWKEYS due to strict mode 2025-06-19 07:00:20 [paramiko.transport] DEBUG: Got EXT_INFO: {'server-sig-algs': b'ssh-ed25519,ecdsa-sha2-nistp256,ecdsa-sha2-nistp384,ecdsa-sha2-nistp521,sk-ssh-ed25519@openssh.com,sk-ecdsa-sha2-nistp256@openssh.com,rsa-sha2-512,rsa-sha2-256', 'publickey-hostbound@openssh.com': b'0', 'ping@openssh.com': b'0'} 2025-06-19 07:00:20 [paramiko.transport] DEBUG: Attempting password auth... 2025-06-19 07:00:20 [paramiko.transport] DEBUG: userauth is OK 2025-06-19 07:00:20 [paramiko.transport] INFO: Authentication (password) successful! 2025-06-19 07:00:20 [paramiko.transport] DEBUG: [chan 0] Max packet in: 32768 bytes 2025-06-19 07:00:20 [paramiko.transport] DEBUG: Received global request "hostkeys-00@openssh.com" 2025-06-19 07:00:20 [paramiko.transport] DEBUG: Rejecting "hostkeys-00@openssh.com" global request from server. 2025-06-19 07:00:20 [paramiko.transport] DEBUG: [chan 0] Max packet out: 32768 bytes 2025-06-19 07:00:20 [paramiko.transport] DEBUG: Secsh channel 0 opened. 2025-06-19 07:00:20 [paramiko.transport] DEBUG: [chan 0] Sesch channel 0 request ok 2025-06-19 07:00:20 [paramiko.transport.sftp] INFO: [chan 0] Opened sftp connection (server version 3) 2025-06-19 07:00:20 [paramiko.transport.sftp] DEBUG: [chan 0] open(b'/upload/rental_nl/mijnhuisverhuren_1750316411.yaml', 'wb') 2025-06-19 07:00:20 [paramiko.transport.sftp] DEBUG: [chan 0] open(b'/upload/rental_nl/mijnhuisverhuren_1750316411.yaml', 'wb') -> 00000000 2025-06-19 07:00:20 [paramiko.transport.sftp] DEBUG: [chan 0] close(00000000) 2025-06-19 07:00:20 [paramiko.transport.sftp] DEBUG: [chan 0] stat(b'/upload/rental_nl/mijnhuisverhuren_1750316411.yaml') 2025-06-19 07:00:20 [paramiko.transport.sftp] INFO: [chan 0] sftp session closed. 2025-06-19 07:00:20 [paramiko.transport] DEBUG: [chan 0] EOF sent (0) 2025-06-19 07:00:20 [crawler_utils.yaml_export_pipeline] INFO: Successfully uploaded /tmp/rental_nl/mijnhuisverhuren_1750316411.yaml to upload/rental_nl 2025-06-19 07:00:20 [scrapy.statscollectors] INFO: Dumping Scrapy stats: {'downloader/request_bytes': 2566, 'downloader/request_count': 7, 'downloader/request_method_count/GET': 7, 'downloader/response_bytes': 55633, 'downloader/response_count': 7, 'downloader/response_status_count/200': 7, 'elapsed_time_seconds': 9.182744, 'finish_reason': 'finished', 'finish_time': datetime.datetime(2025, 6, 19, 7, 0, 20, 77972, tzinfo=datetime.timezone.utc), 'httpcache/firsthand': 7, 'httpcache/miss': 7, 'httpcache/uncacheable': 7, 'httpcompression/response_bytes': 189786, 'httpcompression/response_count': 7, 'item_scraped_count': 6, 'items_per_minute': 40.0, 'log_count/DEBUG': 58, 'log_count/INFO': 42, 'log_count/WARNING': 3, 'memusage/max': 96727040, 'memusage/startup': 96727040, 'proxies/good': 3, 'proxies/mean_backoff': 0.0, 'proxies/reanimated': 0, 'proxies/unchecked': 4, 'request_depth_max': 1, 'response_received_count': 7, 'responses_per_minute': 46.66666666666667, 'scheduler/dequeued': 7, 'scheduler/dequeued/memory': 7, 'scheduler/enqueued': 7, 'scheduler/enqueued/memory': 7, 'start_time': datetime.datetime(2025, 6, 19, 7, 0, 10, 895228, tzinfo=datetime.timezone.utc)} 2025-06-19 07:00:20 [scrapy.core.engine] INFO: Spider closed (finished) 2025-06-19 07:00:20 [paramiko.transport] DEBUG: EOF in transport thread