# www.robotstxt.org/ # www.google.com/support/webmasters/bin/answer.py?hl=en&answer=156449 User-agent: * # Disallow: /*?* # Disallow: /*&*[c][d] # Except page parameter # Allow: */?*page=*[e][f] # stad + appartement + paginering # /appartement/huren/rotterdam/?*page=1$ Disallow: /appartement/huren/*/?*page=* Allow: /appartement/huren/*/?*page=1$ # stad + huis + paginering # /huis/huren/rotterdam/?*page=1$ Disallow: /huis/huren/*/?*page=* Allow: /huis/huren/*/?*page=1$ # stad + kamer + paginering # /kamer/huren/rotterdam/?*page=1$ Disallow: /kamer/huren/*/?*page=* Allow: /kamer/huren/*/?*page=1$ # stad + bedrijfsruimte + paginering # /bedrijfsruimte/huren/rotterdam/?*page=1$ Disallow: /bedrijfsruimte/huren/*/?*page=* Allow: /bedrijfsruimte/huren/*/?*page=1$ # stad + opslag + paginering # /opslag/huren/rotterdam/?*page=1$ Disallow: /opslag/huren/*/?*page=* Allow: /opslag/huren/*/?*page=1$ # stad + studio + paginering # /studio/huren/rotterdam/?*page=1$ Disallow: /studio/huren/*/?*page=* Allow: /studio/huren/*/?*page=1$ # stadsdeel + woningtype # stadsdeel + appartement # /kamer/amsterdam/stadsdeel/zuidoost/ Disallow: /appartement/*/stadsdeel/*/?*page=* Allow: /appartement/*/stadsdeel/*/?*page=1$ # stadsdeel + huis # /huis/amsterdam/stadsdeel/zuidoost/ Disallow: /huis/*/stadsdeel/*/?*page=* Allow: /huis/*/stadsdeel/*/?*page=1$ # stadsdeel + kamer # /kamer/amsterdam/stadsdeel/zuidoost/ Disallow: /kamer/*/stadsdeel/*/?*page=* Allow: /kamer/*/stadsdeel/*/?*page=1$ # stadsdeel + bedrijfsruimte # /bedrijfsruimte/amsterdam/stadsdeel/zuidoost/ Disallow: /bedrijfsruimte/*/stadsdeel/*/?*page=* Allow: /bedrijfsruimte/*/stadsdeel/*/?*page=1$ # stadsdeel + opslag # /opslag/amsterdam/stadsdeel/zuidoost/ Disallow: /opslag/*/stadsdeel/*/?*page=* Allow: /opslag/*/stadsdeel/*/?*page=1$ # buurt + woningtype # appartement + buurt # /appartement/rotterdam/buurt/molenlaankwartier/ Disallow: /appartement/*/buurt/*/?*page=* Allow: /appartement/*/buurt/*/?*page=1$ # buurt + huis # /huis/rotterdam/buurt/molenlaankwartier/ Disallow: /huis/rotterdam/*/buurt/*/?*page=* Allow: /huis/rotterdam/*/buurt/*/?*page=1$ # buurt + kamer # /kamer/rotterdam/buurt/molenlaankwartier/ Disallow: /kamer/*/buurt/*/?*page=* Allow: /kamer/*/buurt/*/?*page=1$ # buurt + bedrijfsruimte # /bedrijfsruimte/rotterdam/buurt/molenlaankwartier/ Disallow: /bedrijfsruimte/*/buurt/*/?*page=* Allow: /bedrijfsruimte/*/buurt/*/?*page=1$ # buurt + opslag # /opslag/rotterdam/buurt/molenlaankwartier/ Disallow: /opslag/*/buurt/*/?*page=* Allow: /opslag/*/buurt/*/?*page=1$ # wijk + appartement # /appartement/rotterdam/wijk/noord/ Disallow: /appartement/*/wijk/*/?*page=* Allow: /appartement/*/wijk/*/?*page=1$ # wijk + kamer # /kamer/rotterdam/wijk/noord/ Disallow: /kamer/*/wijk/*/?*page=* Allow: /kamer/*/wijk/*/?*page=1$ # wijk + studio # /studio/rotterdam/wijk/noord/ Disallow: /studio/*/wijk/*/?*page=* Allow: /studio/*/wijk/*/?*page=1$ # wijk + opslag # /opslag/rotterdam/wijk/noord/ Disallow: /opslag/*/wijk/*/?*page=* Allow: /opslag/*/wijk/*/?*page=1$ # wijk + bedrijfsruimte # /bedrijfsruimte/rotterdam/wijk/noord/ Disallow: /bedrijfsruimte/*/wijk/*/?*page=* Allow: /bedrijfsruimte/*/wijk/*/?*page=1$ # straat + woningtype # straat + appartement # /straat/appartement/rotterdam/eendrachtsweg/ Disallow: /straat/appartement/*/*/?*page=* Allow: /straat/appartement/*/*/?*page=1$ # straat + kamer # /straat/kamer/rotterdam/eendrachtsweg/ Disallow: /straat/kamer/*/*/?*page=* Allow: /straat/kamer/*/*/?*page=1$ # straat + studio # /straat/studio/rotterdam/eendrachtsweg/ Disallow: /straat/studio/*/*/?*page=* Allow: /straat/studio/*/*/?*page=1$ # straat + opslag # /straat/opslag/rotterdam/eendrachtsweg/ Disallow: /straat/opslag/*/*/?*page=* Allow: /straat/opslag/*/*/?*page=1$ # straat + bedrijfsruimte # /straat/bedrijfsruimte/rotterdam/eendrachtsweg/ Disallow: /straat/bedrijfsruimte/*/*/?*page=* Allow: /straat/bedrijfsruimte/*/*/?*page=1$ # plaats + straat + appartement # /straat/appartement/maastricht/aubeldomein/ Disallow: /straat/appartement/*/*/* # plaats + straat + kamer # /straat/kamer/rotterdam/spruytstraat/ Disallow: /straat/kamer/*/*/* # plaats + straat + studio # /straat/studio/rotterdam/spruytstraat/ Disallow: /straat/studio/*/*/* # plaats + straat + opslag # /straat/opslag/rotterdam/spruytstraat/ Disallow: /straat/opslag/*/*/* # plaats + straat + bedrijfsruimte # /straat/bedrijfsruimte/rotterdam/spruytstraat/ Disallow: /straat/bedrijfsruimte/*/*/* # plaats + straat + overige parameters # /straat/haarlem/eksterlaan/?number_of_rooms=15&radius=5 Disallow: /straat/*/*/*number_of_rooms=* Disallow: /straat/*/*/*radius=* # future use? # bedrooms= # rooms= # living_size= # interior= # shower= # balcony= # toilet= # plaats + wijk + overige parameters # /in/rotterdam/wijk/rotterdam-centrum/?number_of_rooms=15&radius=5 Disallow: /in/*/wijk/*/*number_of_rooms=* Disallow: /in/*/wijk/*/*radius=* # plaats + stadsdeel + overige parameters # /in/haarlem/stadsdeel/noord/?number_of_rooms=15&radius=5 Disallow: /in/*/stadsdeel/*/*number_of_rooms=* Disallow: /in/*/stadsdeel/*/*radius=* # plaats + wijk + opslag # /opslag/aalsmeer/wijk/aalsmeer/ Disallow: /opslag/*/wijk/*/* # plaats + wijk + bedrijfsruimte # /bedrijfsruimte/aalsmeer/wijk/aalsmeer/ Disallow: /bedrijfsruimte/*/wijk/*/* # plaats + wijk + huis # /huis/aalsmeer/wijk/aalsmeer/ Disallow: /huis/*/wijk/*/* # plaats + wijk + alleen eerste pagina # /in/rotterdam/wijk/rotterdam-centrum/?page=2 Disallow: /in/*/wijk/*/?page=* Allow: /in/*/wijk/*/?page=1$ # plaats + buurt + alleen eerste pagina # /in/amstelveen/buurt/elsrijk-oost/?page=3 Disallow: /in/*/buurt/*/?page=* Allow: /in/*/buurt/*/?page=1$ # plaats + appartement + alleen eerste pagina # /appartement/huren/barendrecht/?page=18 Disallow: /appartement/huren/*/?page=* Allow: /appartement/huren/*/?page=1$ # plaats + stadsdeel + alleen eerste pagina # /in/groningen/stadsdeel/oude-wijken/?page=2 Disallow: /in/*/stadsdeel/*/?page=* Allow: /in/*/stadsdeel/*/?page=1$ # provincie + paginering # /provincie/friesland/?page=1 # /provincie/noord-brabant/?page=10 Disallow: /provincie/*/*?page=* Allow: /provincie/*/*?page=1$ # stad + studio + stadsdeel + alleen eerste pagina # /studio/groningen/stadsdeel/oude-wijken/?page=3 Disallow: /studio/*/stadsdeel/*/?page=* Allow: /studio/*/stadsdeel/*/?page=1$ # stad + huis + stadsdeel + alleen eerste pagina # /huis/groningen/stadsdeel/oude-wijken/?page=3 Disallow: /huis/*/stadsdeel/*/?page=* Allow: /huis/*/stadsdeel/*/?page=1$ # stad + bedrijfsruimte + stadsdeel + alleen eerste pagina # /bedrijfsruimte/groningen/stadsdeel/oude-wijken/?page=3 Disallow: /bedrijfsruimte/*/stadsdeel/*/?page=* Allow: /bedrijfsruimte/*/stadsdeel/*/?page=1$ # stad + opslag + stadsdeel + alleen eerste pagina # /opslag/groningen/stadsdeel/oude-wijken/?page=3 Disallow: /opslag/*/stadsdeel/*/?page=* Allow: /opslag/*/stadsdeel/*/?page=1$ # stad + appartement + stadsdeel + alleen eerste pagina # /appartement/groningen/stadsdeel/oude-wijken/?page=3 Disallow: /appartement/*/stadsdeel/*/?page=* Allow: /appartement/*/stadsdeel/*/?page=1$ # huurwoningen aanbod algemeen + paginering # /aanbod-huurwoningen/?page=50 Disallow: /aanbod-huurwoningen/?page=* Allow: /aanbod-huurwoningen/?page=1$ # Gemeubileerd huren + plaats + paginering # /gemeubileerd/huren/amstelveen/?page=2 Disallow: /gemeubileerd/huren/*/*?page=* Allow: /gemeubileerd/huren/*/*?page=1$ # Gemeubileerd huren algemeen + paginering # /gemeubileerd-huren/?page=2 Disallow: /gemeubileerd-huren/*?page=* Allow: /gemeubileerd-huren/*?page=1$ # kaarten Disallow: /kaart/* # Bestaande bouw huren Disallow: /bestaande-bouw-* Disallow: /bestaande-bouw/* # Stel vraag pagina # /contact/amsterdam/1289808/amstelbeststraat/vraag/ Disallow: /contact/*/vraag/* # Mail alert # /mailalert/aanmelden-zoekopdracht/ Disallow: /mailalert/* # Interstitial URLs Disallow: *interstitial* # Sortering, direction Disallow: *sort=* Disallow: *direction=* # Min_price= bij steden Disallow: /in/*min_price=800 Disallow: /platform/in/*min_price=800 # Paginering op hoog niveau Disallow: /kamer-huren/?page= Disallow: /huis-huren/?page= Disallow: /appartement-huren/?page= Disallow: /appartement-huren/*/* Disallow: /kamer-huren/*/*