Rond 1844 werd in een oude paardenstal aan de Passeerdersgracht onderdak en koffie geboden aan armen. Die konden er ook een goedkope maaltijd krijgen. Al snel was het gebouw te klein en volgde er nieuwbouw, met een slaapzaal voor 100 personen. De instelling was een particulier initiatief, van de vereniging "Toevlugt voor Behoeftigen".
In een krantenbericht uit 1849 over de nieuwbouwplannen wordt IsaƤc Warnsinck genoemd als architect.
In 1917 werden er nog 25.000 overnachtingen geboden. In 1924 werd het tehuis gesloten. De vereniging kon de begroting niet meer rond krijgen, en de gemeente oordeelde dat de daklozen ook terecht konden bij Hulp voor Onbehuisden.
Nummer 17 is het voormalige pakhuis achter nummer 19, bereikbaar via een steeg, de Walengang.
Passeerdersgracht 17-19
Er zijn 19 afbeeldingen in de beeldbank van het Stadsarchief die gerelateerd zijn aan dit adres.