Op 1 mei 1919 werd met de exploitatie van de restauratie 2e Noord-Hollandsche-Tram in Amsterdam begonnen door A.A. Smits Sr. In 1929 werd het "Tramhuisje" verbouwd. De fietsenloods en het terras aan de Noordzijde werden bij het bedrijf getrokken. Er kwam een nieuw zonneterras en het karakter van officiële wachtkamer verviel, waardoor men van toen af aan verplicht was een consumptie te gebruiken. In de beginperiode deed het echtpaar Smits al het werk zelf. In 1971 was het gebouw gesloopt om plaats te maken voor de bouw van een metrostation
Het Koffie- of Tramhuis werd in 1981 als Smits Koffiehuis heropend. Smits Restaurants exploiteerde het Noord Zuid Hollandsch Koffiehuis tot 31 december 1990 en verlengde het huurcontract niet.
De bakermat van Smits Restaurants maakte vanaf 1 januari 1991 geen onderdeel meer uit van het moederbedrijf. De kleinzoon van de grondlegger, F.W. Smits nam Smits Koffiehuis B.V. over. Door de gedreven inzet van de leermeesters Renate van Dijk en Esam Ibrahim werd Smits Koffiehuis beloont met de titel ' HORECA leerbedrijf van het jaar 2008' . In 2013 is de B.V. verkocht aan Flint Beheer B.V. en Flint Investments B.V.