Después del Anschluss, la anexión de Austria por parte de Alemania, Samuel transfirió sus cuentas bancarias a Londres y convirtió sus activos en oro, que utilizó para financiar la fuga de la familia.
Los Reichmann se mudaron a París y luego a Tánger, donde Samuel se convirtió en comerciante de divisas. Su esposa lideró a la familia en el empaque y envío de alimentos y otras necesidades a los reclusos de los campos de concentración en Europa durante la Segunda Guerra Mundial, a través de la Cruz Roja Española. El hogar de la familia en Tánger se convirtió en un santuario para otros refugiados.
Albert fue principalmente educado en casa, dijo su nieto.
Se casó con Egosah Feldman, un inmigrante rumano que enseñaba en la escuela, en Israel a mediados de la década de 1950. En 1959, la pareja se mudó a Toronto. Ella murió este año.
Al Sr. Reichmann le sobreviven sus cuatro hijos, Philip y David Reichmann, Bernice Koenig y Libby Gross; muchos nietos y bisnietos; y su hermano menor, Ralph, su único hermano sobreviviente.
Cuando Albert llegó a Toronto, dos de estos hermanos, Edward y Louis, habían establecido Olympia Floor & Wall Tile en Montreal, y su hermano Ralph estaba a cargo de la filial de Toronto de la compañía de azulejos. Su hermano Paul dirigía una filial de desarrollo inmobiliario en Toronto.
Con alrededor de $40,000 de su padre, Albert formó York Factory Developments para construir almacenes. En 1964, a instancias de su padre, los hermanos fusionaron las empresas en Olympia & York Industrial Development. Nació un gigante inmobiliario global que convertiría a los Reichmann en una de las familias más ricas y filantrópicas del mundo.
Entre los proyectos que construyeron estaban Exchange Place en Boston, el Olympia Centre en Chicago y el First Canadian Place de 72 pisos en Toronto, que era el edificio más alto de Canadá cuando se inauguró en 1975.