河滨大楼是近代上海最大的公寓楼，商住两用，业主为犹太商人沙逊，建造时依据不规则地形作“S”形设计，取Sassoon首字母之意，在当时绝无仅有。建成后时称“亚洲第一公寓”，是上海最早的“水景住宅”，暖气、电梯、游泳池、深井泵、消防泵等现代设施一应俱全。美国哥伦比亚影片公司、米高梅影片公司、日华蚕丝株式会社、京沪沪杭甬铁路管理局等中外企业、机关团体等均在河滨大楼建立过机构。20世纪50年代后，上海中医学院在楼内创立，上海市第一人民医院曾设诊室于此。

1957年1-9月，历史地理学家谭其骧等人曾在河滨大楼4楼编撰《中国历史地图集》。图为谭其骧与邹逸麟。