下焉者错把香港当作了黄浦滩，低估了香港土著的深厚经济潜力，他们将投机取巧之风带到香港来，大家一道「炒金」，于是成天到晚卖出买进，做得十分之起劲，数量越做越大，危机越来越深，初期赚到两文的莫不忻然色喜，自以为得意，滚雪球般的炒得来「热大头昏」，最后是本地帮的商人觑准机会，狠狠交一掼，于是上海帮炒金客立陷惨败，有人倾家荡产有人被迫自杀，损失大多以巨万计，这一次炒金潮，终使上海朋友吃足了香港人的苦头。
杜月笙闻言不胜感慨，同时也起了警觉：香港居，大不易。外地人在香港落了魄，根本无处求援，就只好自生自灭。
因此，三十九年以后，上海人在香港便开始销声匿迹光景黯淡，囊无分文的在满街奔走，告贷求乞，手头还有几文的也无不缩小范围，樽节支出，守着最后的活命本钱，拖一天是一天。卽连二十余年来在黄浦滩上不作第二人想，声势显赫的杜月笙，也都在「坐吃山空」之际，渐渐意味到经济问题的严重，不时的愁眉不展，长吁短叹，共产党张牙舞爪，黄浦滩氷山已倒，杜月笙开始步入他一生中由绚烂而归于平淡的艰难困苦时期他在太息「香港居，大不易」。
三十九年夏季以后的坚尼地台杜公馆，人来客往较先前略微增多。这有两重因素，其一是杜月笙大病已愈，精神较好，他无法出门拜客，好朋友卽使不来他也会命万墨林打电话去叫。其二是「登门求告」要求帮忙的朋友渐渐的多了。
「怎么他老兄会落到这步田地的呢？」
杜月笙一听，惊了一惊，当时便极感困惑的问那位代言者
一日，有一位早年在重庆结交的朋友托人来讲，他已经办好了入境证，卽日将赴台湾，但是他客居香江，资斧已尽，连船票钱都凑不齐了，无可奈何，他向杜月笙借三百元港币。
马连良在大陆沦陷以后，曾经翩然抵港，唱过一阵子，在这段时期他不论怎样忙碌紧张，三日两头必定会跑一趟坚尼地台，给老夫子请安。杜公馆每星期五的平剧清唱小集，他祇要有空，必来参加，马连良一到杜公馆，由于他有说有笑，讲讲唱唱，使得门庭冷落车马稀的杜公馆立时热闹起来，杜月笙的八个儿子、要好朋友、左右从人个个会哼几句，家中还有姚玉兰与孟冬皇，这许多人都和马连良要好，他们常在一道说笑、吊嗓、拍照，杜月笙是素来清净不了最喜热闹的，因此马连良一来往往使他精神焕发，心情开朗，小毛病一时全忘却了，那眞比打针吃药尤其有効。
从此他十分关心上海朋友、各地难民住在香港的情况，时常主动探听朋友们的消息，有困难的便命人送几个钱去，钱不多，但是雪中送炭，份外令人心感，杜月笙渐渐的对旅港上海人的近况有所了解。上海人逃难抵港约可分为三种类型，上焉者有眼光，有魄力，也有资本，他们一到香港立定脚跟便办事业，譬如杜月笙的老朋友吴昆生和陆菊荪合办规模庞大的「纬纶纱厂」，王启宇办一片「香港纱厂」，都办得相当的成功，不但使自己立于不败之地，而且纱厂职工还容纳了不少上海来人。
原来此公是重庆富翁之一，生意、房地、山亩，多得不可胜计，杜月笙旅渝时期常去他家里，一间富丽堂皇的客厅，面积和布置可与大跳舞厅媲美。在香港诚然是逃难，但是杜月笙对于他连三百元港币也要开口告贷，委实有点出乎意外。
于是来人告诉他说：
杜月笙在香港曾经打破一项纪录，那便是他竟能使香港的大法官，屈驾到他坚尼地台家中来，而且还一直走到他的床面前，就把他的房间作为「法庭」，完成一次香港史上前所未有的「庭讯」。
平剧名须生马连良，多年来一直受到杜月笙的关照，对杜月笙敬之如父执，平时相处，和家人父子一般的亲密，杜月笙的恒社子弟中，大概就数马连良的平剧造诣成就为第一，因此一生嗜爱皮黄的杜月笙，对他这位高足极是爱护得很。抗战时期，马连良在沦陷区里唱过戏，胜利后有人指他腼颜事敌，使他不获继续登台演唱，便由杜月笙为之大力缓颊，马连良乃能在胜利以后独步京沪，红极一时。所以民国三十六年杜月笙做六十大寿，南北名伶名票演唱十天，马连良和梅兰芳两位伶王，确实是卖尽了气力。十天义务戏里除了孟小冬登台的两场，马连良曾将他的拿手好戏如「龙凤呈祥」、「打渔杀家」接连的各唱双出，同时还把他在中国大戏院演出的班底，尽出精英，报効师门。
有此几层缘故，当上海人逃难抵港之初，香港人冷眼旁观上海客花花绿绿的钞票满天飞，成千上百，尽情挥霍，当年的游乐场合，豪华餐馆，几乎尽是上海人的天下，然而曾几何时，香港人便「眼看他掼钞票，眼看他钱光了」，从青山酒店、观光旅馆搬进了亭子间、租铺位、困地板、扶梯的比比皆是，当他们阮囊羞涩，衣食无着，立可发现香港绝非上海，同乡人自顾不暇，本地广佬言语不通，素无交情，想借几角港纸到摊头上吃一碗饭，也是大难
杜月笙说三百块钱拿不出手，他数了一千港纸，接济那位重庆朋友，让他买好船票到台湾以后，手头还有一点余钱。
中焉者忽视了反共抗俄是一场长期战争，他们挟着大批金钞而来，抵达香港这个欢乐世界，于是声色犬马，酒食征逐，心中比方到香港是来白相相的，过不多久国军反攻就可以重返黄浦滩。殊不知住在香港的时间一久，酖于游乐沉缅越来越深，终于「床头黄金尽，壮士无颜色」，为了一日三餐每天逡巡于酒楼茶座跑马地，幸而遇见一位熟朋友，那怕是一元港纸借到手都很满足，因为又可以混过一天半日了。
「香港居，太不易」
不过，在香港的名流耆彦，太平绅士，如国民革命军前粤军总司令许崇智，和德高望重的周埈年等，仰慕杜月笙的为人，倾心结交，还都曾到坚尼地台杜公馆来登门拜访，杜月笙碍以抱病之躯，始终得不着机会回拜，但是这些香港的巨绅名流都能了解他身不由己的苦衷，丝毫不以为忤。不仅如此，杜月笙在香港倘有任何困难，他们每每挺身而出，为杜月笙奔走排解，解决问题，凡此情谊，俱使杜月笙份外感激。
「客居在外，叫天天不应，叫地地不灵，一钱逼死英雄汉，这有什么办法？如今像他这样穷途潦倒的百万富翁，香港市面上正多着呢？」
