到1954年，曾经脱离松下公司到一个小灯泡厂工作。当时山下的顶头上司谷村博藏(其后当上了松下副经理、山下的同乡)也是脱离松下单干的，山下就是跟谷村去的。山下自己回忆说：“我当时是糊里糊涂进松下公司的。所以谷村一劝说，没有多考虑就辞掉了松下的工作。”“我是个怯弱的老实人！是极平常的职员。”然而谷村的公司没干上两三年就垮了，谷村又回到松下。山下没回去，转到另外一个灯泡厂。对于怯弱的人来讲，一旦离开的地方，是不情愿再回去的。山下的那个小工厂里，从制造、销售到当经理都是他一个人说了算。山下回顾说：“那里的生活是充实的。当时真想在那里干一辈子。”假如是这样，今天松下就没有山下经理了。在山下脱离松下的第六年，谷村希望山下回到松下与菲利浦联合企业。当时该公司正在开发电子设备产品，急需中层管理人才。

    山下确实是个老实人，他几次回绝了谷村的招聘。不过，他最终没能按自己的意志坚持下去，他被谷村说服了，重新回到了松下。

    从此，山下变了，他从一个老实脆弱的人，变成一个不屈不挠的人，这是经受挫折与痛苦之后磨炼出来的。

    谷村当时在与菲利浦公司联营的松下电子厂。山下被拉去后，曾当过电子管理部长、零件厂厂长。他把菲利浦公司的经营管理方法学到手，其后又出任西部电气常务。过了4年，他升任冷冻机事业部长。这中间他吃过许多苦，他后来回忆说：“西部电器、冷冻机事业部时代的经验对我来讲实在珍贵。当时，几次陷入困境，硬着头皮埋头苦干，总算自己感到扬眉吐气了。那正是我三四十岁阶段，做了超越自己能力的工作。”