1984年，潘源良加入电影公司任编剧；1985年加入潘迪生的德宝电影公司，任编剧及导演等工作，唯一一出执导的作品是由李丽珍、黄耀明主演的《恋爱季节》，有传潘源良为了李丽珍而与太太离婚，更为李丽珍作了一首《最爱是谁》凭歌寄意，其中一句歌词“别了她原为了你，留住爱亦留住罪”正反映出当时潘源良的心声。不过有“浪子词人”和“情场浪子”之称的潘源良最后也留不住李丽珍。

    曾是填词界尖子的潘源良后期事业走下坡，99年在有线开始解说生涯，03年与比他年轻十数载的有线体育节目主持陈欣欣拍拖，不过潘源良从未亲口承认女友身分。