各金剛乘學會以香港會最早成立。於上世紀五十年代初， 吐登喇嘛於香港弘法， 因 劉上師曾受　貢噶上師遙傳四灌，組設真如藏密院，亦擬歡迎　貢噶上師到來香港，傳授大手印法、大圓滿法。 劉師參與其事，受眾舉為秘書，但事與願違，最終未能奉迎法駕。時有李世華居士，戰後於　劉師返港不久，邀為之宣說般若心經，知　劉師迎　貢師之願未償，乃以自行組會為請，　劉師遂與一群對西藏密宗有深厚興趣者，如高大添、陳松漢、李福衡、謝卓如等，在華商會所聚會，籌組研修西藏密法之學術團體。遂於一九五三年七月七日，假宇宙會所正式成立「香港金剛乘學會」，並極力羅致諸賢。第一屆董事為李世華居士、　劉銳之上師、羅時憲教授、馮公夏居士、韋達碩士、高大添居士、謝卓如居士、黃庚世居士等，以李世華為首任會長。