Er liegt am Fuße der Westberge, direkt im Norden des Xiangshan-Parks.

Sein Kennzeichen ist die so genannte Diamantenthron-Pagode, die man schon von weitem über die grünen Baumwipfel hinweg erkennen kann.

Das Kloster wurde 1366 gegründet, kurz vor dem Zusammenbruch der Mongolen-Herrschaft. Zwei mächtige Eunuchen, Yu Jing und Wei Zhongxian (1568 - 1627) haben es während der ming-Dynastie in verschiedenen Epochen erweitert, in dem Bemühen, es zu ihrer Grablege zu machen, was ihnen nicht gelang.

Während der Mandschurenherrschaft wurde das Kloster im Jahre 1748 in großem Stil umgebaut. Damals wurden die Arhat-Halle, die einem Bauwerk des Jingci-Klosters in Hangzhou nachempfunden wurde, und die Diamantenthron-Pagode im Westteil des Klosterareals errichtet. Vor 1949 war das Kloster recht heruntergekommen; die Bauwerke wurden seit 1954 renoviert und frisch gestrichen. Zudem wurde die Sun-Yat-sen-Gedenkhalle neu errichtet, um dem großen Pionier der chinesischen Revolution Referenz zu erweisen.

Bei Betreten des Klosterareals fallen links und Rechts Glocken und Trommelturm auf.

Wei Zhongxiang war in eine Position der Macht aufgerückt, weil er in das Amt eines Lebensmittellieferanten für die Konkubine eines Enkelsohnes des Wanli-Kaisers eingerückt war. Später, in den zwanziger Jahren des 17. Jahrhunderts, dominierte er das Legen am Hofe dieses Wanli-Enkels. Auf dem Höhepunkt seines Einflusses war Wei Zhongxiang in der Lage, historische Darstellungen zu veröffentlichen, die seine Feinde in der Bürokratie herabsetzten, und den Befehl zu geben, über ganz China Tempel seines Namens zu errichten.

Das Biyun-Kloster wurde 2001 zum nationalen Kulturschutzobjekt erklärt.