觀世音菩薩來到天臺山，東遊西玩，不知不覺的已經玩了好幾天，每天都有不少的羅漢請他吃羅漢齋，同時又看羅漢們不是刀耕火種，就是靜坐參禪，不覺從心中生起一種敬慕心來，心想我在這裡整天的受他們供養，實在有點過意不去，一心想要對這名山，有所報效，也好留一點「聖蹟」才不負此行。有一天對他們羅漢說：「貴山雖有寬暢的大殿，但缺一座高大的寶塔，這是美中不足，不夠莊嚴。我建議你們，能再建造一座寶塔，那就更壯觀了！」其中有一位羅漢插嘴說道：「本山沒有寶塔，並不大要緊，最感頭痛的是我們千丈岩缺少一座交通橋，實在太不方便，人家來來去去的，總要繞一個大圈子，在我看起來，不如先造橋，然後造塔。」觀音菩薩，為欲成就這一件好事，便帶著試探的口吻對他們說：「造塔是供養佛的，眾生見了禮拜旋繞，有莫大的功德；橋雖重要，可是塔也不能少，現在我們可以分頭工作，你們五百位羅漢，共同造塔，我一個人來替你們造一座橋，好不好？」五百羅漢，一聽此話興奮極了，齊聲說道：「好呀！好呀！承蒙大菩薩不棄，發心幫助我們，這再好沒有了。」菩薩又說：「我們不妨來個競賽，限定一夜之中，要把寶塔和大橋造成功，看誰的工作先完成？」羅漢們都是有大神通的人，這一點小事算得了什麼，一致的答道：「好！好！說做就做，今天夜裡我們就幹吧！」
他們兩方面，各人心中皆有各自的打算，觀音菩薩心想，要建築一座高大的寶塔，一夜的時間看他們到那裡運這些磚木材料來？我想他們是不容易竣工的，我只要如此這般，這般如此，一座大橋就能造成功。羅漢們意謂：難道我們五百位大阿羅漢，輸給一個觀世音菩薩？俗說：「雙手難比四拳，你看，千丈岩的地方，有這樣高，這麼闊，而想造一座大橋，一夜的工程，不怕你有什麼通天的本領，也是不能完成的。」因此雙方皆存了輕估對方的心理，都以為自己有辦法，了不起。
當更深夜靜的時候，國清寺裡送出清脆悅耳的鐘聲，大家也很熟習這是大眾的號令（佛家的內行話叫做開大禁，就是招呼大眾睡覺的號令）。羅漢們等到大家都睡了覺，便開始工作，他們這時大顯神通，搬磚運石，搬的搬，砌的砌，忙得不亦樂乎，觀世音菩薩為了好奇心驅使，躲在山凹裡偷看他們如何建造寶塔，在黑暗中只見人頭鑽動，來來往往的忙個不休，他們真是神通廣大，很快的時間，就把一座寶塔起得很高，真不愧是得了六神通的阿羅漢，不能再輕視他們無能了。這時觀音菩薩忽然想起，自己是和人家比賽的，怎麼老看著人家造塔，自己造橋的工作還沒有動工，天已經差不多四更左右，如果再不動手的話，豈不是要打敗仗了嗎？他趕快的一個飛身，跨上高山，顯起大菩薩的神通妙法來，兩腳跨在「千丈岩」的兩岸，雙手拉著兩邊山頭，往中間合，說也奇怪，山上的石頭見了他好像和好的麵粉一樣的柔軟，兩個山頭，合成一起，就成為歷史上千古有名的天臺山上的「石梁橋」。觀世音菩薩，把橋造好了，外邊的天還沒有亮，再去看看羅漢們的寶塔，還沒有峻工，菩薩忽然故意的和這班羅漢們，開一次玩笑，躲在山凹裡學起雄雞的聲音，喔喔的啼個不休，羅漢們正忙得起勁的當兒，只有一個寶塔頂沒有蓋上去，忽然聽到金雞報曉的聲音，以為是金雞三唱五更明，不管工作完成不完成，時間一到就要住手，因此寶塔的頂沒有蓋上去，成為歷史上有名的五百羅漢一夜建成的「通天塔」。同時也有人說：「羅漢的功德沒有菩薩圓滿，所以寶塔不能完工。」
第二天，天臺山附近城市裡的居民，屋上的煙囪都不翼而飛了，大家早上起來燒早飯，因為沒有了煙囪，熏了滿屋的煙氣，弄得大家莫名其妙，沒有辦法，只好在牆上開個洞排煙，起初以為一家如此，那知全城皆然，每家屋項上的煙囪的磚頭都沒有，不知被什麼人取去了，經過報告地方政府調查的結果，原來天臺山國清寺忽然多了一座很高大的「通天塔」。大家聽了都湧了去看，寶塔的磚頭很不整齊，大大小小，裡裡外外，黑黑白白，煞是奇觀。這時大家才知道全城的磚頭皆到了這裡來造了寶塔，同時也都知道是天臺山的五百羅漢顯的神通，他們不但不怒恨，反而更加敬佩羅漢們的法力無邊，因此習慣成了自然，一直到今天，天臺山附近城市的居民屋上都沒有煙囪，這也成為那個地方的風格，同時我們也多知道一點地方常識，這就是天臺山地方沒有煙囪的由來。
五百羅漢因為所造的寶塔，一夜未能竣工，成為千古遺憾！後來查明還是觀世音菩薩暗中與他們開的玩笑，使他們工作不能完成，功虧一簣，這個玩笑開得真大，真是豈有此理！羅漢們心想你為什麼到我們天臺山來欺人，使我們五百人都被你愚弄，倒了架子，要我們當場現醜，今後我們有何面目見人？他們越想越惱，大家因此開了一次緊急會議，目的是「南海普陀山觀音菩薩欺人太甚，我們這次吃他虧，倒了架子，我們應該如何報復他一下？」其中有一位羅漢站起來建議說：「他能到我們天臺山和我們取笑，教我們倒了架子，我們也可以一齊到普陀山去鬧他一個天翻地覆，方出我們心頭之恨。」大家一齊答道：「對！對！我們說去就去，乘著普陀山二月裡是大香會期，二月十九又是觀音誕，我們就在這時候去正好，乘來山進香的客人特別多，我們可以混進去，使他們人不知鬼不覺，我們可以看時行事。」說罷，紛紛的各顯神通，騰雲駕霧的直奔普陀山而去。