原来这青红两帮，都是著名匪徒团结成功的绝大大团体。
青帮中大半是兵勇、差役、流氓一类人；红帮中大半是强盗、盐枭、光蛋一类人。彼中人称为青红不分家，所以每欲人红帮的，必须先入青帮，就是作奸犯科，红帮也比青帮利害。
当乾隆年间，苗蛮作乱，高宗帝屡次遣将出师，屡次被挫，无法扑灭。于是张挂黄榜，招贤平蛮。忽有一个僧人名叫罗祖的，揭榜应招。到了边地上，并不选将挑兵，只建了一座高台，礼忏拜佛，挟着不生不灭大慈大悲的意旨，居然劝退苗蛮。高宗闻之大喜，意欲将罗祖召进京师，加赐法号。罗祖不愿受封，仍旧留居边地修养。
彼时有姓翁的、姓钱的、姓潘的三个人敬慕罗祖大名，结伴前往求道。见了罗祖，道达诚意，罗祖不应，三人掬诚固求。
罗祖被缠不过，折苇为航，渡江逃避。三人赶忙乘船追赶，直到如今，那地方就唤做了芦苇江。当下翁、钱、潘三人直追到杭州武陵门外哑巴桥左近，忽见一山挡路，那座山却有一个山洞，罗祖直奔山洞，竟然蛇行而人。三人心想跟随入洞，怎奈洞口奇狭，不能容身。回到洞顶，俯察四周，怕的就是这个洞是穿山洞，罗祖从这里进去，从那边出来。瞧了一遍，见并无第二个山洞，知道罗祖仍在洞中，三人都放了心，于是长跪洞外，掬诚恳求。
经历三日三夜，粒米不食，滴水不饮，忽见洞中出来一个童子，向三人道：“你们都为求道而来，现在奉罗祖法谕，我们须跪至红雪齐腰，芦穿膝盖，方能与罗祖有师徒之分。”
三人听罢大骇，暗忖世界上断没有天飞红雪庐穿膝盖之事，明知道是罗祖决绝的表示，于是膝行而前，哀恳童子，入告祖师，俯鉴我们热忱，推恩准予收录。童子点头而入，又经历了数昼夜，消息沉沉，依然杳无希望。时正腊月上旬，严寒侵入肌骨，这三个人并不曾多带得衣服，跪在阴森萧瑟的山洞口，偏偏的六出花飞，天降大雪，不觉都冻僵得了。
等到将近五更，积雪已逾一尺，亏得一到天明，晴光大放，雪止风和，三人得着了暖气，悠悠醒转，忽见身旁的积雪，红白相间，颜色非常鲜艳，不禁大喜过望道：“感谢皇天，红雪齐腰的法谕，已经验了！罗祖就要收我们了。”
且住，雪色红艳，难道果是三人至诚格天么？原来三人为了寒极无衣，不得已，摘取田间稻草，裹在身上挡寒，稻中之谷，恰巧坠在发际，雪后树头飞鸟没处觅食，遥见三人发际遗有谷粒，争下喙食，皮破血流，白雪顿时变成红色。三人一来为冻得僵了，二来为一心注在罗祖身上，所以毫未觉着。当下大喜过望，忽觉两腿麻木，站起身来瞧时，见地面上突出的芦根，已经钻入膝盖，膝盖上也流出血来，染得地下的雪愈益红了。三人都不禁感极而泣，相语道：“芦穿膝盖的话又应了！”
道言未绝，山洞中走出一人，正是罗祖。罗祖道：“孺子真可教，来随我入洞学道。”
说也奇怪，跟着罗祖，这山下竟然并不狭校三人到了洞中，日从罗祖学习修养，一住数月。
一日，罗祖忽语三人道：“今日，皇家又在悬挂黄榜，征求天下奇人侠士了，为的却是运粮事情。就为出路不太平，运粮船只，屡遭寇劫，运粮官员，屡典王章，所以钦悬黄榜，招致贤能，你们三人，可赶快下山，揭榜应招。倘然路途遇险，我自前来相助。前程远大，万勿迟疑！”
三人拜聆之下，颇觉依恋不舍，罗祖拂袖驱逐，始各下山进京。直到现在，那山脚下还有座潘安庙，内塑罗祖神像，青帮弟兄过路的，必尽入庙礼拜，此系后话。
当下翁、钱、潘三人行到京师，才知已隔人世三十余年！
问旁人时，果然悬有黄榜，于是如法揭榜，钦准三人各招徒弟一千三百二十六人，合带运粮船一千九百九十只零半，于是三人就立起一个总帮来，名叫江淮四帮。又把总帮分为三房，是翁大房，钱二房，潘三房，支分派别，各有师承，不相混杂。
说也奇怪，当时这翁、钱、潘三人出任运粮之后，果然盗风尽息，粮户不惊。朝廷异常嘉要，立召三人入京，赐以官爵，许之立谱，广招徒弟，报效皇家。从此，三人就公立一堂，题名叫做“潘安堂”，各自招收徒弟，徒弟收徒子，徒子收徒孙，声势日大。于是又公议立一个总名，就是“青帮”两字。青帮中人称罗祖为直祖，称翁、钱、潘三人为三位主爷，主爷大约就是祖师的意义。
当下翁、钱、潘三人设立了潘安堂之后，就开堂放布，招收徒弟，并立有十大帮规，二十四个字辈，范围徒众。那十大帮规是：一、不欺师灭祖；二、不搅乱帮规；三、不藐视前人；四、不江湖乱道；五、不扒灰放笼；六、不引水带线；七、不奸盗邪淫；八、须有福同享；九、须有难同当；十、须仁义礼智信。二十四个字辈是：“圆明心理大通悟觉普门开放万象依归罗祖真传佛法玄妙”，一字一代，宛然是人