百姓开初不说，后来曹操暴露了他新任济南相的身份，并说他此来的目的，正是为了整肃济南种种恶俗劣行。
　　一妇女这才忍不住痛哭失声，向曹操历数了“天龙教”强迫百姓入教的暴行。凡不入教者，即有被骚扰打杀的可能；凡入教者，除一次性交入教费银五十两外，还要每月进祠上香敬贡一次，贡银不得低于五两。也就是每个教民除第一次交五十两白银外，每月还要交五两白银。所有百姓都为此叫苦不迭，许多人被搞得家破人亡。也有实在交纳不起的，深夜举家远逃。但要是被“天龙教”的人抓住，就要以亵渎龙神的名义，在祠门前处死。
　　曹操听了震惊不已，当即安抚几位百姓，说他定于近日整肃此事。
　　一个中年男子出于好心，就劝曹操道：“大人有所不知，这陈天龙是得刘章宠幸的，而刘章是皇亲，权势很大，大人怕是不好对付啊……”曹操听了十分生气，但他按压住了怒火，他不必气壮如牛，去说大话，而是要以实际的行动，使老百姓亲眼见到。于是他十分冷静地点了点头，说：“我知道了，你们不必多虑，我自有办法。”
　　曹操当天就拜访刘章。刘章对曹操的名字早有知晓，当年曹操在洛阳北城门处死蹇硕叔父蹇昌，消息就很快传到刘章耳朵里。这事连同曹操的名字，就深深烙印在了心中。所以听说曹操任济南相时，他心中就有些打鼓。这时，听仆人来报，曹操来访，正在后厅静心养息不愿见人的刘章不由得一惊，连忙出迎。
　　刘章从未见过曹操，心想不知是何等高大威严的一个人物。及至见了，才大为吃惊，居然是一个矮小肤黑的人。但是，虽矮却很壮实，肤黑却两眼有神气。特别是说起话来，声音朗朗，有一股不易觉察的逼人气势，使听者不知不觉中为之折服。因此，刘章又有些畏怯了，特别是联想到他为骑都尉率几千骑兵驰骋冲杀的壮举，更是胆寒生畏。
　　曹操自然是以尊敬的口吻向刘章问好，刘章当然也对曹操表示了热烈的欢迎之意。二人一阵寒暄，互相交谈了洛阳和济南的一些情况。最后，曹操拱手道：“此次曹操初任济南相，还望皇亲大力支持。曹操虽才力不济，但为汉室天下，努力尽心尽职是办得到的。今既来之，则必安之，则必尽责为之，皇亲定当以汉室社稷为重，不吝指教才是。”
　　刘章道：“那是当然，那是当然。曹相乃能人也，今朝廷既委以此任，想必已是看中了曹公的才干。此真济南人之幸也！”
　　曹操哈哈笑了：“皇亲真是夸奖了。不过我决不会有负朝廷之命，定当秉公办事，努力治好济南。日后如有不妥之处，还望皇亲以国家为重，多加包涵。”
　　刘章不由得心中一颤，曹操话中那一股逼人之气，犹如强风一道，直穿人心。于是他除了附和，不知再说什么的好，直到曹操起身告辞，他还没有回过神来。
　　事隔一天，济南城内就贴出了一道禁令，禁令说：我汉室以孔学为尊，儒术为效，其余一切妖言邪说，尽皆禁止。凡有任何教派组织，从禁令发布之日起，即停止活动，三日之内全部解散。违令者一律处以重刑。
　　禁令一出，济南百姓，尽皆拍手称快。各种教派多是民间组织，以自愿为主，并不强迫，因此逐一解散也并不难。唯独天龙教，已成大气候，并且组织严密，具有强权，若它能解散，百姓怎不高兴?但私下里又很担心，天龙教主与刘章关系亲密非同一般，曹操有这个能耐把“天龙教”解散吗?
　　第一天过去了，天龙教祠仍是香烟缭绕，虽上香进贡的人比往日少了许多，但还是有人来。因为天龙教祠并没有关上大门，那些十分害怕陈天龙的胆小百姓，当然不敢不来上香。
　　显然陈天龙是仗势刘章，他在心中掂量过，你个济南相，怎敢和皇亲抗衡?所以他不仅不关大门，反而驱使几个小头目不断进祠上香，以维持场面。
　　第二天过去了，百姓来上香进贡就比第一天多了。既然教祠内香火未断，就说明天龙教是不怕这道禁令的，所以第一日未来的百姓，第二日又赶来了。
　　到第三天，天龙教祠上香进贡的人大增，百姓纷纷赶来，表示自己的“忠心”，生怕陈天龙怪罪下来，一家人便不得安宁。
　　正当天龙教教祠香烟如雾，人声鼎沸之时，一大队全副武装的士兵来了，曹操骑在一匹高头大马上，腰间佩剑，左手执鞭。
　　祠外百姓最先看见，纷纷躲闪。曹操并不管百姓，扬鞭一指，军士便分作两支，包围了教祠。祠内上香者这才知道，顿时一片惊慌失措。
　　曹操策马来到教祠门前，喝道：“百姓人等，不必惊惶。今天龙教教祠不遵禁令，特来查封。除教主及教祠头目，余等一概无事，依次离开教祠便罢。”
　　曹操话一说完，上香者就纷纷涌向门外。曹操叫军士将百姓列队，一一出门，凡是头目，一概拘留。原来曹操早选了几个识得天龙教大小头目的人掺在军士中。
　　因此，包括陈天龙在内的天龙教大小头目十余人，一个也没有漏掉。全部用绳索捆了，结成一串。然后，收缴教祠内的所有银两，再将教祠大门以封条封了。
　　刚刚关押了陈天龙等人，曹操即刻又草拟第二道禁令，禁令说：自前禁令发布，所有教派，自行停止，然有极少顽固之徒，仍是置若罔闻。今已第三日最后期限，凡有迄未从令者，一概拘禁，将分别情形，处以重罚。罚处之事，属官府内务，任何人不得干预，凡徇私说情者，打五十军棍。