佛门早期盛行的是小乘佛法，众佛子出世修行，一心度己，使得佛门一向与世无争，不曾与牛魔王等江湖豪强产生过摩擦，因此不在牛魔王的挑战名单上。
观音菩萨是佛门大德，牛魔王自然不想与她结怨，他只是不明白一向不问世事的佛门为何近年来屡屡出手多管闲事，先是和美猴王过不去，现在又和他们几个过不去。
他哪里知道，自佛祖拈花传法以来，小乘佛法日渐没落，大乘佛法日渐兴起，佛门从此要入世度人，管管世间闲事了。
狮驼王比较务实，劝牛魔王道：“大哥，咱忍一忍罢，时机未到前都得忍呀。”
牛魔王把牛眼珠子一瞪，喝道：“咱就是不想忍才要造反的，如果啥都能忍还造个毛的反？”
狮驼王咕哝道：“难道不是为了今日他骑我，来日我骑他才造反的么？今天忍他不就是为了将来骑他么？”
然而牛魔王根本听不进他的劝告，问道：“你要学老五吗？也要当逃兵吗？”
狮驼王只得摇头道：“不。”
“那好，赶紧的，一起追。”
于是四大妖王一路追着菩萨的祥云，一直追到南海。