赵福来当时就跑回衙门堵人，率先开门，接了这送贼的商人，随后就趁着这商人不主意，对其后脑打了一石头。赵福来把同伙救下后，便把告状之人悄悄拖到半路上放着，伪装成他喝多受伤，谁知这人第二日死了。
这之后，他们便消停了一段时间，不偷本地人，而去偷一些来往泰芜县的外地商人。再碰到有人来报案，俩衙差就接下诉状，打发人回去，因知道他们不会在此处久呆，便也不上报，就此瞒下来。偶尔就算有人戳破此事，二人就拿“忘了”做借口，和县丞赔罪，最多受个训骂几句就罢了。
赵福来和王春生做盗贼很久，自然十分熟悉泰芜县的情况。
二人发觉在衙门口堵人的便利之后，还没存什么奇怪的心思。后来竟偶然见这宅院后身有一处地方，和衙门看起来差不多。刚巧宅院主人有意将宅子易手，而当时百姓之中还疯传起红衣女子死在衙门门口的故事。二人才起了心思，心想他们是夜里盗窃的梁上君子，出了事儿也必定是夜里被人送官。若是耍些巧心思，让他们