锦衣卫作为朝廷中一个重要机关，分为两个抚司，即南镇抚司和北镇抚司。北镇抚司衙门驻扎在京城，南镇抚司则在江苏。因为有杨廷和的大力举荐，葛彪很快成为锦衣卫千户，同时为了避嫌，葛彪被安排在了南镇抚司。
当时提督锦衣卫的是江彬，杨廷和和江彬从来都是水火不容。要不是江彬在正德皇帝跟前一路走红，说不准杨廷和早就把江彬收拾了。江彬也知道和杨廷和还有朝中的一众老臣是尿不到一壶了，索性也就不把目光放在他们身上。而是用力抱紧正德的大腿，反正是上面有皇上罩着他，谁也别想把他怎么样。
让杨廷和和绮梦非常失望的是葛彪竟然和江彬走的非常近。虽然江彬是他的顶头上司，但你葛彪就怕他吗？难道你有杨廷和在你背后撑腰，江彬还能把你怎么样呀？
葛彪几乎唯江彬之命马首是瞻了，好像成了江彬的一条忠实走狗，这让绮梦不但对葛彪产生了很大的看法，同时也是暗暗骂葛彪乃忘恩负义之徒。
更是让绮梦对葛彪不齿的是葛彪不知道在什么时候竟然和湖广安陆的兴王府有了联络。
安陆是个非常小的地方，兴王朱佑杬虽然是个很老实精明的王爷，但总的说在大明也是偏安一隅，属于地位非常低下的王爷。朝中大臣几乎早已把这位王爷给忘了的样子。
俗话说人往高处走，水往低处流。江彬是正德皇帝前的红人，威风八面，葛彪跟着他也就罢了。可偏偏又是和一个谁也不看好的王爷有了关系。这就有点儿不精明了。
要知道，和一个王爷走的近了，那是一点儿好处也没有的。大明的王爷从来都是没有任何权利的。皇帝对王爷们盯的是非常紧的。只要是稍稍异动，那一准是被收拾的下场。江西宁王造反，朝廷旋即便是举大军平乱，这就很是说明问题。
在杨廷和和绮梦看来，葛彪跟着一个谁也不看好的王爷。这是没有任何前途的。本来很好的一个青年，大好前途就这样没了。葛彪在可气之余，又是有点儿可怜了。
葛彪本来是对绮梦暗暗生出了一些情愫的。说来聪明的绮梦也是有所察觉。
当然了，作为杨廷和的女儿。作为名门之女，杨绮梦的眼光也是很高的。不得不说葛彪是个很优秀的青年，但绮梦却是对他没有半点儿意思。
在绮梦心里是把葛彪完完全全当成一个哥哥来看待的。可当葛彪和江彬走的很近，背地里又悄悄靠上了兴王之后便是很少回到杨廷和家中了。
这样看来，葛彪在很大程度上倒有些忘恩负义了。这让绮梦又怎么能对他有了好感呢？尤其是这两年，葛彪干脆长期漂流在外，他甚至都惹的杨廷和很不高兴了。
于是乎，葛彪那种对绮梦的单相思似得男女之情便是死在了萌芽之中。
葛彪毕竟是一个大男人，拿得起放得下，在绮梦把终身许给秦厉之后，葛彪更是在暗地里送上了他最为诚挚的祝福。