来了肃州后，姜留听哥哥和姜宝他们零星提过几回，对呼延图家里的情况也有了些了解。
但凡有人的地方，就有争斗。呼延一族在匈奴算是大族，呼延图的祖父是呼延氏的族长，呼延图年轻时聪明好学，很得祖父喜爱。呼延图的伯父怕父亲把族长之位传给呼延图的父亲，便设计想毁了呼延图，让父亲厌弃呼延图一家。
呼延图的伯父所设计策很是老套，便是将呼延图灌醉，扔进一户贫贱牧羊人的女儿房中，再逼他娶贫贱牧羊女为妻。
但护眼提识破了他的计策，设了个计中计，将他堂兄呼延图扔了进去。
呼延图的大伯带人抓奸，却抓到了自己的儿子，父子俩一怒之下将那户人家全杀了，并将此事嫁祸给了呼延图，牧羊人家的邻居也站出来作证，说他看到呼延图半夜翻墙。年轻的呼延图百口莫辩之时，一个从小就喜欢揍他的姑娘出来作证，说昨夜她一直跟呼延图在一起。
这个姑娘，后来便成了呼延图的妻子。后来，呼延图帮着父亲夺下呼延一族的族长之位。再后，相似的一幕又在呼延图与他兄长之间上演。
呼延图的兄长怕呼延图抢走他的族长之位，与呼延图的伯父勾结，对呼延图百般算计，连同呼延图妻子一族也不放过，手段十分狠辣。呼延图本就无意族长之位，更不想拖累妻族，便假装中了他兄长的算计，“逃亡”大周，这一走便是二十多年。
呼延图不在匈奴争夺族长之位，他的大哥自然不会再针对呼延图的妻儿，他的妻儿算是过上了安稳日子。
呼延图在大周流浪多年，后来因缘际会入姜家为武师，才算安定下来。他从心底喜欢在姜家兄弟和睦，吃喝不愁又不用操心的日子，所以姜二爷被派到肃州时，呼延图没跟来；待到姜留出京时，他怕姜留出事才跟到了肃州，又被裘叔委以重任，派去游说匈奴单于。
此时，呼延图的兄长已是呼延一组的族长了，呼延图的儿子也已娶妻生子。呼延图的妻子埋怨他一走便是这么多年，对他横挑鼻子竖挑眼，骂不过瘾便动手打。呼延图骂不过她，因心里有愧又不能跟她动真格的，只能任打任骂。
前几天，因与出去跟朋友多喝了几碗酒被老婆打了一顿后，呼延图一怒之下骑马跑来大周投奔姜二爷。得知姜二爷已经启程要回京，他毫不犹豫地追了上来，要跟他回去。
姜留知道爹爹看呼延图不顺眼，其实呼延图这种一走了之的行径，确实不丈夫。但毕竟有七年的主仆情谊在这摆着，直接赶他回去也不合适