当周武王攻克朝歌之初，对于怎样处置商朝遗留下来的权臣贵族、官宦将士，能不能使局面稳定下来，武王心里还没有谱，因此有些担忧。为此，他曾同姜太公等商议。汉朝人刘向编撰的《说苑·贵法》里有这样一段文字记载：
“武王克殷，召太公而问曰：‘将奈其士众何？’太公对曰：‘臣闻爱其人者，兼爱屋上之乌；憎其人者，恶其余胥。咸刘厥敌，使靡有余，何如？’”大意是说：周武王打败了殷商，召见姜太公，问道：“该怎样对待他们的人员呢？”太公答道：“我听说，如果喜爱那个人，就连带喜爱他屋上的乌鸦；如果憎恨那个人，就连带夺来他的仆从家吏。全部杀尽敌对分子，让他们一个也不留，您看怎样？”
原文中所谓“余胥”，是指地位最低下的小吏，奴隶主贵族的管家之类。（余，末等的意思；胥；胥吏。）
汉朝人伏胜编撰的《尚书大传·大战》里也有类似的记载：“纣死，武王惶惶若天下之未定。召太公而问曰：‘入殷奈何：’太公曰：‘臣闻之也；爱人者，兼其屋上之乌；不爱人者，及其胥余。’”
这段记载，与《说苑》所载内容相仿。不过“余胥”一词写作“胥余”，两者的含意也不一样。“胥余”已不属胥史等级，而是胥吏以外，比“余胥”更加低下的奴隶或刑徒了。例如商纣王时的“太师”箕子，因对纣王不满，被囚禁而装疯，甘当奴隶，所以《庄子》称他为“胥余”。
此外，《韩诗外传》、《六韬逸文》也都有关于周武王和姜太公上述那段谈话的记载，内容基本相同。由于这个传说，就产生了“爱屋及乌”这句成语。
我国自古流传一种迷信习俗，以为乌鸦是“不祥之鸟”，它落到谁家的屋上，谁家就要遭遇不幸。我国最古的一部诗歌集《诗经》的《小雅》部分，题为《正月》的一首诗里，就有“瞻乌爰止，于谁之家”。可见古人多厌恶乌鸦，而绝少有人爱它的。所谓“爱屋及乌”，是说：由于爱那个人，因而连他家屋上的乌鸦都不以为不祥，不觉得讨厌了。这句成语，一向被人们用作推爱的比喻。因为深爱某人，从而连带喜爱他的亲属朋友等人或其他东西，就叫做“爱屋及乌”，或称这样的推爱为“屋乌之爱”。