正确答案：胡赤儿

答案解析：A. 吕布是董卓的部将，与牛辅并无直接关系，因此不可能是杀死牛辅的人。

B. 李肃是董卓的部将，与牛辅并无直接关系，因此不可能是杀死牛辅的人。

C. 李傕是与董卓一同掌握朝政的权臣之一，与牛辅并无直接关系，因此不可能是杀死牛辅的人。

D. 胡赤儿是董卓的部将，曾在董卓死后与李傕等人一同发动政变，杀死了牛辅。胡赤儿是杀死牛辅的人。