联合体在缴纳履约保证金的时候，是由各单位组成的联合体一同缴纳的，具体缴纳方式，应当是联合体自行决定联合体各单位的出资比例，然后成立联合体账户，各单位将自己应当缴纳的资金存入联合体账户，然后由联合体账户向招标单位指定的账户转入履约保证金。