一、投标保证金的退还时间

《工程建设项目施工招标投标办法》第六十三条规定，招标人最迟应当在与中标人签订合同后五日内，向中标人和未中标的投标人退还投标保证金及银行同期存款利息。

《中华人民共和国招标投标法实施条例》第三十一条，招标人终止招标的，应当及时发布公告，或者以书面形式通知被邀请的或者已经获取资格预审文件、招标文件的潜在投标人。已经发售资格预审文件、招标文件或者已经收取投标保证金的，招标人应当及时退还所收取的资格预审文件、招标文件的费用，以及所收取的投标保证金及银行同期存款利息。

《中华人民共和国招标投标法实施条例》第五十七条，招标人和中标人应当依照招标投标法和本条例的规定签订书面合同，合同的标的、价款、质量、履行期限等主要条款应当与招标文件和中标人的投标文件的内容一致。招标人和中标人不得再行订立背离合同实质性内容的其他协议。

二、投标保证金的含义

招标投标是一项严肃的法律活动，一旦招标人发出中标通知书，作出承诺，则合同即告成立，中标的投标人必须接受，并受到约束。否则，投标人就要承担合同订立过程中的缔约过失责任，就要承担投标保证金被招标人没收的法律后果.这实际上是对投标人违背诚实信用原则的一种惩罚。所以，投标保证金能够对投标人的投标行为产生约束作用，这是投标保证金最基本的功能。投标保证金是指在招标投标活动中，投标人随投标文件一同递交给招标人的一定形式、一定金额的投标责任担保。其主要保证投标人在递交投标文件后不得撤销投标文件，中标后不得无正当理由不与招标人订立合同，在签订合同时不得向招标人提出附加条件、或者不按照招标文件要求提交履约保证金，否则，招标人有权不予返还其递交的投标保证金。

三、投标保证金的退还

下列任何情况发生时，投标保证金将被没收：

(1)投标人在投标函格式中规定的投标有效期内撤回其投标;

(2)中标人在规定期限内未能：

(a)根据规定签订合同;或根据规定接受对错误的修正;

(b)根据规定提交履约保证金。

对于未中标的单位建设方应退回投标保证金，根据规定，投标人应提交规定金额的投标保证金，并作为其投标书的一部分。未中标人的投标保证金，将在买方与中标人签订合同后的5个工作日内退还。但是，下列任何情况发生时，投标保证金将被没收：

1、投标人在招标文件中规定的投标有效期内撤回其投标;

2、中标人在规定期限内未能：

(1)根据投标人按规定签订合同或按规定接受对错误的修正;

(2)根据招标文件规定未提交履约保证金。

3、投标人采用不正当的手段骗取中标。

因此，不存在以上没收情形的，投标保证金应当予以退还。

综上所述，如果投标人不存在法律规定的没收保证金的行为，则招标人最迟应当在书面合同签订后5日内向中标人和未中标的投标人退还投标保证金及银行同期存款利息。如果您在招标投标过程中遇到投标保证金支付和退还的纠纷，请及时与我们的律师联系，我们为您提供专业的法律服务，以更好地维护您的合法权益。