在进行转账时，需要填写备注信息，以方便对方确认转账信息。通常情况下，如果填写了正确的转账备注，就不需要退回。比如，填写了订单号、商品名称、服务内容等信息，对方就可以很快确认转账目的，如果出现退款的情况，也会更加方便。

但如果转账备注填写错误，或者没有填写任何信息，对方就无法确认转账目的，需要进行退回操作，以避免误操作或诈骗等问题的发生。

因此，在进行转账时，一定要认真填写备注信息，避免出现不必要的退回操作。