判决书下来，不能马上需要保证金的，因为根据法律规定，刑事案件判决书需要十日以后才能生效，所以，当收到判决书，你自己在上诉期内没有上诉，而且检察院没有抗诉的情况，判决才生效，其次，退保证金是到对你做出取保候审的部门退，因为公安机关，检察院，法院都有权对你取保候审，一般是公安，也可能是检察院和法院。