可以的,这个权利是法律赋予被告人的诉讼权利。
按照刑事诉讼法的规定,被告人是属于人民法院应当为其指定辩护人的对象的,其拒绝人民法院指定的辩护人为其辩护有正当理由的,人民法院应当准许,但被告人需另行委托辩护人,或者人民法院为其另行指定辩护人。