你好，这种情况下你有权找哥哥要回被扣的钱。当你作为担保人，银行依据担保协议从你工资卡扣款后，你已实际承担了担保责任。按照法律规定，你在承担保证责任的范围内，享有向债务人即你哥哥的追偿权。

具体流程为：先收集能证明你承担了担保责任的证据，如银行的扣款记录、还款凭证等，这些材料可证实你已代哥哥偿还债务；接着尝试与哥哥沟通协商，向他说明情况并要求还钱，沟通时注意留存聊天记录或通话录音；若协商无果，你可向哥哥住所地的法院提起诉讼，提交证据，要求哥哥返还你被扣的款项，法院判决后，若哥哥仍不履行，你可申请强制执行。

法律依据

《中华人民共和国民法典》第七百条

保证人承担保证责任后，除当事人另有约定外，有权在其承担保证责任的范围内向债务人追偿，享有债权人对债务人的权利，但是不得损害债权人的利益。此条赋予了担保人在履行担保责任后向债务人追偿的权利。

《中华人民共和国民事诉讼法》第一百二十二条

起诉必须符合下列条件：（一）原告是与本案有直接利害关系的公民、法人和其他组织；（二）有明确的被告；（三）有具体的诉讼请求和事实、理由；（四）属于人民法院受理民事诉讼的范围和受诉人民法院管辖。为你通过诉讼途径追偿提供了起诉条件的依据。