我爸抢劫判了三年身为他儿子我刚知道

我爸是天生残疾，是聋哑人，我妈妈也是，好在我身体健康，我姥爷一直都以为我爸只是犯过打架斗殴什么的没记录过案底，直到我需要政审的时候才知道这件事，我就问了我爸，他告诉我他在1994年犯过抢劫罪判了三年，但是办了保外就只拘留了一个多月，但是记录在案，现在很后悔，我整个人真的崩溃，现在的我谈了一个女朋友感情很好，但是我女朋友身体不好，这两年我也特别细心的照顾她，我们感情很好，我女朋友是离异家庭，家里都是公安机关的，她妈妈是干部，因为我个人能力还可以，我女朋友对于我爸妈的残疾也表示没什么，但是今天我知道这件事之后真的很崩溃，我女朋友家里肯定不会接受这个事情，我爸这人一辈子就没干过什么好事，早年间没上过班，我妈一个人在车间工作一个月两三千快，攒下来的钱都让我爸投入到传销里了，专门骗聋哑人的传销，叫博盈什么的，去年抓了但是十万块钱肯定是追不回来了，我爸还在14年领了一个有夫之妇回家，两个人关系也不明不白的，当时我小，但是我也什么都懂，我姥爷也让我不要管说人生太多无奈了，都是我妈妈一个人承受，自我上了大学之后，离开家才感觉到生活慢慢好了一点，我都是自己打工和靠我姥爷给我钱我才有现在，我小的时候有病住院我姥爷管我爸要钱，我爸来了之后我印象最深他跟我姥爷说我是装的，我小的时候有一次姥爷办事需要住在家里去上学，我管我妈妈要了二十块钱上学，我爸知道了说我要的太多，又要回去十块，我当时全还给他了，我自己背着书包走了一个多小时去上学，现在想想，我不知道我对我爸是个什么样的情感，他就是一个自私自利的人，他能跟我爷打起来，跟我爷说分房子要有他一份，但是瞻仰老人他不管，要不是我去看望爷爷奶奶和我叔叔他们家，我们两家早就掰了，最后我爷爷和我叔叔他们看在我不容易，最后还是分了一套小的房子给我，我爸这一辈子现在五十多岁，没上过班，没干过正事，而且我到今天才知道还犯过法，请问老哥们，我该怎么办才能避免因为我爸犯过案子影响我这个事？