int(i.replace("'", ""))

왜 if i.isdigit() 뺐어요

fin = open('data.txt','r')

sum_text = fin.readlines()



for each_line in sum_text:
    numbers = [int(i) for i in each_line.replace("'", "").split() if i.isdigit()]
    print(numbers)

가장 일반적인 해결법은 정규표현식으로 '123' 이런 형식의 문자열만 뽑아낼수도 있고 
import re
regex = "'(\d+)'"
re.findall(regex, each_line)
>>> ['50',  ... ]

아니면 모든 숫자가 single quote로 둘러싸여 있다는 가정하에 그냥 single quote로 문자열을 잘라도 될듯
numbers = [int(i) for i in each_line.split("'") if i.isdigit()]