어떻게 비디오 스트림에서 텍스트를 추출 할 수 있습니까?

Question

opencv2 및 pytesseract를 사용하여 카메라에서 나오는 비디오 스트림에서 일부 텍스트를 추출하기 위해 노력하고 있습니다. 다른 작은 이미지를 얻기 위해 이미지를 자릅니다. 나는 그것을 얻기 위해 다른 이미지 프로세싱을 트레이닝했다. 이미지 값을 반전하고, 블러링하고, 바이너리 화했지만, 이들 중 어느 것도 tesseract로 작업하지 않습니다. 내가 추출 할 데이터는 이러한 형태의 '플로트/플로트'여기에 작은 이미지의 예입니다 있습니다

분리되지 않은 문자 같은데 이것은 내가로부터 얻을 수있는 최대 해상도 내 카메라. 나는 컬러로 필터링하려고했지만 비디오와 배경이 항상 움직이기 때문에 아무런 결과도 얻지 못했습니다. 나는 일할 수있는 제안 된 파이썬 모듈을 사용할 것이다.

Answer 1

보이는 것처럼 사소하지 않습니다. 모든 문자에 대해 32x32 png 이미지를 생성하고 화이트 노이즈를 추가합니다. 비디오의 backgound가 움직이고 있습니다. 8 및 6과 같은 캐릭터는 그다지 다르지 않습니다.

cap = cv2.VideoCapture("rtsp:...") 
time.sleep(2) 
templates = {} 
w=[] 
h=[] 
for i in range(0,11): 
    templates["template_"+str(i)]=cv2.imread(str(i)+'.bmp',0) 
    tmp_w,tmp_h=templates["template_"+str(i)].shape[::-1] 
    w.append(tmp_w) 
    h.append(tmp_h) 



threshold = 0.70 



while(True): 
    les_points=[[],[],[],[],[],[],[],[],[],[],[]] 
    ret, frame = cap.read() 
    if frame==None: 
     break 
    crop_image=frame[38:70,11:364] 
    gray=cv2.cvtColor(crop_image,cv2.COLOR_BGR2GRAY) 
    for i in range(0,11): 
     res= cv2.matchTemplate(gray,templates["template_"+str(i)],cv2.TM_CCOEFF_NORMED) 
     loc = np.where(res >= threshold) 
     for pt in zip(*loc[::-1]): 
      les_points[i].append(pt[0]) 
      cv2.rectangle(crop_image, pt, (pt[0] + w[i], pt[1] + h[i]), (0,i*10,255), 2) 
    print les_points 
    cv2.imshow('normal',crop_image) 
    if cv2.waitKey(1)& 0xFF == ord('p'): 
     threshold=threshold+0.01 
     print threshold 
    if cv2.waitKey(1)& 0xFF == ord('m'): 
     threshold=threshold-0.01 
     print threshold 
    if cv2.waitKey(1) & 0xFF == ord('q'): 
     break 

내가 템플릿의 caracters의 동일한 크기로 분할하여 이미지를 다른 테스트를하고 있어요 : 여기에 순간 내 코드입니다. 그러나 이것은 좋은 결과를주지 못합니다.