OpenCV-Python 使用OCR手寫數據集運行SVM

目標

在本章中,我們將重新識別手寫數據集,但是使用SVM而不是kNN。

識別手寫數字

在kNN中,我們直接使用像素強度作為特徵向量。這次我們將使用定向梯度直方圖(HOG)作為特徵向量。

在這裡,在找到HOG之前,我們使用其二階矩對圖像進行偏斜校正。因此,我們首先定義一個函數deskew(),該函數獲取一個數字圖像並將其校正。下面是deskew()函數:

<code>def deskew(img):
m = cv.moments(img)
if abs(m['mu02']) < 1e-2:
return img.copy()
skew = m['mu11']/m['mu02']
M = np.float32([[1, skew, -0.5*SZ*skew], [0, 1, 0]])
img = cv.warpAffine(img,M,(SZ, SZ),flags=affine_flags)
return img/<code>

下圖顯示了應用於零圖像的上偏移校正功能。左圖像是原始圖像,右圖像是偏移校正後的圖像。

OpenCV-Python 使用OCR手寫數據集運行SVM

接下來,我們必須找到每個單元格的HOG描述符。為此,我們找到了每個單元在X和Y方向上的Sobel導數。然後在每個像素處找到它們的大小和梯度方向。該梯度被量化為16個整數值。將此圖像劃分為四個子正方形。對於每個子正方形,計算權重大小方向的直方圖(16個bin)。因此,每個子正方形為你提供了一個包含16個值的向量。(四個子正方形的)四個這樣的向量共同為我們提供了一個包含64個值的特徵向量。這是我們用於訓練數據的特徵向量。

<code>def hog(img):
gx = cv.Sobel(img, cv.CV_32F, 1, 0)
gy = cv.Sobel(img, cv.CV_32F, 0, 1)
mag, ang = cv.cartToPolar(gx, gy)
bins = np.int32(bin_n*ang/(2*np.pi)) # quantizing binvalues in (0...16)
bin_cells = bins[:10,:10], bins[10:,:10], bins[:10,10:], bins[10:,10:]
mag_cells = mag[:10,:10], mag[10:,:10], mag[:10,10:], mag[10:,10:]
hists = [np.bincount(b.ravel(), m.ravel(), bin_n) for b, m in zip(bin_cells, mag_cells)]
hist = np.hstack(hists) # hist is a 64 bit vector
return hist/<code>

最後,與前面的情況一樣,我們首先將大數據集拆分為單個單元格。對於每個數字,保留250個單元用於訓練數據,其餘250個數據保留用於測試。完整的代碼如下,你也可以從此處下載:

<code>#!/usr/bin/env python
import cv2 as cv
import numpy as np
SZ=20
bin_n = 16 # Number of bins
affine_flags = cv.WARP_INVERSE_MAP|cv.INTER_LINEAR
def deskew(img):

m = cv.moments(img)
if abs(m['mu02']) < 1e-2:
return img.copy()
skew = m['mu11']/m['mu02']
M = np.float32([[1, skew, -0.5*SZ*skew], [0, 1, 0]])
img = cv.warpAffine(img,M,(SZ, SZ),flags=affine_flags)
return img
def hog(img):
gx = cv.Sobel(img, cv.CV_32F, 1, 0)
gy = cv.Sobel(img, cv.CV_32F, 0, 1)
mag, ang = cv.cartToPolar(gx, gy)
bins = np.int32(bin_n*ang/(2*np.pi)) # quantizing binvalues in (0...16)
bin_cells = bins[:10,:10], bins[10:,:10], bins[:10,10:], bins[10:,10:]
mag_cells = mag[:10,:10], mag[10:,:10], mag[:10,10:], mag[10:,10:]
hists = [np.bincount(b.ravel(), m.ravel(), bin_n) for b, m in zip(bin_cells, mag_cells)]
hist = np.hstack(hists) # hist is a 64 bit vector
return hist
img = cv.imread('digits.png',0)
if img is None:
raise Exception("we need the digits.png image from samples/data here !")
cells = [np.hsplit(row,100) for row in np.vsplit(img,50)]
# First half is trainData, remaining is testData
train_cells = [ i[:50] for i in cells ]
test_cells = [ i[50:] for i in cells]
deskewed = [list(map(deskew,row)) for row in train_cells]
hogdata = [list(map(hog,row)) for row in deskewed]
trainData = np.float32(hogdata).reshape(-1,64)
responses = np.repeat(np.arange(10),250)[:,np.newaxis]
svm = cv.ml.SVM_create()
svm.setKernel(cv.ml.SVM_LINEAR)
svm.setType(cv.ml.SVM_C_SVC)
svm.setC(2.67)
svm.setGamma(5.383)
svm.train(trainData, cv.ml.ROW_SAMPLE, responses)
svm.save('svm_data.dat')
deskewed = [list(map(deskew,row)) for row in test_cells]
hogdata = [list(map(hog,row)) for row in deskewed]
testData = np.float32(hogdata).reshape(-1,bin_n*4)
result = svm.predict(testData)[1]
mask = result==responses
correct = np.count_nonzero(mask)
print(correct*100.0/result.size)/<code>

這種特殊的方法給我們近94%的準確性。你可以為SVM的各種參數嘗試不同的值,以檢查是否可以實現更高的精度。或者,你可以閱讀有關此領域的技術論文並嘗試實施它們。

附加資源

  1. Histograms of Oriented Gradients Video:https://www.youtube.com/watch?v=0Zib1YEE4LU

練習

  1. OpenCV示例包含digits.py,它對上述方法進行了一些改進以得到改進的結果。它還包含參考資料。檢查並瞭解它。


分享到:


相關文章: