An sich sollte das nicht sehr schwer sein, wenn sich das Format der Zahlen nicht ändert.
Jede Zahl sitzt in meinem Block von einer festen Höhe/Breite der Anteil schwarz/weiß sollte für jede Zahl eindeutig sein und nur wenig/gar nicht schwanken. Zerlege das Bild in Blöcke die immer genau eine Zahl enthalten, finde anhand der "Helligkeit" (Verhältnis schwarz/weiß) die Zahl und merk dir alles. Wenn du einen Pixel selektierst kannst du an Hand seiner Position den Block bestimmen in dem er ist und anhand des Helligkeitswert des Blockes die Zahl. Das Funktioniert aber nur mit proportional Fonts und Zahlen. Bei Buchstaben wird es schwieriger.