В общем случае могу посоветовать такой метод:
opencv-python-tutroals.readthedocs.org/en/latest/p...
Хотя на самом деле на разнице уже много чего интересного можно сделать. Можно понизить порог, и удалить все маленькие компоненты связности. Это можно сделать через морфологические преобразования или просто BFS запустить в каждой компоненте.