Отрисовка в через метод drawImage():
var canvas = document.createElement('canvas'),
video = document.getElementsByTagName('video')[0],
ctx = canvas.getContext('2d');
canvas.width = video.width;
canvas.height = video.height;
ctx.drawImage(video, 0, 0, video.width, video.height);
узнаем цвет getImageData():
var block_width = 50;
var pixels = ctx.getImageData(0, 0, block_width, canvas.height);
ну а дальше сами думайте)
сейчас все сделал через маску с использованием свечения.
Позже с использованием градиента