Есть модель нейронки, которая предиктит face landmarks (особые точки на лице). Нужно, чтобы эти точки рисовались на видео в вебе. Для этого есть фреймворк tensorflowjs. Он умеет брать модель, прогонять через нее картинку и возвращать вектор из этих точек, которые потом рисуются на картинке.