<video width="1024" height="768" poster="">
<source src="/anyname.webm" type="video/webm">
<source src="/anyname.mp4" type="video/mp4">
</video>
<video preload="auto">
</video>
делает то, что вам нужно.preload="metadata"
В этом случае загружаются только заголовки видео.