Hola ráfaga, eso se hace con contenedores, es muy muy simple de hacer. Pero sabiendo cero, no sé hasta qué punto se complica el asunto, voy a explicarlo como si no supieras absolutamente nada.
primero: Creas 4 archivos de flash, uno para cada video, todos del mismo tamaño (400px x 400px, por ejemplo), dentro de cada archivo flash metes el video (archivo/Importar/importar a escenario o control + R).
Por otro lado, en tu archivo principal donde tienes los botones vas a crear un cuadrado sin relleno (osea, relleno de transparente) que mida 400 px x 400 px. Una vez creado el cuadrado y centrado en tu página das al f8 y lo conviertes en un clip de película, el punto de registro al medio. a ese clip le vas a llamar contenedor, y luego a la derecha en propiedades a esa instancia le vas a llamar contenedor_mc.
Bien, ahora entras dentro del cuadrado, como? pinchando dos veces sobre él, una vez dentro borras el contenido, como? lo seleccionas y supr

(es broma).
Luego sales de ahí pinchando dos veces fuera, en donde sea, vale, ya estás fuera y ves que no hay cuadrado (lo has borrado hace 20 segundos, era previsible), bien, ahora verás que aunque no hay cuadrado sigues viendo una bolita en medio y una cruz, punto de registro y de transformación, así que está ahí pero tú no lo ves.
Ya tenemos casi todo Hecho, ahora sólo queda llamar por su nombre a todos los botones.
Dibujas un botón, le das a f8 y clip de película al canto, le llamas boton1 y en instancia, boton1_mc
Perfecto, ahora sólo queda entrar en el panel de actionscript, como? ventana acciones
(por cierto, es recomendable que las acciones las pongas en un fotograma vacío arriba del todo en una capa llamada acciones, te será muy fácil verlo cuando tengas 500 capas)
dentro de acciones escribes lo siguiente:
(con esto, declaras la variable del contenedor)
var cargador:MovieClipLoader = new MovieClipLoader()
(debajo de eso escribes lo siguiente:)
boton1_mc.onRelease = function() {
cargador.loadClip("video01.swf" , contenedor_mc)
}
Perfecto, si has hecho todo así, te saldrá.
(supongo que no hace falta decir, que en los archivos de cada video, tienes que publicarlo para que se genere un .SWF , que es lo que el boton1 llama, para que se meta dentro del contenedor, TÚ SABE????? , buueno, pues así con cada botón.