Hola Hencho, claro que si se puede, aunque la forma cambia segun el router que tengas.

Te explico como lo hacia en mi caso cuando no tenia servidor:

Tengo un router Linksys que asigna direcciones por dhcp desde la 192.168. x. 100 hasta la 192.168. x. 255.

A cada sala de computo le configuro direcciones ip fijas desde la 192.168.x.10 en adelante sin llegar hasta la 100.
Es decir, si la sala de computo 1 tiene 20 equipos le configuro las direcciones desde la 192.168.x.10 hasta la 192.168.x.29 y así sucesivamente con las demás salas.
Luego en el router me voy a la ficha de acces restrictions y creo una regla para cada sala de computo con su respectivo rango de direcciones ip, donde puedes configurar la restricción por horas, días, etc, o simplemete bloqueas la salida por completo de estos equipos a internet.

El método varía segun el router pero es casi lo mismo.

Espero te haya servido de ayuda...