Ah entiendo, edite mi comentario de antes pq sonaba medio pesado. Para lo que quieres hacer una opción fácil seria montar un pi-hole y eso configurarlo como DNS en el router.

No cacho OpenWRT pero el resumen mega resumido es que DHCP asigna automaticamente las IPs en tu red interna, aunque igual puedes reservar usando la MAC de los dispositivos. El DNS en cambio traduce una direccion en palabras hacia un IP.

Y ya si realmente quieres aprender la cuestión: https://www.youtube.com/watch?v=k7IOn3TiUc8&list=PLG49S3nxzAnl_tQe3kvnmeMid0mjF8Le8