@hpurper Esse problema pode estar relacionado com o bug: Redmine #12827
A diferença aqui é que a sua latência não ocorre só a cada 15 minutos, o que sugere que você pode ter algum /etc/rc.filter_configure_sync acontecendo com mais frequência do que o bug mencionado acima, ou os problemas não estão relacionados.
Parece que o intervalo dos pacotes com delay é bem parecido, parece haver uma periodicidade..
Eu ainda não sei o que está acontecendo, mas eu verificaria o cron para ver se tem algum rc.filter_configure_sync rodando a cada 10 segundos o que indicaria que é o bug acima.
E caso fosse o bug, aplicaria o patch.
Além disso, verificaria o site abaixo para ajustes na placa de rede, tem uma parte lá de broadcom.
https://docs.netgate.com/pfsense/en/latest/hardware/tune.html
Outras pesquisas sobre a sua placa de rede onboard podem ajudar também, inclusive aqui no fórum.