Fatal trap 1



  • I am getting fatal trap 1privileged instruction fault every 1-2 hrs.Can anyone tell me the cause?



  • Sorry, too little information to go on.

    I guess with a privileged instruction fault knowing what CPU you are using, what version of pfSense and architecture, and a copy of the last twenty lines or so from the system log would be helpful.



  • Yeah need more details, and ideally submit a crash report assuming it prompts you to do so. If so, let me know what IP it came from (PM is fine) and I'll check.



  • @vbentley:

    Sorry, too little information to go on.

    I guess with a privileged instruction fault knowing what CPU you are using, what version of pfSense and architecture, and a copy of the last twenty lines or so from the system log would be helpful.

    intel 1.6ghz dual core e2140
    here is the crash log:
    Crash report begins.  Anonymous machine information:

    amd64
    10.3-RELEASE
    FreeBSD 10.3-RELEASE #6 05adf0a(RELENG_2_3_0): Mon Apr 11 18:52:07 CDT 2016    root@ce23-amd64-builder:/builder/pfsense-230/tmp/obj/builder/pfsense-230/tmp/FreeBSD-src/sys/pfSense

    Crash report details:

    Filename: /var/crash/bounds
    1

    Filename: /var/crash/info.0
    Dump header from device /dev/label/swap0
      Architecture: amd64
      Architecture Version: 1
      Dump Length: 94208B (0 MB)
      Blocksize: 512
      Dumptime: Thu Apr 21 04:35:35 2016
      Hostname: Tesla.server
      Magic: FreeBSD Text Dump
      Version String: FreeBSD 10.3-RELEASE #6 05adf0a(RELENG_2_3_0): Mon Apr 11 18:52:07 CDT 2016
        root@ce23-amd64-builder:/builder/pfsense-230/tmp/obj/builder/pfsense-230/tmp/FreeBSD-src/sys/pfSense
      Panic String:
      Dump Parity: 589000496
      Bounds: 0
      Dump Status: good

    Filename: /var/crash/info.last
    Dump header from device /dev/label/swap0
      Architecture: amd64
      Architecture Version: 1
      Dump Length: 94208B (0 MB)
      Blocksize: 512
      Dumptime: Thu Apr 21 04:35:35 2016
      Hostname: Tesla.server
      Magic: FreeBSD Text Dump
      Version String: FreeBSD 10.3-RELEASE #6 05adf0a(RELENG_2_3_0): Mon Apr 11 18:52:07 CDT 2016
        root@ce23-amd64-builder:/builder/pfsense-230/tmp/obj/builder/pfsense-230/tmp/FreeBSD-src/sys/pfSense
      Panic String:
      Dump Parity: 589000496
      Bounds: 0
      Dump Status: good

    Filename: /var/crash/textdump.tar.0
    ddb.txt06000014000012706005477  7102 ustarrootwheeldb:0:kdb.enter.default>  run lockinfo
    db:1:lockinfo> show locks
    No such command
    db:1:locks>  show alllocks
    No such command
    db:1:alllocks>  show lockedvnods
    Locked vnodes
    db:0:kdb.enter.default>  show pcpu
    cpuid        = 0
    dynamic pcpu = 0x531e00
    curthread    = 0xfffff80003987960: pid 3811 "rrdtool"
    curpcb      = 0xfffffe004ca54cc0
    fpcurthread  = 0xfffff80003987960: pid 3811 "rrdtool"
    idlethread  = 0xfffff800032e2000: tid 100003 "idle: cpu0"
    curpmap      = 0xfffff800038889f8
    tssp        = 0xffffffff82112b90
    commontssp  = 0xffffffff82112b90
    rsp0        = 0xfffffe004ca54cc0
    gs32p        = 0xffffffff821145e8
    ldt          = 0xffffffff82114628
    tss          = 0xffffffff82114618
    db:0:kdb.enter.default>  bt
    Tracing pid 3811 tid 100104 td 0xfffff80003987960
    pvh_global_lock() at pvh_global_lock/frame 0xfffffe004ca54580
    dmapbase() at 0xfffff800038fd400/frame 0xffffffff80f9812c
    db:0:kdb.enter.default>  ps
      pid  ppid  pgrp  uid  state  wmesg        wchan        cmd
    3811 29204    23    0  RL      CPU 0                      rrdtool
    55948  263  263    0  S      accept  0xfffff80003acd066 php-fpm
    85319 85023 85319    0  S+      ttyin    0xfffff800035bc4a8 sh
    85023 84734 85023    0  S+      wait    0xfffff8000397d9e0 sh
    84967 73178 84967    0  Ss      (threaded)                  sshlockout_pf
    100136                  S      nanslp  0xffffffff82000871 sshlockout_pf
    100135                  S      piperd  0xfffff8000389e2e8 sshlockout_pf
    84734    1 84734    0  Ss+    wait    0xfffff800038979e0 login
    76153 75707 75707    0  S      nanslp  0xffffffff82000871 minicron
    75707    1 75707    0  Ss      wait    0xfffff80003bfc000 minicron
    75694 75460 75460    0  S      nanslp  0xffffffff82000870 minicron
    75460    1 75460    0  Ss      wait    0xfffff800038964f0 minicron
    75393 74994 74994    0  S      nanslp  0xffffffff82000870 minicron
    74994    1 74994    0  Ss      wait    0xfffff800082954f0 minicron
    73178    1 73178    0  Ss      select  0xfffff80003fa9ec0 syslogd
    36542    1 36542    0  Ss      select  0xfffff800039684c0 miniupnpd
    35219    1 35219    0  Ss      select  0xfffff80003ef45c0 powerd
    29204    1    23    0  S+      wait    0xfffff800082974f0 sh
    21145    1 21145  1002  Ss      select  0xfffff80003f04ac0 dhcpd
    17164    1 17164    0  Ss      (threaded)                  ntpd
    100103                  S      select  0xfffff80003ef54c0 ntpd
    16195    1 16195    59  Ss      (threaded)                  unbound
    100116                  S      kqread  0xfffff80003f40000 unbound
    100098                  S      kqread  0xfffff800080b2e00 unbound
    14630    1 14630    0  Ss      nanslp  0xffffffff82000870 cron
    14176 13644 13644    0  S      kqread  0xfffff80003f42900 nginx
    13947 13644 13644    0  S      kqread  0xfffff80003f40800 nginx
    13644    1 13644    0  Ss      pause    0xfffff800038960a8 nginx
    9269    1  9269    0  Ss      (threaded)                  dpinger
    100112                  S      accept  0xfffff80003a3d31e dpinger
    100111                  S      nanslp  0xffffffff82000871 dpinger
    100110                  S      nanslp  0xffffffff82000871 dpinger
    100109                  S      sbwait  0xfffff80003a3d6b4 dpinger
    100108                  S      uwait    0xfffff800037a7100 dpinger
    7123    1  7123    0  Ss      select  0xfffff80003df3e40 xinetd
    6867    1  6867    0  Ss      bpf      0xfffff8000391b200 filterlog
      313    1  313    0  Ss      select  0xfffff800039692c0 devd
      303  301  301    0  S      kqread  0xfffff80003c36d00 check_reload_status
      301    1  301    0  Ss      kqread  0xfffff80003826300 check_reload_status
      263    1  263    0  Ss      kqread  0xfffff80003868700 php-fpm
      56    0    0    0  DL      mdwait  0xfffff800035bd000 [md0]
      22    0    0    0  DL      vlruwt  0xfffff800038059e0 [vnlru]
      21    0    0    0  DL      syncer  0xffffffff82051808 [syncer]
      20    0    0    0  DL      (threaded)                  [bufdaemon]
    100086                  D      sdflush  0xfffff80003792ce8 [/ worker]
    100076                  D      psleep  0xffffffff82050a04 [bufdaemon]
      19    0    0    0  DL      pollid  0xffffffff81fff190 [idlepoll]
      18    0    0    0  DL      pgzero  0xffffffff82061b3c [pagezero]
        9    0    0    0  DL      psleep  0xffffffff82060ec0 [vmdaemon]
        8    0    0    0  DL      (threaded)                  [pagedaemon]
    100080                  D      umarcl  0xffffffff82060840 [uma]
    100072                  D      psleep  0xffffffff82111f04 [pagedaemon]
        7    0    0    0  DL      waiting_ 0xffffffff821029c0 [sctp_iterator]
        6    0    0    0  DL      pftm    0xffffffff80d5d030 [pf purge]
        5    0    0    0  DL      -        0xfffff800035c3c48 [fdc0]
      17    0    0    0  DL      tzpoll  0xffffffff81f3d420 [acpi_thermal]
      16    0    0    0  DL      (threaded)                  [usb]
    100058                  D      -        0xfffffe0000998e70 [usbus4]
    100057                  D      -        0xfffffe0000998e18 [usbus4]
    100056                  D      -        0xfffffe0000998dc0 [usbus4]
    100055                  D      -        0xfffffe0000998d68 [usbus4]
    100054                  D      -        0xfffffe0000998d10 [usbus4]
    100053                  D      -        0xfffffe0000988f48 [usbus3]
    100052                  D      -        0xfffffe0000988ef0 [usbus3]
    100051                  D      -        0xfffffe0000988e98 [usbus3]
    100050                  D      -        0xfffffe0000988e40 [usbus3]
    100049                  D      -        0xfffffe0000988de8 [usbus3]
    100047                  D      -        0xfffffe0000978f48 [usbus2]
    100046                  D      -        0xfffffe0000978ef0 [usbus2]
    100045                  D      -        0xfffffe0000978e98 [usbus2]
    100044                  D      -        0xfffffe0000978e40 [usbus2]
    100043                  D      -        0xfffffe0000978de8 [usbus2]
    100041                  D      -        0xfffffe0000968f48 [usbus1]
    100040                  D      -        0xfffffe0000968ef0 [usbus1]
    100039                  D      -        0xfffffe0000968e98 [usbus1]
    100038                  D      -        0xfffffe0000968e40 [usbus1]
    100037                  D      -        0xfffffe0000968de8 [usbus1]
    100035                  D      -        0xfffffe000094ef48 [usbus0]
    100034                  D      -        0xfffffe000094eef0 [usbus0]
    100033                  D      -        0xfffffe000094ee98 [usbus0]
    100032                  D      -        0xfffffe000094ee40 [usbus0]
    100031                  D      -        0xfffffe000094ede8 [usbus0]
        4    0    0    0  DL      (threaded)                  [cam]
    100071                  D      -        0xffffffff81f353c8 [scanner]
    100019                  D      -        0xffffffff81f35580 [doneq0]
      15    0    0    0  DL      -        0xffffffff81f56cc0 [rand_harvestq]
        3    0    0    0  DL      crypto_r 0xffffffff8205f378 [crypto returns]
        2    0    0    0  DL      crypto_w 0xffffffff8205f220 [crypto]
      14    0    0    0  DL      (threaded)                  [geom]
    100013                  D      -        0xffffffff820f70e8 [g_down]
    100012                  D      -        0xffffffff820f70e0 [g_up]
    100011                  D      -        0xffffffff820f70d8 [g_event]
      13    0    0    0  DL      (threaded)                  [ng_queue]
    100010                  D      sleep    0xffffffff81ef3b58 [ng_queue1]
    100009                  D      sleep    0xffffffff81ef3b58 [ng_queue0]
      12    0    0    0  WL      (threaded)                  [intr]
    100079                  I                                  [swi1: netisr 1]
    100069                  I                                  [swi1: pfsync]
    100067                  I                                  [swi1: pf send]
    100064                  I                                  [irq1: atkbd0]
    100063                  I                                  [irq7: ppc0]
    100061                  I                                  [swi0: uart]
    100059                  I                                  [irq14: ata0]
    100048                  I                                  [irq16: vr0 uhci3]
    100042                  I                                  [irq18: uhci2]
    100036                  I                                  [irq19: uhci1+]
    100030                  I                                  [irq23: uhci0 ehci0]
    100029                  I                                  [irq257: re0]
    100028                  I                                  [irq256: hdac0]
    100027                  I                                  [swi5: fast taskq]
    100025                  I                                  [swi6: Giant taskq]
    100023                  I                                  [swi6: task queue]
    100008                  I                                  [swi1: netisr 0]
    100007                  I                                  [swi3: vm]
    100006                  I                                  [swi4: clock]
    100005                  I                                  [swi4: clock]
      11    0    0    0  RL      (threaded)                  [idle]
    100004                  Run    CPU 1                      [idle: cpu1]
    100003                  CanRun                              [idle: cpu0]
        1    0    1    0  SLs    wait    0xfffff800032df4f0 [init]
      10    0    0    0  DL      audit_wo 0xffffffff82109460 [audit]
        0    0    0    0  DLs    (threaded)                  [kernel]
    100070                  D      -        0xfffff80003333d00 [CAM taskq]
    100065                  D      -        0xfffff800035ea700 [mca taskq]
    100026                  D      -        0xfffff80003332c00



  • The several crash reports from the IP you sent me are all indicative of a hardware problem.


Log in to reply