The workaround is no longer needed after netinet/tcp_subr.c rev1.62

Our raw socket expects ip.{ip_len,ip_off} in host byte order.

Reported-by: hasso@
Tested-by: hasso@

crc32()/crc32_ext() prototypes are for userland.

Bring in some changes to bsd.sys.mk from FreeBSD.

-Werror is turned on for i386/gcc41 builds (can be overridden with
 NO_WERROR.
-Use CWARNFLAGS so they can be overridden easily.
-Introduce CSTD which allows a Makefile to specify the precise
 dialect of C.

Reviewed-by: swildner

Use %z for printing size_t/ssize_t.

Clean up a bit.

* Improve wording and shuffle some paragraphs.

* Reference ffs(5).

* Mention 'hammer cleanup'.

* Use uppercase names for labels like share/examples/rconfig/hammer.sh does.

* Add URL for the HAMMER paper and add reference to NYCBSDCon slides.

Bump .Dd to when it was updated in DragonFly.

Regenerate the pciconf(8) database from the following files:

Hart:    Jan 22, 2008 (version 671)
Boemler: Nov  1, 2008
Mares:   Oct 27, 2008

The priority mask used to compartmentalize the comparison to determine
whether a preemption is needed was covering the entire process priority
space instead of just one bucket.

Reported-by: "Simon 'corecode' Schubert" <corecode@fs.ei.tum.de>

Fix comment.

Factor out _lwkt_pushmsg() and _lwkt_enqueue_reply(); these put message
enqueuing and flags' adjusting into common place.

All of the thread port backend functions are static.

- Add comment for lwkt_initport_serialize()
- Adjust the comment of lwkt_getport() a little bit and put it to the
  proper place.

Use the same indentation as the rest of the functions in this file.

Use the same indentation as the rest of the functions in this file.

Install pr_ctlport for the rest of the protocols.

Reported-by: tomas@

Sync with FreeBSD:

Sync program's usage() with manpage's SYNOPSIS.

Added the EXIT STATUS section where appropriate.

Fixed handling of manpage subdirectories.

Fixed one memory leak.

Look into machine-specific manpage subdirectories too.

Obtained-from: FreeBSD

Put unknown hardware ids print back into bootverbose, mainly to suppress it
on a box with rl(4).

Use atomic_fetchadd_int() to avoid N->0 race when freeing sfbuf.  The
serializer field is no longer needed.

Hint-from: dillon@
Reported-by: pavalos@
Tested-by: pavalos@

Don't use listen socket's route cache, it is not MPSAFE currently.  This could
happen if a listen socket received TCP segment with invalid flags combination.

Fix gcc34 warnings.

Fix warnings which cropped up in the gcc34 build. While here, update
the login_times(3) manual page.

Taken-from: FreeBSD

Remove warning flags and raise WARNS where possible.

Remove remaining LIBC_SCCS related stuff.

WARNS= -> WARNS?=

Remove some warning flags and raise WARNS where possible.

Recollect TX/RX descriptors if we are going to switch back to TX/RX interrupts,
mainly to avoid the _possible_ race between turning on TX/RX interrupts and
asserting TX/RX interrupt by hardware.  Though nfe(4) does not seem to suffer
the problem, which I have seen on re(4), we still apply the same fix here;
better safe than sorry.

Try recollecting RX/TX descriptors if we are going to switch back to TX/RX
interrupts.  There seems to be a race between turning on TX/RX interrupt and
asserting TX/RX interrupt by the hardware.  This fixes the poor performance
that I have seen when using single threaded remote cpdup.

In ip_lengthcheck(), make sure that pkthdr.len is not less than "IP total
length" in IP header.  Change the related testing in ip_input() and
ipflow_fastforward() into assertion.

Add comment about ip_lengthcheck()

- The assertion in ip_input, should test sizeof(struct ip) instead of sizeof(ip)
- Make sure that ip_input's precondition meets in ip_localforward
- Don't allow raw ip socket to send ip packet whose header length is less than
  the minimum
- Nuke unused code and minor style changes

Reviewed-by: nth@

Sync zoneinfo database with tzdata2008i from elsie.

southamerica:   8.30 -> 8.33
zone.tab:       8.19 -> 8.21

* Adjust for recent changes in Argentina (DST from Oct 19, 2008 to
  Mar 15, 2009, but several provinces are not participating).

* Reordering and new comments for several zones in zone.tab.

Monir style and white space changes

- Move unlinking ipflow from table/list out of ipflow_free().
- Factor out ipflow_reset() to clear statistics of ipflow to be reused.
- Add flags field in ipflow.  Currently only one flag is defined to make
  sure that the state of the ipflow is correct (on/off the table/list).
- Reference count ipflow, so the ipflow used to do the ifnet.if_output()
  will not be reaped or changed behind our back.  Add commet about it.
- Don't change or reuse an ipflow if it is being actively used,
  i.e. ipf_refcnt > 1
- Fortify ipflow code by putting assertion in proper places.
- Pad ipflow structure explicitly.

- All of the ipflow table/list read/write operations happen in protocol
  threads, so there is no need to use critical section.  We only need to
  protect per-cpu static timeout netmsgs with critical section, whose
  MSGF_DONE is checked in ipi.
- Mark per-cpu static timeout netmsgs MPSAFE.
- smp_active_mask should be taken into consideration, when broadcasting ipi.

We obviously do not want protocol threads to be block; blocking the current
protocol thread may cause exact same ipflow being installed.

Break long line

- In addition to the IP flow hash table, put the flows on a list.  The table
  is used for fast lookup, the list for traversal of all flows.
  Obtained-from: NetBSD ip_flow.c rev 1.5
- Use LIST_FOREACH macros.

Fix CVE-2008-3831. Affects the Intel G33 series and newer only.

Obtained-from: DRM git

pr_ctlinput is usually called when certains types of ICMP packets are received.
However, the processing of ICMP packets happens in netisr0, which means the
thread context, in which pr_ctlinput is called, is not correct.  To handle this
following two fixes are applied:
- Add pr_ctlport to protosw and ip6protosw, which could be used to locate
  correct msgport to call pr_ctlinput for specific protocol
- All necessary information needed by pr_ctlinput are gather into one netmsg,
  and this netmsg is delivered synchronously (some information is on the stack)

Note for new protocol implementation:
pr_ctlinput and pr_ctlport should be both NULL or both non-NULL.

Obtained-from: dillon@
Tested-by: pavalos@

Remove stale header file.

Update ips_total

Obtained-from: NetBSD ip_flow.c rev 1.34

- If a packet came in as link-level broadcast or link-level multicast, don't
  attempt to fast-forward it out.
  Obtained-from: NetBSD ip_flow.c rev 1.14
- Fix comment

- ip_mport() will make sure following things for us:
  o  IP header is in one mbuf
  o  IP length is not less then IP header length
- Truncate mbufs to the correct length before forwarding
  Obtained-from: NetBSD ip_flow.c rev 1.6

Perform ipflow timeout, only if the CPU has active ipflows; saves us some
physical ipi sending time.

Inspired-by: NetBSD ipflow.c rev 1.2

Bring in following changes from NetBSD ip_flow.c
rev 1.2(part), 1.8, 1.9, 1.10, 1.11, 1.12, 1.18(w/ mod)

- IP checksum fix/twist
- Hardware checksum off loading fix

- Move ipflow definition from ip_flow.h to ip_flow.c; it's implementation
  detail.
- Move ipflow function declarations from in_var.h to ip_flow.h, include
  ip_flow.h in files which uses ipflow functions.

- Return the real cluster limit used by the objcache
- For mbuf objcaches, raise backing kmalloc pools' limit according to the
  cluster limits.
Suggested-by: dillon@
Reviewed-by: aggelos@, nth@

it's -> its

- RX/TX coal parameters could be set at any time.
- Set default RX coal packets to 64, so RX coal timeout takes control during
  bulk data operations.  This greately reduces the interrupt rate while keeps
  bulk data performance.
- Set default TX coal packets to 64 and TX coal timeout to 65535us (maximum
  allowable value).  This greately reduce the interrupt rate while greately
  increases (almost doubles) small packet TX performance.
- Remove unused field in jme_softc

Use atomic_fetchadd_int() to simplify the reference counting logic.

Reviewed-by: dillon@

Remove more stuff: ports/, root_skels/ (which we maintain in nrelease/),
scripts/ and src/lib/lua.

Reduce differences with root_skels in contrib.

Add a periodic(8) script to run 'hammer cleanup' (snapshot, prune
and reblock all HAMMER filesystems) on a nightly basis. The exact
behavior (period, retention and run time) can be configured by
tweaking <filesystem>/snapshots/config as described in hammer(5).

Add 5906/5906M support.  Based on my old patch with some additional work from
FreeBSD.

Tested-by: Petr Janda <elekktretterr@exemail.com.au>

Raise the kmalloc limit for the M_HAMMER_INO pool based on desiredvnodes
to try to avoid kernel memory exhaustion panics.

Reported-by: Matthias Schmidt <matthias@dragonflybsd.org>, and others.

Add kmalloc_raise_limit() - allow a subsystem to raise the allocation
limit for a kmalloc pool.

Remove trailing whitespace.

* Remove 'exit 1' so the script continues running.

* Add swap to fstab.

* Remove dntpd setup because the same stuff is in our default dntpd.conf
  already.

Add tunable net.inet.ip.mpsafe to register IP as MPSAFE netisr.
Multicast/IPSEC still need BGL.

- Move RX filter configuration from re_init() into re_setmulti()
- IFF_BROADCAST will never be set/cleared
- Fix SIOCSIFFLAGS support; it was really annoying that each time when I ran
  tcpdump, the NIC reinitialized itself.

Unbreak UP building

In route_init(), call netmsg_service_port_init(); mainly to register route
thread's msgport for netmsg_service_sync(), since route threads also do
network output during arp input processing.

Fix typo.

Sync libc/stdtime and zdump(8)/zic(8) with tzcode2008h from elsie.

There shouldn't be any user visible changes. Some bugs are fixed, among
them an issue with Python's mktime() when TZ wasn't set (reported by
Aran Cox).

Another thing is that this code should behave nicely on architectures with
a 64 bits wide time_t.

Regenerate the pciconf(8) database from the following files:

Hart:    Jan 22, 2008 (version 671)
Boemler: Oct 19, 2008
Mares:   Oct 17, 2008

Add pcie_set_max_readrq() to avoid code duplication between various network
device drivers.

Add m_devpad() to avoid code duplication in various network device drivers

Update sensorsd(8) to the latest code.

Obtained-from: OpenBSD

Reduce RX coal ticks to 100us (favors performance a little bit)

- In re_stop(), call re_reset(), which is supposed to stop TX/RX engines.
- In re_reset(), don't touch 0x82 (a magic CSR), which seems to be 8110/8169
  specific.  Write 1 to it on attach path.
  According-to: RealTek r8169-6.007.00
- For certain chips (looks like all MAC2 chips), RE_CMD_RESET will not stop
  TX/RX engines, a seperate command (RE_CMD_STOPREQ) must be issued before
  RE_CMD_RESET.
  According-to: RealTek r8168-8.008.00

- Pack boolean fields into re_softc.re_flags
- Nuke some unused fields in re_softc

# This file should have been committed along with if_re.c rev1.93

- Pack boolean fields into re_softc.re_flags
- Nuke some unused fields in re_softc

Instead of using lwkt_migratecpu(), use ifnet threads to do dom_rtattach()

- Move PCIe chip detection into re_probe()
- Panic if the passed in "max read request size" exceeds limit

Try recollecting TX descriptors when we are short of them in re_start()

There are 4 fields in re_hwrev

Reduce the threshold that control when "cut through mode" should be applied;
mainly to fix jumbo frame RX support.

- Don't claim 7422 MTU size is support by various 8111/8169 chips (PCI devices);
  6144 MTU size works reliably.
    Set MTU above 6144 (6 * 1024) on these chips and do following test:
    netperf -H host -l 30 -t UDP_STREAM -- -m (mtu-28)
    All kinds of wiredness will pop up on the test box.
- Set max supported MTU to 9216 for 8168D.
  Obtained-from: Realtek r8168-8.008.00
- Set max supported MTU to 6144 for non-8168D GigE chips.
- Cleanup jumbo frame/MTU size related macros.

# As usual, 8169(with 88E1000 PHY) does not seem to work well with any jumbo
# frame size

Fix hardware vlan tagging support by setting vlan information on all TX
descriptors for multi-segment packets.

# Even with this fix in place, 8169 still does not work reliably with vlan.
# Certain packets are never seen on the wire; maybe caused by the trailing
# ether frame CRC generated by the hardware?

Fix re_ioctl SIOCSIFCAP support, so that VLAN_HWTAGGING and VLAN_MTU could
be turned off.

Try to do a better job aborting active requests when a usb mass storage
device is pulled.

Allow an alignment default of 0 to be treated as 1.

Obtained-from: FreeBSD

Add vfs.nfs.flush_on_hlink and default to off.

Correct jumbo frame support for 8168C/CP/D.

These newer chips use ancient design, which does _not_ support gathering RX.
An even worse aspect of the new chips' design is that it does not compat
with old ones: the buffer length field in the RX descriptor seems to be
completely ignored by the hardware.  This means host memory will be trashed
by hardware if driver uses gathering RX.

Allocate a jumbo buffer pool for these chips and configure "max RX packet
size" register according to MTU.

Fix some typos.

Found-by: LanguageTool

Change 'then' to 'than' in comparisons.

Found-by: LanguageTool

Use standard markup for one or more files.

Change 'then' to 'than' in comparisons.

Found-by: LanguageTool

Add KQUEUE support to HAMMER.

Add a new utility called 'monitor' which uses kqueue to monitor a
list of files and directories specified on the command line.

Adjust max read request size according to MTU; 512 seems to be the only
value that works with jumbo frames without "watchdog timeout" during
UDP_STREAM netperf tests.

According to wpaul's comment, 8139C+ only support 64 TX/RX descriptors

Add hardware csum offload support for MAC style 2 chips, which include
8102E, 8102EL, 8168C, 8168CP and 8168D.

Obtained-from: RealTek r8101-1.009.00 r8168-8.008.00

Add RE_C_AUTOPAD capability to indicate hardware could correctly pad
short ether frames.  Turn it on for newer version of 8168B (0x38000000
and 0xb8000000) and MAC style 2 chips; manually padding short UDP packets
for newer version 8168B will result in incorrect UDP csum, while manually
padding short ICMP packets for MAC style 2 chips will result in both
incorrect IP header csum and incorrect IP length (o_O)

Xref utrace(2) from ktrace(2) instead of ktrace(1).

Add man page for utrace(2).  With modifications from FreeBSD.  Xref utrace(2)
in ktrace(1).

* Silence -Wold-style-definition (i.e., ansify).

* Remove 'register'.

* Remove P() and friends.

Change hammer_str_to_tid() and its callers to restrict the format of
strings after the '@@' portion of the filename.  Unknown formats are
simply passed through, so for example you can create a file called 'x@@b'
without it thinking it is 'x' with a @@b transaction id extension.

The formats allowed are:

    @@0x%016llx[:%05d]
    @@-1[:%05d]

Any other format is passed through and not treated specially.

Reported-by: "Steve O'Hara-Smith" <steve@sohara.org>

Add code to parse the utrace(2) entries generated by malloc(3) in a more
human-readable format.

Obtained-from: FreeBSD

Fix another path