net: Don't use IF_{EN,DE}QUEUE on ifnet.if_snd

wi: Don't use IF_ macros on ifnet.if_snd

de: Don't use IF_ macros on ifnet.if_snd

ral: Don't use IF_ macros on ifnet.if_snd

iwi: Dont' use IF_ macros on ifnet.if_snd

net: Don't use IF_DROP on ifnet.if_snd

ef: Don't use IF_ queue macros on ifnet.if_snd

tun: Don't use IF_DROP on ifnet.if_snd

npx: Always embed saveymm in savefpu and remove dependency on opt_cpu.h

- pcb and mdglobaldata size will not change depending on CPU_DISABLE_AVX
- Modules' makefiles need not to be modified (well, almost all modules)

x86_64/options: Indentation

if: Remove deprecated if_handoff and related macros

ppp: Don't use IF_HANDOFF, use IF_ENQUEUE instead.

This nukes the last reference of the IF_HANDOFF

netgraph7/fec: Don't use IF_ macros on ifnet.if_snd

if: Remove IFF_POLLING from kernel space.

User space macro is kept for compatibility.  Adjust comment a little bit.

x86_64 - support for AVX instructions

 * CPU will be checked for XSAVE and AVX support on boot. If both are
   found, they will be enabled.

 * If enabled, the kernel will use the XSAVE and XRSTOR instructions to
   save and restore FPU, SSE and AVX registers.

Originally-Submitted-by: Adam Sakareassen (with modifications)

if: Move IFF_OACTIVE bit into ifaltq; prepare multiple TX queues support

ifaltq.altq_hw_oactive is now used to record that NIC's TX queue is full.
IFF_OACTIVE is removed from kernel.  User space IFF_OACTIVE is kept for
compability.

ifaltq.altq_hw_oactive should not be accessed directly.  Following set of
functions are provided and should be used:
ifq_is_oactive(ifnet.if_snd)  - Whether NIC's TX queue is full or not
ifq_set_oactive(ifnet.if_snd) - NIC's TX queue is full
ifq_clr_oactive(ifnet.if_snd) - NIC's TX queue is no longer full

Remove some emacs variable settings.

kernel -- ccd: Concatenated disk MPLOCK rework.

* Remove freelist of ccdbuf structures; kmalloc is good enough for them,
  removes a global list.

* Rework ccdlock/ccdunlock to use a real lockmgr lock rather than a
  hand-rolled "lock" in the flags field.

* Mark ccd disk D_MPSAFE; calls disk strategy routines without the MPLOCK.

* Remove mplock from ccdiodone biodone callback; use ccdlock() on the
  softcontroller instead.

* Remove unneeded critical section around ccdstart and in ccdioctl.

* Remove mplock2.h.

* Remove cb_freenext linkage from ccd buffers.

msgport.9: Adjust some comments to be <80 chars.

While here, rename NOTES to IMPLEMENTATION NOTES and move it to the
conventional place.

Bump copyright years.

Happy new year, everyone!

Fix aio_* manual pages section in references to them.

Make ng_fec compilable into the kernel and add it to the LINTs.

kernel/atm: Include <net/ifq_var.h> for ifq_set_max().

ng_fec: Fix a typo and include <net/ifq_var.h> for ifq_set_maxlen().

Reinforce that make dports-replace does not update, but _replaces_ ./dports.

boot - Use ether_sprintf() where appropriate.

%D is non standard and it is going to be removed soon.

libstand - Make ether_sprintf() public.

* Use ETHER_ADDR_LEN for ethernet address length where
  appriopriate.

Pointed-out-by: swildner

Revert "if_vke"

This reverts commit 8e3ef667d37ca26db190779e67073d6a16b47b88.

Wrong master branch pushed.

if_vke

re: RealTek8111F found in ASUS C60M1-I

DragonFly-issue: http://bugs.dragonflybsd.org/issue2479

em: Don't update TDT upon very packets transmitted

Merged following commits on emx(4):
7f32a9b0f8f25e43ab2ae4ee0d82ce69325d3b4b
0aba36eb844503423f414a3235eca72a78dc575a
b691889cfe23462069618f44bcf2ba0e71dcbb79

With following exception:
This optimization is not performed for 82547

pktgen: Pregenerate 3/4 of the ifq_maxlen should be enough

igb: Fix comment

emx: Fix comment

netgraph7/iface: Use ifq_dispatch() instead of ifq_handoff()

vlan: Use ifq_dispatch() instead of ifq_handoff()

atm: Use ifq_dispatch() instead of ifq_handoff()

ifq: Add ifq_purge_all(); currently it's same as ifq_purge()

This paves the way for the multiple transmission queues support.

ifq_purge_all() is used when ALTQ packet scheduler is changed,
interface routing is changed and pseudo devices are closed.

/usr/Makefile: Support dports and add error checking

* Check for git before issuing git command
* Check if directories existing when expected for a target
* Check if directories do not exist when they shouldn't for a target
* Issue error messages when above criteria are not met
* Convert to prinf to make spacing changes easier in future
* Remove options from help screen that are currently invalid
  ("make" by itself now reflects only options that are valid at the time)
* Remove reference to cvs repositories, that's obsolete now
* Add "dports-create" option (full git repository cloned from github)
* Add "dports-create-shallow" option (Depth=1 repository github clone)
* Add "dports-update" option to pull latest from git repository
* Add "dports-download" option (Download tarball from github, extract)
  (Has benefit that dports can be installed without git on system).
* Add "dports-replace" option (When dports was previously installed from
  tarball, use the option to replace it by downloading and extracting
  newer tarball)
* general cleanup

Add native dports support

DPorts, the ports building system tailored for Dragonfly,  requires
five bsd.*.mk scripts to be placed at /usr/share/mk in order to work
on DragonFly without any type of bootstrapping.

After installing dports using the /usr/Makefile script, any dport can
be built using the same instructions as FreeBSD (e.g. make install clean)

The resulting packages will be handled by "pkg", which will also be used
in the future for downloading prebuild binaries from an official
repository.

ifq: Move ifq_set_maxlen declaration to the declaration code block

ip6: Don't test ifq_len against ifq_maxlen; let IFQ make the decision

sctp: Don't test ifq_len against ifq_maxlen; let IFQ make the decision

ifq: Use ifq_set_maxlen for ifnet.if_snd

ifq/staging: Add comment about IFQ packet staging mechanism

ifq/staging: Remove debug code

ifq/staging: Clean up IFQ packet staging resources

- Make sure pending if_start scheduling IPIs are synchronized
- Make sure IFQ packets are no longer staged on any CPUs
- Free IFQ packet staging bookkeeping memory

ifq/staging: Increase ifq_maxlen a little bit for packets get staged

Increase ifq_maxlen by the amount that IFQ packet staging will take.

There are several places in the tree that if_snd.ifq_maxlen is set
directly instead of using ifq_set_maxlen().  These will be fixed in
some later commits.

ifq/staging: Perform IFQ packet staging for if_start scheduling

IFQ packets staging is now performed for ifnet's if_start scheduling,
i.e. if_start_schedule(), in addition to direct ifnet's if_start calling.

IFQ packets staging stopping condition
- if_start interlock (if_snd.altq_started) is not released.
is now changed to
- if_start_schedule() is not pending on the current CPU and if_start
  interlock (if_snd.altq_started) is not released.

By setting net.link.stage_cntmax to 8 and hw.igbX.tx_wreg_nsegs to 16,
following performance improvement is gained:
+80Kpps for normal IP forwarding
+30Kpps for fast IP forwarding

if_start: Use if_start_schedule in if_start_dispatch

Ease further optimization.

polling: Perform RX polling before TX polling

ifq/staging: Initial implementation of IFQ packet staging mechanism

The packets enqueued into IFQ are staged to a certain amount before the
ifnet's if_start is called.  In this way, the driver could avoid writing
to hardware registers upon every packet, instead, hardware registers
could be written when certain amount of packets are put onto hardware
TX ring.  The measurement on several modern NICs (emx(4), igb(4), bnx(4),
bge(4), jme(4)) shows that the hardware registers writing aggregation
could save ~20% CPU time when 18bytes UDP datagrams are transmitted at
1.48Mpps.

IFQ packets staging is performed for direct ifnet's if_start calling,
i.e. ifq_try_ifstart()

IFQ packets staging will be stopped upon any of the following conditions:
- If the count of packets enqueued on the current CPU is great than or
  equal to ifq_stage_cntmax.
- If the total length of packets enqueued on the current CPU is great
  than or equal to the hardware's MTU - max_protohdr.  max_protohdr is
  cut from the hardware's MTU mainly bacause a full TCP segment's size
  is usually less than hardware's MTU.
- if_start interlock (if_snd.altq_started) is not released.
- The if_start_rollup(), which is registered as low priority netisr
  rollup function, is called; probably because no more work is pending
  for netisr.

Currently IFQ packet staging is only performed in netisr threads.

Inspired-by: Luigi Rizzo's netmap paper
    (http://info.iet.unipi.it/~luigi/netmap/)
Also-Suggested-by: dillon@

kernel/powernow: Remove two unused variables.

libpthread: Add sem_timedwait().

It was commented out and I'm not sure why.

It needed a bit of adjustment to properly check the nanoseconds field but
with that, it passes all eleven tests of the Open POSIX Test Suite. Other
people (thesjg, vsrinivas) have tested and used it too in the past.

While here, also add a manual page (taken from FreeBSD).

In-discussion-with: vsrinivas

aio_write.3: Bring back a bit that should not have been deleted.

kernel/clock: Remove some pointless #include/#ifdef.

aio*.3: Some cleanup, wording improvement, etc.

Move AIO manual pages to librt.

While doing it, remove aio_waitcomplete(), as it has no librt (or POSIX)
counterpart.

librt/aio_cancel(): Set errno to EBADF if the fd is not valid.

kernel: Add CLOCK_THREAD_CPUTIME_ID

And make it usable with clock_gettime() and clock_getres()

With-advice-from: Sascha Wildner

iscontrol(8): Remove some unneeded includes.

mount_ntfs(8): Remove old __FreeBSD_version checks.

fwcontrol(8): Remove dead code.

kernel/ndis: We want the ctx_list and oid for now.

kernel/acpi: Fix #include, <sys/mutex.h> is not needed.

mlx(4): Remove unused defines.

kernel/iscsi: Do not conditionalize on undefined names.

kernel/procfs: Silence gcc47's whining.

ifq_dispatch: Avoid accessing the mbuf after it has been queued to if_snd

The enqueued mbuf could have be freed when it is used to update the stats.

arcmsr(4): Add missing D_MPSAFE (forgot when porting).

kernel/mmc: Remove an unused variable.

arcmsr(4): Remove some dead code and an unused variable.

Interrupts won't be enabled again in arcmsr_shutdown().

ifq_dispatch: If mbuf can't be enqueued and ifq has data; kick if_start

ip_forward: Optimize out the mbuf allocation for ICMP messages

A per-netisr mbuf template is used to save the necessary information
for later ICMP messages; this avoids unnecessary mbuf allocation
on forwarding path.  The mbufs for ICMP messages are allocated only
when ICMP messages do need to be sent.

Inspired-by: OpenBSD ip_forward

ip_output: Don't drop packet based on if_snd queue length

Later if_snd queue enqueuing should make this decision

installer: Remove CAPS remains.

share/Makefile: Break at initial letter boundary and sort terminfo.

installer: Use the LiveDVD's pfi.conf generally (works for LiveCD too).

Revert "mknod(2): Restrict functionality to creating FIFOs."

This reverts commit d5056fe0532f6e09c1c52b6384f3ef6e6db77a68.

After the commit, stuff like cpdup, tar, etc. used on dev would
start whining when before they would create the nodes, even
though they were not actually usable.

Since the potential breakage in external software is unknown, make
up my mind and go with the lower risk approach, even if it is kind
of pointless.

The mknod(8) utility is left deleted.

Remove the mknod(8) utility.

Now that we have devfs(5), it's of no use anymore.

mknod(2): Restrict functionality to creating FIFOs.

Now that we have devfs(5) for handling our device nodes, we can retire
part of mknod(2) functionality and restrict it to what POSIX requires:

"The only portable use of mknod() is to create a FIFO-special file.
 If mode is not S_IFIFO or dev is not 0, the behavior of mknod() is
 unspecified."

In-discussion-with: beket

standards.7: Add URLs for a couple of standards.

mdoc: Add definition for XSH, Issue 4, Version 2.

tools/toeplitz: Force 0 padding in result printing

pktgenctl: Allow pktgen device to be specified

pktgen: Create 4 device nodes by default

pktgen: This module is MPSAFE

While im here, nuke no longer needed CDEV_MAJOR

netisr: Remove unused macros

netisr: Add priority for netisr "rollup" functions

Higher priority "rollup" will be run first.  This mechanism auguments
the original "rollup" functionality which now could be used to implement
things like transmission packets aggregation and software TCP LRO.

polling: Increase default polling rate to 6000Hz

This increases the bidirational normal IP forwarding rate by 30~40Kpps

if_start: Fix indentation

installer: Always take the root directory's /dev.

Taking /dev relative to the directory we want to copy from was fine
until we got devfs, because we shipped actual device nodes in /dev
until then.

It only continued working because the directory we copy from is always
the distribution media's root directory currently.

kernel/atm: Fix wrong rt_tables[] access.

if_start: Fix a race that could delay the packets transmission

Since if_start_need_schedule is called w/ the cached IFF_OACTIVE out
side of ifnet's TX serializer, there could be a race that IFF_OACTIVE
could be cleared before if_start_need_schedule but after releasing
ifnet's TX serializer.  This could delay already queued packets
transmission until the new packet is coming.  Fix this race by calling
if_start_need_schedule inside ifnet's TX serializer.

Remove VFS_INIT(9) manpage via 'make upgrade'.

sglist.9: Add a missing include to the SYNOPSIS.

Remove VFS_INIT.9 manual page, there is no such macro.

VFS_MOUNT.9: Adjust to the current state in /usr/src.

Update the pciconf(8) database.

December 13, 2012 snapshot from http://pciids.sourceforge.net/

hammer2 - Split flush code out into its own source file

* Add hammer2_flush.c, move flush code into its own source file.