Merge commit 'refs/top-bases/feature-pthreads' into feature-pthreads

Revert feature-commit-cb feature upstream

We can drop this feature and we will pick up the lastest version
during the b141 update.

Remove feature-pthreads prior to b141 update.

The pthreads change will need to be reworked and reapplied.
This will be easier to do from scratch rather than sort out
the merge.

Merge commit 'refs/top-bases/feature-commit-cb' into feature-commit-cb

Merge commit 'refs/top-bases/feature-pthreads' into feature-pthreads

Add AUTHORS to master branch

Merge commit 'refs/top-bases/feature-commit-cb' into feature-commit-cb

Merge commit 'refs/top-bases/feature-pthreads' into feature-pthreads

Update COPYRIGHT to reference zpios CDDL exceptions.

Merge commit 'refs/top-bases/feature-commit-cb' into feature-commit-cb

Merge commit 'refs/top-bases/feature-pthreads' into feature-pthreads

Update COPYRIGHT to include release id LLNL-CODE-403049.

Merge commit 'refs/top-bases/feature-commit-cb' into feature-commit-cb

Merge commit 'refs/top-bases/feature-pthreads' into feature-pthreads

Update COPYRIGHT and DISCLAIMER.

Update the COPYRIGHT and DISCLAIMER in an attempt to be clear about
the copyright and licensing issues.

Merge commit 'refs/top-bases/feature-pthreads' into feature-pthreads

Merge commit 'refs/top-bases/feature-commit-cb' into feature-commit-cb

Update nvpair's to include nv_alloc_fixed support

Merge commit 'refs/top-bases/feature-pthreads' into feature-pthreads

Merge commit 'refs/top-bases/feature-commit-cb' into feature-commit-cb

Add Solaris FMA style support

Merge commit 'refs/top-bases/feature-pthreads' into feature-pthreads

Merge commit 'refs/top-bases/feature-commit-cb' into feature-commit-cb

Rename update-zfs.sh -> zfs-update.sh for consistency

Merge commit 'refs/top-bases/feature-pthreads' into feature-pthreads

Merge commit 'refs/top-bases/feature-commit-cb' into feature-commit-cb

Ignore unsigned module build products

Along with the addition of signed kernel modules in newer kernel
we have a few new build products we need to ignore.   LKLM has the
whole thread for those interested: http://lkml.org/lkml/2007/2/14/164

Merge commit 'refs/top-bases/feature-pthreads' into feature-pthreads

Use CPU percentages for number of commit cb threads.

This doesn't change number of threads in the kernel, but it reduces number of
threads in ztest (important due to 32-bit address limitations).

Merge commit 'refs/top-bases/feature-pthreads' into feature-pthreads

Merge commit 'refs/top-bases/feature-commit-cb' into feature-commit-cb

Add .gitignore files to exclude build products

Merge commit 'refs/top-bases/feature-pthreads' into feature-pthreads

Merge commit 'refs/top-bases/feature-commit-cb' into feature-commit-cb

Pull in latest man pages as part of update-zfs.sh

The script has been updated to download the latest documentations
packages for Solaris and extract the needed ZFS man pages.  These
will still need a little markup to handle changes between the
Solaris and Linux versions of ZFS.  Howver, they should be pretty
minor I've tried hard to keep the interface the same.

In additional to the script update the zdb, zfs, and zpool man
pages have been added to the repo.

Merge commit 'refs/top-bases/feature-pthreads' into feature-pthreads

Merge commit 'refs/top-bases/feature-commit-cb' into feature-commit-cb

Remove zvol.c when updating in update-zfs.sh Linux version available.

Merge commit 'refs/top-bases/feature-pthreads' into feature-pthreads

Merge commit 'refs/top-bases/feature-commit-cb' into feature-commit-cb

Script update-zfs.sh updated to include libefi library

Merge commit 'refs/top-bases/feature-pthreads' into feature-pthreads

Merge commit 'refs/top-bases/feature-commit-cb' into feature-commit-cb

Rebase master to b121

Revert kthreads based on pthread thread specific data due to failure.
With this patch applied I get the following failure 100% of the time,
I'd prefer to debug it and keep moving forward but I do not have the
time right now so I'm reverting the patch to the version which worked.
Ricardo please fix.

(gdb) bt
0  ztest_dmu_write_parallel (za=0x2aaaac898960) at
../../cmd/ztest/ztest.c:2566
1  0x0000000000405a79 in ztest_thread (arg=<value optimized out>)
    at ../../cmd/ztest/ztest.c:3862
2  0x00002b2e6a7a841d in zk_thread_helper (arg=<value optimized out>)
    at ../../lib/libzpool/kernel.c:131
3  0x000000379be06367 in start_thread (arg=<value optimized out>)
    at pthread_create.c:297
4  0x000000379b2d30ad in clone () from /lib64/libc.so.6

Revert unneeded ztest_resume() prototype changes to match upstream.

Reimplement user kthreads based on pthread thread specific data.
This resolves previous scalabily concerns about the cost of calling
curthread which previously required a list walk.  The kthread address
is now tracked as thread specific data which can be quickly returned.

Signed-off-by: Brian Behlendorf <behlendorf1@llnl.gov>

Change VERIFY() into VERIFY3U() when creating threads in ztest, so that we can see the return code when it fails.

Signed-off-by: Brian Behlendorf <behlendorf1@llnl.gov>

Remove debug printf

Provide correct kthread API semantics using pthreads.

The intent here is to fully remove the previous Solaris thread
implementation so we don't need to simulate both Solaris kernel
and user space thread APIs.  The few user space consumers of the
thread API have been updated to use the kthread API.  In order
to support this we needed to more fully support the kthread API
and that means not doing crazy things like casting a thread id
to a pointer and using that as was done before.  This first
implementation is not effecient but it does provide all the
corrent semantics.  If/when performance becomes and issue we
can and should just natively adopt pthreads which is portable.

Let me finish by saying I'm not proud of any of this and I would
love to see it improved.  However, this slow implementation does
at least provide all the correct kthread API semantics whereas
the previous method of casting the thread ID to a pointer was
dodgy at best.

Merge commit 'refs/top-bases/feature-pthreads' into feature-pthreads

Add new DMU_READ_PREFETCH flag to dmu_read().

Stop the kthread/thread/pthread mixing and matching insanity.  Update all
code to only use the kthread API regardless of if it is compiled in the
kernel or user space.  The kthread API will be layered on top of pthreads
as best as possible in zfs_context, this is non optimal but much clearer.

Additional lock calls were added to ztest and they must be updated
to use the pthread's API in favour of Solaris threads.

Merge commit 'refs/top-bases/feature-pthreads' into feature-pthreads

Conflicts:

cmd/ztest/ztest.c

Merge commit 'refs/top-bases/feature-commit-cb' into feature-commit-cb

Rebase master to b117

Merge commit 'refs/top-bases/feature-pthreads' into feature-pthreads

Fix uninitialized variable error in ztest_dmu_commit_callbacks()

Update mutex_lock to pthread_mutex_lock for zcl->zcl_callback_locks.

Merge commit 'refs/top-bases/feature-pthreads' into feature-pthreads

Add extra () requested by gcc

Add 'feature-pthreads' branch to features branch.

Add 'feature-commit-cb' branch for DMU commit callbacks.

Rebase master to b108

Refresh type in topgit git://* reference

Add GIT to master

Rebase master to b105

Add unicode library

Remove zdump, it's an unrelateds command which I added simply due to the z* command convention

Remove zcommon reference merged in to zpool

Moving lib/libspl to linux-libspl branch

Script updates

Move library files to lib

Fix libspl move to the wrong place

Fix typo

Add a few missing files

Move the world out of /zfs/ and seperate out module build tree

Remove libumem, we will try and remove this dependency entirely.  If we can't then the best move will simply be to use the official library, or build it as a convenience library

Move vmem* to libumem

Temporarily move taskq+util to libzpool until that directory is broken in to lib+module

Minor tweak to update script

Attempt move of kernel.c with topgit

Add userspace zfs_context file

Rebase to OpenSolaris b103, in the process we are removing any code which did not originate from the OpenSolaris source.  These changes will be reintroduced in topic branches for easier tracking

Remove stray stub kernel files which should be brought in my linux-kernel-module patch

Finish removing all non-upstream bits from master

Removed build system from master branch, will relocate to linux-zfs-branch

Removed build system from master branch, will relocate to linux-zfs-branch

Relocate COPYING+COPYRIGHT, remove README cruft

Add CDDL license file

Update zpios for trivial workload

Working version of M4 macro config

Make everything a M4 macro, it's just cleaner that way

Additional buidl system cleanup.  Starting to move all
of the kernel specific build info in to config/kernel,
likewise and user specific build flags should go in
config/user.  This seems like a reasonable way to go.

Prefix META_ALIAS with ZFS_

Add SPL prefix to META_* #defines

First step of META build system cleanup

Minor autoconf build fixes:

Fixed BUILDDIR in config/*
Added missing " to ZFS_AC_SCRIPT_CONFIG macro
Removed autoconf/Makefile

Use config directory, enable maintainer mode