Last hacks before move to TraceFS analysis SharedCacheMap based Cc.

Rewritten to be SharedCacheMap based instead of FileObject based.

Prevent deadlocks of recently implemented synchronization.
 - FIXME: Enable of file compression still hangs in CcFlushCache().
Improved IRP_MJ_FILE_SYSTEM_CONTROL dumps.
Dump FileObject attrs also on leave from IRP_MJ_*.
Fixed dump FileObject attrs on leave from IRP_MJ_*.

Fixed dump FileObject attrs on leave from IRP_MJ_*.

Dump FileObject attrs also on leave from IRP_MJ_*.

Improved IRP_MJ_FILE_SYSTEM_CONTROL dumps.

+Some cludges to better match Cc*().
Last commit before move to SharedCacheMap based checker.

Prevent deadlocks of recently implemented synchronization.
 - FIXME: Enable of file compression still hangs in CcFlushCache().

Synchronize all Cc*() calls for proper debugging info chronology.
Additional debug info for 'SharedCacheMap' tracking.

Fixed and rewritten for better extensibility.
 - FIXME: Bcb vs. threads.

+Implemented TraceFS W32 Cache Manager debug tracer

+Implemented TraceFS W32 Cache Manager debug tracer

+Strip 'captive_reactos_' prefix of W32-exported symbols.

+wcsncmp()

+wcsncmp()

captive_giochannel_setup(): Turn off GIOChannel buffering.
captive_giochannel_blind_io_read(): +Sanity protected read of unbuffered data.
 - Applies only to 'giochannel_orig==NULL' (non-fallbacked) blinders.

Cosmetic: Fixed compiler warning.

GIOCHANNEL_BLIND_BLOCK_SIZE: PAGE_SIZE -> 512
+'giochannel_orig' may be now NULL to just buffer the write requests.
 - FIXME: GIOChannel buffering will request bytes outside written range!
   - currently such ranges returned as successfuly read (zeroed blocks)
+captive_giochannel_setup() for libcaptive-compatible GIOChannel setup.
+captive_giochannel_blind_new_from_xml()

+captive_giochannel_setup() for libcaptive-compatible GIOChannel setup.

+CAPTIVE_OPTION_MEDIA_UNKNOWN as guaranteed invalid 'enum' value.

+Supplementary captive utilities for libxml2

+captive-bug-replay client to read --bug-pathname bugreports.

+RtlAssert() on write to compressed volume by ntfs.sys of NT-5.1sp1
+Why native NT autocheck (=w/o errors) the volume after our DISMOUNT_VOLUME?
+check for libxml2-2.5.8 TEXT_NODE bug for captive-bug-replay

+'captive_options->media' reported to --bug-pathname file

+vfs_commit() logging to --bug-pathname file

+FsRtlSplitLargeMcb()
+RtlCompressBuffer()
 - required by ntfs.sys of NT-5.1sp1 for write to compressed volume
   - FIXME: still fails by RtlAssert()

captive_Cc_IoPageRead(): Fixed to read full 'length', not just PAGE_SIZE.
 - ntfs.sys of NT-5.1sp1 writes and reads everything OK.
 - FIXME: volume is still autochecked by chkdsk although it is no corruptions.
CcMapData(): Expect more than PAGE_SIZE to be read by captive_Cc_IoPageRead().

+CcIsThereDirtyData()

Fixed e-mail address syntax typo.

CcRemapBcb(): +comments wrt functions applied to the resulting Bcb.

Cleanup SectionObjectPointers->SharedCacheMap handling.
 - FO_STREAM_FILE is not tracked, regular files are now strictly checked.
CcFlushCache(): Use regular ref_counting instead of CcRepinBcb() (cleanup).

+some simple sanity checks
CcUnpinRepinnedBcb(): Do not dirty the buffer to be compatible with NT-5.1sp1.
+some comments on 'privbcb->dirty' NT-5.1sp1 compatibility analysis.

+some comments on 'privbcb->dirty' NT-5.1sp1 compatibility analysis.
CcGetDirtyPages(): Rewritten/fixed to be compatible with NT-5.1sp1.

captive_privbcb_flush_{,un}ordered(): +Return whether anything was flushed.
captive_cc_flush(): More robust against buffer dirtying by buffer flushes.
captive_privbcb_flush_unordered(): Allow the same LSN to be written twice.
CcUnpinRepinnedBcb(): Set the buffer dirty (not sure if it is right).

CcSetDirtyPinnedData(): Fixed 'Lsn' setup breaking 'private_bcb_lsn_tree'.

CcMapData(): Allow shared-mapping of 'building' pages if MAP_NO_READ anyway.

CcMapData(): +protection agains function reentrancy (pagepos 'building' flag)
 - currently not reentrant, probably cured by MAP_NO_READ implementation

+g_error() message for unsupported ioctl 0x664016 - by NtfsFixDataError().

CcMapData(): Allow unaligned tail mapping of MAP_NO_READ.
CcCopyWrite(): Prevent pre-reading of data by PIN_NO_READ.
+some sanity checks

private_bcb_lsn_tree_key_compare_func(): g_log() #ifdef-ed as too expensive.

captive_privbcb_flush()->captive_privbcb_flush_unordered()
CcUnpinData_leave_func() forked to captive_privbcb_flush_ordered()
Fixed LSN ordering across the code.

privbcb_set(): Fixed PRIVBCB_ITEM_LSN_VALID handling.
 - Do not leave unreachable nodes in 'private_bcb_lsn_tree'.

Implemented MAP_NO_READ/PIN_NO_READ for writing files by ntfs.sys of NT-5.1sp1.
 - Not tested yet.
 - Partial leading/trailing PAGE_SIZE mapping not yet supported for MAP_NO_READ.

Cosmetic: Rename 'struct CcUnpinData_leave_func_param' callbacked user data.

private_bcb_flush_tree->private_bcb_lsn_tree: non-LSN dirty blocks not included
+PRIVBCB_ITEM_REF_COUNT_DESTRUCTOR: Proper derefercing while privbcb destroy.
+many debug dumps
private_bcb_hash_value_destroy_func(): +sanity check for !privbcb->valid_lsn
CcUnpinData_leave_func(): Cleanup and flush only minimal set of privbcb-s

private_bcb_flush_tree_key_compare_func(): Oops, LSN must be sorted low-to-high!

privbcb_set(): Forbid reincarnation of 'leave_func_pending' privbcb.
captive_cc_flush(): Flush by g_tree first to attempt to keep LSN ordering.
CcUnpinData_leave_func(): Flush mode if privbcb_stop_at==NULL.
CcUnpinData_leave_func(): Flush only the requested privbcb by CcUnpinData().

'last_written_lsn' handling: Use explanatory g_error() instead of g_assert().

privbcb_set(): More foolproof calling convention syntax.
privbcb_set(): Fixed updating of 'lsn_valid' field.

+comment file multi-mapping and #define CAPTIVE_FILE_INITIALIZED_CACHE_IS_LINEAR

CcMapData(): +sanity boundary check of mapped memory by unmapped neighbours

Fixed fix of collapsing '.' and '..' pathname elements.

Fixed captive_cc_flush() to flush even buffers written by other buffer writes.

Call also MmBuildMdlForNonPagedPool() after each MmCreateMdl().
 - no effect seen on ntfs.sys of NT-5.1sp1
CcPurgeCacheSection(): Return TRUE on empty purge.
 - required by LOCK_VOLUME on ntfs.sys of NT-5.1sp1
+CcWaitForCurrentLazyWriterActivity()

dismount_volume(): Also FSCTL_LOCK_VOLUME before FSCTL_DISMOUNT_VOLUME
 - no effect seen on ntfs.sys of NT-5.1sp1

+CcWaitForCurrentLazyWriterActivity()

_abnormal_termination() is now "wrap"ed by %fs:[0] protection agains '-1'
 - there is no toplevel exception handler registered by libcaptive

CcUnpinRepinnedBcb(): Flush 'Bcb' if 'WriteThrough' parameter specified
 - fixes DISMOUNT_VOLUME of fastfat.sys

+strict ulimit (rlimit) of sandbox child

Do not use total amount limited IPC shm memory for single-mapped Cc pages.
 - needed to write files >16MB on GNU/Linux

Refuse to overwrite target host-OS file by "get" command.

+minor sanity checks

Fixed EOF reading broken by recent --bug-pathname implementation.

Report specific error message on failed shmget(2) on IPC shared mem exceed

Fixed access to filenames with trailing dot(s) ('.')

captive_sandbox_parent_query_vfs_retry(): Fixed assumed success if CORBA failure

+Generates --bug-pathname resources file for sandbox crash bugreport

RtlpExecuteHandlerForException(): Permit nesting for FSCTL_DISMOUNT_VOLUME.

+Implemented filesystem unmount to successfuly remount ntfs volume

captive_shutdown(): Implemented proper unmount for ntfs.sys of NT-5.1sp1.
+dismount_volume(): Invoke filesystem FSCTL_DISMOUNT_VOLUME.

_abnormal_termination(): Disabled here as it is now "pass"ed to ntoskrnl.

Simplified captive_sandbox_spawn() prototype.
Implemented 3-stage image_iochannel GIOChannel sequence for commits.
+captive_sandbox_parent_vfs_commit()

Disabled sandbox child shutdown process exit as it is killed by its parent
 - otherwise COMM_FAILURE occured on shutdown() method call by parent

Simplified captive_sandbox_spawn() prototype.
Implemented 3-stage image_iochannel GIOChannel sequence for commits.
validate_CORBA_Environment(): CORBA Exception reporting is fatal
 - all its callers considered such case fatal anyway
corba_shutdown(): CORBA_ORB_destroy() errors ignored
 - it sometimes reports: a total of X refs to X ORB objects were leaked
   - FIXME - 1 ref per each sandbox child failure-restart cycle; why?
Disabled sandbox child shutdown process exit as it is killed by its parent
 - otherwise COMM_FAILURE occured on shutdown() method call by parent
Fixed heartbeat disable by sandbox_child_prepare_shutdown()
captive_sandbox_parent_query_vfs_retry(): Fixed exception memory leak

Implemented 3-stage image_iochannel GIOChannel sequence for commits.

Simplified captive_sandbox_spawn() prototype.

+fatal reporting message: "Invalid media IOCTL 0x%08lX"
+handler of IRP_MJ_FLUSH_BUFFERS

+ntoskrnl/fs/util.c

+libcaptive/ps/thread.c
 - +KeSetPriorityThread()

+libcaptive/ps/thread.c

+FsRtlIsTotalDeviceFailure()
+_abnormal_termination() as "pass"ed now
+KeSetPriorityThread()
+IoPageRead()

+_abnormal_termination() cdecl args fixup

+ExRaiseStatus()
 - needed by ntfs.sys of NT-5.1sp1 FSCTL_DISMOUNT_VOLUME for STATUS_CANT_WAIT
 - libcaptive one disabled as we use real ReactOS ExRaiseStatus() implementation

Fixed handling of cdecl fixups with 0 arguments.

+captive_sandbox_parent_vfs_commit()

+captive_vfs_commit()

+captive_giochannel_blind_commit()

Compiler warnings fixed for glib-2.2.2 compatibility.

+command "commit": Write any pending changes and remount the volume.

+command "commit": Write any pending changes and remount the volume.
+disable stdout and stderr output buffering

giochannel-blind moved from the sandboxed child to its parent.
 - needed for bugreporting.
Fixed running of sandbox child without chroot environment.
Fixed --sandbox-server-ior handling.

giochannel-blind moved from the sandboxed child to its parent.
 - needed for bugreporting.

Cosmetic: Comment updated.

captive_vfs_new(): Discard "Captive" debug messages if not wised.
 - Here is the first initializaton point of parent in sandboxed mode.

GLib messages are always fatal sandbox child as we have the right to fail.

Implemented 'struct blind_block' for read blocks tracking for bugreporting.

Return the created object as NULL if constructor failed.

Debug captive-sandbox-server in unsandboxed environment (no suid, no chroot).

+cleanup of dead sandbox children

Fixed memory allocation of 'sandbox_parent_own_orbit_dir'.