partially updated free/mkdist

Merge with git+ssh://git.ucw.cz/projects/sherlock/GIT/sherlock.git#v3.10

Merged genconf improvements from mainline.

CPU_PAGE_SIZE ported from mainline.

added missing type for a local variable

Fixed a typo preventing compilation in non-threaded mode.

Remove relics of pre-CONFIG_UCW_THREADS times.

Merge with git+ssh://git.ucw.cz/projects/sherlock/GIT/sherlock.git

Merged mainline with parallel shep-reap:
- bucket file iface supports more than one opened DB
- shep-reap can preload buckets in parallel (useful especially on RAID systems)

Use thread ID for temporary file creation.

Added thread_id to ucwlib_context.

Free thread context structure on thread termination.

Fixed bug in signal handling.

Removed the `returned' hook.

Implemented priority queues.

image-sim-test can display also base224-encoded signatures

fixed long option for computation of base64 signatures

image-sim-test can display base64-encoded signature

Updated various programs and Makefiles to use the threading infrastructure.

Updated libucw threading notes.

Logging functions are thread-safe.

Fixed thread safety of signal handling.

Signals delivery is generally not deterministic in multi-threaded programs,
but SIGSEGV is always sent by the kernel to the thread which caused the fault.

Replaced the global signal handler array by a pointer in the per-thread
context and replaced saving of original handles (which was wrong even in
some non-threaded cases) by locked use counters.

Also moved logging of the SIGSEGV error message out of the signal handler
to be sure there are no clashes.

When libucw is compiled without threading, everything is nearly as simple
as before, because the thread context struct is static and all locks
disappear.

Export temp_file_name().

Creation of temporary files is now thread-safe (ugh).

Added threading infrastructure to libucw and CONFIG_UCW_THREADS.

Finally decided that we need threading support in too many libucw modules,
so the only sane thing is to link all programs with -lpthread. On the
other hand, I would like to keep the possibility of building non-threaded libucw,
so I've introduced a new config switch, which is always set for Sherlock.

Trivial cleanups.

Added a library module for distributing work between threads.

(Ported from the dev-sorter branch.)

Merge with git+ssh://cvs.ucw.cz/projects/sherlock/GIT/sherlock.git#v3.10

(centrum/cz/{cf/local,config} merged manually)

CONFIG_INSTALL_API installs libimages headers

Merge with git+ssh://git.ucw.cz/projects/sherlock/GIT/sherlock.git#v3.10

fixed reading of big jpegs (serious today's bug)

Merge with git+ssh://git.ucw.cz/projects/sherlock/GIT/sherlock.git#v3.10

fixed deinterlacing of very small GIFs

typo

Merge with git+ssh://git.ucw.cz/projects/sherlock/GIT/sherlock.git#v3.10

according to libjpeg documentation fill_input_buffer should never return zero

ignore libjpeg warnings

64bit bug in image signatures

fixed segfaulting libjpeg warnings when decoding partially wrong images...
now we reject such images, but it can be easily changed in ifdef

partial YCCK colorspace support

fixed Bug 3188 - libimages supports shared libraries;
it depends on libsh only with CONFIG_SHERLOCK

hacked libimages tests dependencies

fixed color.test compilation

Moved the update hook script to a separate repository.

added support for some color conversions; we should be able to load cmyk
jpegs now...

image-tool uses RGB automatically when converting non-RGB jpegs
to gif/png

slightly changed dealing with color spaces
(I will add CMYK -> RGB conversion soon ... bug #2819)

enable dynamic linking on Darwin

auto-detect CONFIG_LFS

make the Perl Ulimit module compilable on Darwin

update the code so that it compiles both on Linux and Darwin

fdatasync is not supported on Darwin ===> work-around

added a wrapper for POSIX semaphores that works also on Darwin

separate the support of large files from using LFS versions of file functions

ALIGN renamed to ALIGN_TO

fixed forgotten text :)

Completed merge with dev-img branch.

- libimages library
- gatherer uses libimages instead of GraphicsMagick
- added indexation of image signatures and support
  for similar images to search server (IMAGESIM)
- CZ indexation split to text and images
- ... and more small changes

Partial merge with dev-img - added libimages.

rewriting PL timetables... incomplete

Merge with git+ssh://cvs.ucw.cz/projects/sherlock/GIT/sherlock.git

stk_printf() has been fixed.

genconfig can include program's output (should be deterministic)

conf: improve the format of the error message issued on invalid -S setting

thread-safe stk_printf

Replaced the SORTER_DECLARE_ONLY hack by lib/sorter-globals.h.

Define NO_INLINE, which can be helpful when profiling.

Merge with git+ssh://cvs.ucw.cz/projects/sherlock/GIT/sherlock.git

A better comments on character set names.

note that we use RCF names for supported charsets

Documented thread safety of ucwlib functions.

Merge with git+ssh://git.ucw.cz/projects/sherlock/GIT/sherlock.git

Guard against calls of random_max() with too large range.

Added random_u64() and random_max_u64().

Avoid unnecessary include of bbuf.h in fastbuf.h.

Define the buffer type as both a typedef and a structure.

Implemented the atomic fastbuf backend.

Atomic fastbufs: the first sketch of the interface.

Added ALWAYS_INLINE.

Hide the TAGS file from the prying eyes of GIT.

Oops, a typo.

Enable prefetching on some more CPU's.

Added automatic configuration for Prescott, Nocona, Pentium-M and amd64 CPU's.

Merge with git+ssh://cvs.ucw.cz/projects/sherlock/GIT/sherlock.git

Small customizations moved do a new directory:
  bare -> customs/bare
  lib/config -> customs/libsonly

Merge with git+ssh://cvs.ucw.cz/projects/sherlock/GIT/sherlock.git

Also cherry-picked some bits of dev-slices.

Added sh_fstat.

Introduced new switch CONFIG_SHERLOCK which can
be used to disable Sherlock compilation.

Command
  ./configure lib/config
builds only libucw, libcharset and part of libsh.

Avoid using ~/.muttrc of the user invoking GIT.

added missing _UCW prefix to headers guards

Merge with git+ssh://cvs.ucw.cz/projects/sherlock/GIT/sherlock.git

fixed some compilation warnings

Merge with git+ssh://cvs.ucw.cz/projects/sherlock/GIT/sherlock.git#v3.9

fixed v3.9 config parsing in web-queue-main

Merge with git+ssh://www.ucw.cz/projects/sherlock/GIT/sherlock.git#v3.9

Merge with git+ssh://cvs.ucw.cz/projects/sherlock/GIT/sherlock.git#v3.8

Merge with git+ssh://www.ucw.cz/projects/sherlock/GIT/sherlock.git#v3.9

backport patch from head

backport patch from head

fix - allow logfiles larger then 2G

When exporting libucw API, don't forget to add autoconf.h.