More progress on the new configurator. All configurations have been converted.
The centrum/cz config decides on configuration according to host name.
Autoconf is able to auto-detect gcc.

Switched to the new config mechanism. Greatly simplified.

More pieces of new configure.

Added first pieces of the new configuration mechanism. (Not connected
to the rest of Sherlock yet, so you can still build Sherlock as usually.)

Rewritten Makefiles to support separated source and object trees.
The source tree is now strictly read-only, which simplified several
things, but also let me struggle for 4 hours with GNU make bugs and
misfeatures.

Don't use prefetch on Pentium 4, it actually gives worse results than
not prefetching at all. Need to investigate more later.

Added qache_probe().
Bugfix: Ignore position hints to empty slots, even if the key matches.

Added `u8' and `s8' to keep consistency.

Added file_close_all().

Cache module finished. Implemented internal consistency checks (which are
tried before we decide to use an existing cache file) and tested everything.

More work on the caching module: added some debugging messages,
moved next block pointers to a separate area.

Wrote the cache module, not debugged yet.

First steps towards a universal shared memory cache, which will be used
in the multiplexer and later probably also in the search server.

Warn on mistyped arguments to stk_printf().

Mainloop timers are now measured in milliseconds. Will be used by shep-reap one day.

Avoid "cast of pointer to a smaller integer type" warnings.

If previous check-customs run failed, run/cf could be empty.

Fixed building of shared library config,

Fix incorrect pointer casts.

Build full debugging config with shared libraries as well.

typo fixed

shup up, gcc

fixed library dependencies

comparison of signed and unsigned encountered without CONFIG_LFS

Added clist walking macros with embedded C99 declaration of the iterator
variable.

added yet another utility for processing cvs logs

added th2

If requested by config.mk, install all libraries and their include
files for use by external programs.

I don't expect this mechanism to be used in Sherlock itself, but I need
to use it in a couple of other projects (including Lestrade) and I want
to keep the things consistent.

Clarified a comment.

A better comment.

Oops, a nasty bug has crept in.

Added overflow-safe string functions allocating everything on the stack.
Actually, they are all macros, but passing parameters with side-effects
should be safe, because they are always evaluated exactly once.

Added tests for the mempool string functions.

Added printf-like function with output to mempool.

Added fb_wrap_charconv_in().

A minor optimization.

Don't forget to undefine BUF_T.

Wrong alignment fixed.

We should check the special case.

useful macro to align pointer p to size s

update the copyright; it's been quite a long time until I have found a use
for this module :))

added TREE_WANT_BOUNDARY for finding the first/last node

Added another debugging customization for testing of custom stats and matchers.

Fixed a nasty bug in partmap_map(). When called for an item spanning window
boundary, it miscalculated the memory address and returned the start of the
new window instead.

Added functions for single-character conversions between selected
character sets and Unicode, with no interpolation.

.cvsignore no longer needed here.

Resurrected CONFIG_LARGE_DB.

Large database format and LFS really should be different switches --
small DB combined with LFS gives a 4GB limit, small with no LFS gives
2GB limit.

CONFIG_LFS is now always on (it's supported by all current Linux libc's
and the performance penalty for using 64-bit sh_off_t is negligible),
CONFIG_LARGE_DB is controlled by config.mk.

Compilation of Perl and Shell parts of libucw is optional.

Adjust comments in UCW Library modules.

Changed all references to Sherlock Library by UCW Library.

SHERLOCK_HAVE_PREAD -> HAVE_PREAD.

CONFIG_LFS has been removed, CONFIG_LARGE_DB got replaced by CONFIG_LARGE_FILES.

Moved oid_t to sherlock.h.

Moved the lizard-fb module to Sherlock library, because it's heavily
dependent on the bucket types. The rest of LiZaRd should better remain
in libucw, it's very useful outside Sherlock.

Configure libucw according to Sherlock config.

Moved CGI.pm and Query.pm to Sherlock library.

Split library functions to libsh and libucw.

Introduced `sherlock/config.mk' which contains non-customizable parts
of the configuration. Moved version and config file name there.

Made DEFAULT_CONFIG optional.

fb-charconv now not closing wrapped stream, only flushing it
updated all places, when used this wrapper and close wrapped stream manually

A minor bug fix to the installer (when installing `dict/cs', `dict'
needn't exist).

Added the `extras' target (initially empty) and INSTALL_RUNDIRS.
`lib' and `bin' are now handled as INSTALL_RUNDIRS.

Partial inlining of bskip().

Introduced COMPARE_LT and COMPARE_GT for comparison functions for arraysort.

Increase CARD_POS_SHIFT on Centrum.

If "Run" is omitted from a test, keep the value from the previous test.

enlarge MAX_ATTR_SIZE

Move all explicit extern declarations of logf() [which is apparently missing
from system includes while present in the library; does anybody know, why?]
to lib/math.h.

Updated test rules.

Added tests for the hash table module.

Added support for dynamically allocated hash tables. Closes Bug #250.

Finally I decided to change the syntax of INDEX_VERSION to better distinguish
between different customizations.

Corrected INDEX_VERSION, documented the rules and added CUSTOM_INDEX_VERSION.

if SORT_PRESORT and SORT_UP_TO are both on, compute the initial number of
runs properly so that we do not run a superfluous pass of sorting

just a bit more funny initialization for the SORT_UP_TO loop

actually, the number of runs is halved during each pass, so take it into
account in the stopping condition

Fixed a bug in parsing of replies -- the parse tree of each card was trimmed
at the first ")". Affected only the free front-end.

bfilesize() returns sh_off_t

SORT_ONLY_PRESORT feature improved into SORT_UP_TO (stop when average run
length reaches a given limit), which is independent on presorting

Split type_flags to 4/4 bits for FILETYPE and LANG

Remember that DEBUG has been renamed.

Added "pre-sort only" mode as Robert suggested.

One more round of changes to the assert code -- I didn't realize that CONFIG_DEBUG
is already used to control compilation of debugging utilities. Introduced
DEBUG_ASSERTS as a separate switch and as a bonus, you can use assertions
selectively (previously, if you have built the library without assertions,
ASSERT couldn't work anywhere, because assert_failed() was incompatible).

Always define the memory allocation primitives with the `sh_' prefix,
so that the basic names (xmalloc etc.) can be modified when needed.

Changed DEBUG to CONFIG_DEBUG to avoid conflicts with various libraries.
(BTW we were probably slowing down the regex code by defining DEBUG.)

Tagged current sources as rel-3-3 (bug fixes only)
and moved mainline to v3.4.

Double oops.

Oops.

Added sh_file_size()  (stat() isn't reliable on large files on some systems).

Introduced relative counterparts of url_canon_split() and url_auto_canonicalize().

Also added parameter names to all prototypes.

Let bskip() return success.

obuck_slurp_pool() is now able to skip unwanted buckets. Some day we can
improve it by sizing the buffer adaptively, but not now.

A couple of minor improvements to the generic hash tables:

o  Comment on HASH_GIVE_ALLOC corrected, the automatic choice between
   normal and pooled allocation was never implemented, because we don't
   have enough information to decide the right pool size. HASH_AUTO_POOL
   has been implemented instead.
o  Pooled allocation no longer conflicts with remove/delete, it just
   produces memory leaks within the pool, which are usually harmless.
o  Added HASH_TABLE_ALLOC switch.
o  Internal decisions to enable HASH_CONSERVE_SPACE were made too late
   and didn't influence hash node layout. Fixed.

Thoroughly tested and fixed a couple of bugs.

Fixed a couple of bugs.

No exceptions for url-equiv.

tested MJ's patches on charconv.  they successfully converted everything
I tried, including the tests that failed before

- bugfix: when disabling compression, change bucket_type
- lizard_bwrite() returns the final bucket_type instead of the number of
  written bytes

added sepsplit() in wordsplit.c

Added initial support for areas to the indexer. Merging not restricted yet,
but propagation of area ID's works.