Bump mem3 to 3.2.2

Bump chttpd to 1.4.6

Pin chttpd to 1.4.5

quick fix for badmatch

remove dreyfus

Update couchjs for static build option, eliminate eval()

use chttpd/master during development

Add twig to path for etap tests

Required to run 030-doc-from-json.t

BugzID: 14419

Conflicts:
Makefile

disable cover

Fix travis build?

Suppress duplicate access logs

Use twig for logging

Conflicts:
apps/couch/include/couch_db.hrl
apps/couch/src/couch_server_sup.erl
rebar.config
rel/reltool.config

Add total_changes to view compaction status

Conflicts:
apps/couch/src/couch_view_compactor.erl

Fix design_document inconsistency

Always report it as "design_document":"_design/foo"

BugzID: 14562

Conflicts:
apps/couch/src/couch_view_compactor.erl

Backport new /_active_tasks API

Improved _active_tasks API

Tasks are now free to set any properties they wish (as an
Erlang proplist). Different tasks can have different properties
and the status string doesn't exist anymore - instead client
applications can build it using more granular properties from
_active_tasks. Some of these properties are:

1) "progress" (an integer percentage, for all tasks)
2) "database" (for compactions and indexer tasks)
3) "design_document" (for indexer and view compaction tasks)
4) "source" and "target" (for replications)
5) "docs_read", "docs_written", "doc_write_failures",
   "missing_revs_found", "missing_revs_checked", "source_seq",
   "checkpointed_source_seq" and "continuous" for replications

BugzID: 14269

Conflicts:
apps/couch/src/couch_db_updater.erl
apps/couch/src/couch_rep.erl
apps/couch/src/couch_task_status.erl
apps/couch/src/couch_view_compactor.erl
apps/couch/src/couch_view_updater.erl

Don't touch the old couch_lru ets table

It doesn't exist.

BugzID: 13299

Allow 202 as a valid status code

BugzID: 13940

Only close idle processes that have no client

Previously we didn't check if an os_process was in use by a process
before closing it. This ended up generating noproc errors in the
couch_view_updaters which would then spider out to the couch_view_group
processes causing client errors and resetting compaction.

BugzId: 13798

Remove the client ref when it dies

We have observed periods of couchjs processes spiking into the hundreds
and thousands for short periods of time since the new couch_proc_manager
was released. Today I happened to catch one in the act and poked at
couch_proc_manager's ets table. There seemed to be a few more couchjs
processes with clients than I would have expected so I skimmed the code
looking for a place where we didn't clear the client value (which would
prevent it from being reused so that it would eventually just timeout).

I found a case where if the Pid that checked out the process dies
without the OS process dying, we were forgetting to clear the client in
the ets table. This patch refactors the two places we return processes
into a single function call which clears the OS process client.

Two last bugs in couch_proc_manager

* Design doc languages are converted to lists
* Make sure to monitor every client correctly

Use a match_spec() instead of a match_pattern()

I misread the docs on what was expected for ets:select_receive/3.

Avoid scanning the entire table of procs

For large numbers of os processes its possible that we have a slowdown
when requesting a new process. The old code matches all possible
processes out of the table to find an appropriate candidate.

We avoid the issue by using ets:select_reverse to also prefer keeping
newer processes and releasing longer lived processes. Length of life is
based on the implicit sorting of pids having newer pids sorting larger.

Mark proc as unused in ret_proc

Otherwise we'll never reuse it

Trigger a GC when OS process is returned

Allow processes to idle before exiting

When system load exceeds the ability of os_process_soft_limit to keep
up with demand we enter a fork-use-kill (FUK) cycle. The constant
spawning and destruction os these processes thrashes system resources
and causes general instability.

This patch changes the behavior from killing each process as its
returned to letting it idle for a configurable amount of time (default
five minutes) which allows it to be reused by other clients. This way we
can avoid adding unnecessary load when demand for couchjs processes
exceeds os_process_soft_limit.

As a happy benefit this should also allow os_process_soft_limit to be
set much lower since the number of processes will now more closely
follow actual demand (instead of provisioning for the worst case
scenario).

Conflicts:

apps/couch/src/couch_os_process.erl
apps/couch/src/couch_proc_manager.erl

Conflicts:
apps/couch/src/couch_os_process.erl

Fork new OS processes outside proc_manager loop

Add an index keyed on LRU for faster candidate ID

Our current implementation for closing an LRU DB involves a full scan
of a public ets table.  This scan blocks all other activity in
couch_server and can become a serious bottleneck when the LRU cache hit
rate drops too low.  In the worst-case all_dbs_active scenario we end up
with O(N**2) algorithmic complexity.

This patch adds a new index keyed on LRU for faster access to the least
recently used databases.  It also moves the ets table to a dict on the
couch_server heap.  The downside is an increased message rate inbound on
the couch_server, as clients are no longer allowed to update the LRU
data structures without sending a message.

BugzID: 12879

Conflicts:
apps/couch/src/couch_server.erl

Expose latest=true option in calls to retrieve revisions

When a call is made to retrieve a specific revision, latest=true will
retrieve any descendent leaves instead. This enables the replicator to
better keep up with edits that occur whilst it's retrieving revisions

BugzID: 14241

Skip ddoc pull, use middleman for validation reset

We were pulling a list of design documents and then ignoring the result
when the #db was a partition of a clustered database.  Also, the call to
fabric:reset_validation_funs/1 can occasionally cause a stray rexi_EXIT
message to arrive in the db_updater mailbox (and subsequently kill the
server) if a worker fails.  I don't think that's desired behavior,
though it's a debatable point.  This patch spawns a middleman process to
act as a sink for those stray messages.

BugzID: 13087

Fix spurious declarations of new merge conflicts

This patch also adds extra tests of the key tree merging logic as well
as edoc-formatted documentation for the module and a few of the merge
functions.  Closes COUCHDB-902.

Thanks Paul Davis, Bob Dionne, Klaus Trainer.

git-svn-id: https://svn.apache.org/repos/asf/couchdb/trunk@1065471 13f79535-47bb-0310-9956-ffa450edef68

Support jsonp in externals.

Allow ?callback= for any external that returns json (i.e,
uses "json":{} instead of "data":"data".

BugzID: 12748

Bump dependencies

don't delete view groups that fail to open

...but log a message instead. Fixes COUCHDB-1445.

Support multiarch library paths on Linux.

Bump dependencies

Don't always require exactly N replies for an mp attachment PUT

It's not safe to assume we require, or will receive, exactly N replies
(where N is read from the "n" key of the "cluster" section of the
configuaration). This needs proper fabric-ification.

This commit will at least allow replication tests with clusters of
less than N nodes where the documents have attachments (which triggers
the multipart code).

BugzID: 14258

Bump dependencies

Add _replication_stats

Bump couch_replicator to 0.1.2

Don't perform callbacks to couch_replicator

Fix _replicator db

Add a dummy replicate/3 for now

Conflicts:
apps/couch/src/couch_rep.erl

Revert "allow replication callback module to be chosen at runtime."

This reverts commit faf9071260147275bbac1633b599e85b4a302e8b.

Fix URL for twig

Fix deprecation warnings for port_compiler

Update lots of dependencies

Bump rebar to version 2.0.0

Merge pull request #105 from Asquera/fixes/gentoo-build

Allow building on Gentoo

Fix Build for Gentoo

Modify SConscript so that it recognizes the standard name for the
mozjs/spidermonkey lib on gentoo.

Whitespace

Invoke couch_view_updater with the proper arguments

This fixes stale=update_after.

Enable Travis builds

Merge 0.4.x

Fix previous commit

Fix bug in replicator request piplining

A replication with both an HTTP source and target on the same host and
port could end up in a dead lock due to ibrowse replication pipelining
when attachments are present on the source. The ibrowse http worker
would end up forming a multipart/mime body using anonymous reader
functions for attachment stubs. When the attachment stub functions are
executed it is possible that they end up assigned to the same ibrowse
worker.

This is a bit of a long path but then end result is equivalent to
calling gen_server:call(self(), Args, infinity) from a gen_server
callback.

A quick work around for users is to set up a DNA alias (possibly in
/etc/hosts) or to use a combination of hostname and ip address so that
ibrowse assigns the requests to different pools.

Whitespace

Minor bug getting the reduce_limit setting

Minor bug getting the reduce_limit setting

Bump dependencies for pre7 release

Revert use of spawn_monitor

As Filipe correctly points out, we want the parent to die if the child dies.

Bump to chttpd 1.4.2

Merge pull request #91 from cloudant/13133-attachment-replication

Fix attachment replication

BugzID: 13133

Only set the process dictionary if exit was ok

Use spawn_monitor to await process completion

BugzID: 13133

Remove superfluous formatting

Remove unused URLs

Bump fabric and chttpd versions

The fabric bump fixes some corner cases for read repair.  The chttpd
bump improves error handling for delayed responses.

Make cURL a soft dependency

This makes sure that we only optionally require the same version of cURL
that CouchDB does.

Make cURL a soft dependency

This makes sure that we only optionally require the same version of cURL
that CouchDB does.

Allow CPPPATH to be overriden in the environment

Set the stack size for sub contexts

I was forgetting to pass the args through to evalcx so that it could use
the stack size specified on the command line.

Allow CPPPATH to be overriden in the environment

whitespace

Set the stack size for sub contexts

I was forgetting to pass the args through to evalcx so that it could use
the stack size specified on the command line.

Remove unused imports

Add check for JS script object type

Add check for JS script object type

Bump fabric version and drop the pre1 from release version

Conditionally apply JSON encoding to update_seq values

BigCouch 0.3 cannot parse requests of the form /db/_changes?since="123-foo" so
the recent ?JSON_ENCODE addition to Since in two places causes 0.3 <-> 0.4
replication to fail with json_encode/badterm errors.

This patch applies JSON encoding only when the Since value is not already a
binary (i.e, when it's a [integer(), binary()]) and interop is restored.

BugzID: 12833

Merge pull request #80 from cloudant/12833-conditional_json_encode

Conditionally apply JSON encoding to update_seq values

BigCouch 0.3 cannot parse requests of the form /db/_changes?since="123-foo" so
the recent ?JSON_ENCODE addition to Since in two places causes 0.3 <-> 0.4
replication to fail with json_encode/badterm errors.

This patch applies JSON encoding only when the Since value is not already a
binary (i.e, when it's a [integer(), binary()]) and interop is restored.

BugzID: 12833

Simplify README

Update troubleshooting link

Simplify README

Add a script to create a source tarball

Merge commit '1.1.1' into 0.4.x

Conflicts:
acinclude.m4.in
configure.ac
couchjs/c_src/http.c
src/erlang-oauth/Makefile.am
src/erlang-oauth/oauth.app.in
src/erlang-oauth/oauth_hmac_sha1.erl
src/erlang-oauth/oauth_http.erl
src/erlang-oauth/oauth_plaintext.erl
src/etap/etap_web.erl

Fix retrieval of headers larger than 4k

Our headers start with a <<1>> and then four bytes indicating the length
of the header and its checksum. When the header is larger than 4090
bytes it will be split across multiple blocks in the file and will need
to be reassembled on read. The reassembly consists of stripping out
<<0>> from the beginning of each subsequent block in the
remove_block_prefixes/2 function. The bug here is that we tell
remove_block_prefixes that we're starting 1 byte into the current block
instead of 5, so it ends up removing one good byte from the header and
injecting one or more random <<0>>s.

Headers larger than 4k are very rare and generally require a view group
with a huge number of indexes or indexes with fairly large reductions,
which explains why this bug has gone undetected until now.

Closes COUCHDB-1319.

Fix retrieval of headers larger than 4k

Our headers start with a <<1>> and then four bytes indicating the length
of the header and its checksum. When the header is larger than 4090
bytes it will be split across multiple blocks in the file and will need
to be reassembled on read. The reassembly consists of stripping out
<<0>> from the beginning of each subsequent block in the
remove_block_prefixes/2 function. The bug here is that we tell
remove_block_prefixes that we're starting 1 byte into the current block
instead of 5, so it ends up removing one good byte from the header and
injecting one or more random <<0>>s.

Headers larger than 4k are very rare and generally require a view group
with a huge number of indexes or indexes with fairly large reductions,
which explains why this bug has gone undetected until now.

Closes COUCHDB-1319.

Fix SpiderMonkey source evaluation

Looks like we had a couple commits get crossed over during the merges.
This removes the original version of the patch that wrapped JS functions
with parens.

Fix SpiderMonkey source evaluation

Looks like we had a couple commits get crossed over during the merges.
This removes the original version of the patch that wrapped JS functions
with parens.

Hardcode couchjs binary name

Windows doesn't have the libgen.h header or an easily identified
basename function. Instead of playing games we just configure the name
with autoconf and run with that.

Fix object sealing with spidermonkey 1.7.0

Fix object sealing with spidermonkey 1.7.0

Update CHANGES and NEWS to reflect COUCHDB-1129

Fix JavaScript CLI test runner.

Accidentally inverted the logic of a test when patching for newer
versions of SpiderMonkey.

Fix object sealing on sm 1.7.0

mention 1.8.5 support in NEWS/CHANGES

Revert "Build couchjs with C, not C++. Fixes libm error on CentOS."

This reverts commit 6b26f47e8287b2d1c1d7b74199647dec2e7c2bef.

Turns out the 'libm' error is a very obscure way of reporting a lack
of a C++ compiler.

Minor fixes to link agianst SpiderMonkey trunk

This patch allows couchjs to link against the SpiderMonkey as it existed
in the mercurial hash 59c1e6bdb11 from [1]. This does *not* ensure
compatibility with CouchDB as there are other things that will also need
to be fixed. Specifically, the anonymous function issue for builtin JS
functions.

[1] http://hg.mozilla.org/mozilla-central/

Prevent linking against too new of a SpiderMonkey

Versions of SpiderMonkey newer than js185-1.0.0 have removed the
JSOPTION_ANONFUNFIX which basically invalidates all CouchDB JavaScript
functions ever written.

This configure patch prevents the accidental linking to a library that
has this new behavior while allowing people to forcefully override the
check.