client accept connection request even if no free ah

It can join the free ah list and pick up client connect processing
later when the ah becomes available; this simplifies the code
doing the request since he won't have to deal with unexpected
failures / retries based on dynamic ah availability.

To do this though we have to handle that the connect_info members
may not have scope that lets them still exist after we return from
the first connect call, we stash them in a malloc'd buffer so the
connect processing can have them much later even so.

Signed-off-by: Andy Green <andy.green@linaro.org>

release checklist ab

Signed-off-by: Andy Green <andy.green@linaro.org>

adopt readbuf do service

Signed-off-by: Andy Green <andy.green@linaro.org>

libuv when in use skip shutdown close phase

Signed-off-by: Andy Green <andy.green@linaro.org>

windows listen for pollhup

After Ondraco

https://github.com/warmcat/libwebsockets/issues/441

Signed-off-by: Andy Green <andy.green@linaro.org>

ah move more_rx_waiting to wsi scope

Originally this was alright in wsi->u.hdr, because ah implied header
processing.  But since we allowed ah to be held across http
keep-alive transactions if we saw we had more header data, it means
we were trying to read this union member out of scope after it had
transitioned.

Moving the more_rx_waiting member to be a 1-bit bifield in the wsi
solves it and lets us check the state any time later at http
transaction completion.

https://github.com/warmcat/libwebsockets/issues/441

Signed-off-by: Andy Green <andy.green@linaro.org>

test server libuv support status protocol

Signed-off-by: Andy Green <andy.green@linaro.org>

libuv create 1Hz background timeout check

Signed-off-by: Andy Green <andy.green@linaro.org>

Don't include <sys/cdefs.h> for NetBSD

We needed it for the BSD symbol to be defined, while __NetBSD__ is defined
with a compiler.

Thanks Andy Green for the initial fix.

Signed-off-by: Kamil Rytarowski <n54@gmx.com>

netbsd netinet include

Signed-off-by: Andy Green <andy.green@linaro.org>

force service properly when unconsumed rxbuf in ah

Signed-off-by: Andy Green <andy.green@linaro.org>

adopt readbuf fix no ah path

Signed-off-by: Andy Green <andy.green@linaro.org>

close wsi must do detatch ah flow even if no ah

Signed-off-by: Andy Green <andy.green@linaro.org>

improve timeout and ah list comments

Signed-off-by: Andy Green <andy.green@linaro.org>

remove ah scan

Signed-off-by: Andy Green <andy.green@linaro.org>

fix missing callback return check

Signed-off-by: Andy Green <andy.green@linaro.org>

unix privs change group before user

Otherwise we no longer have privs to change the group after doing the user

Signed-off-by: Andy Green <andy.green@linaro.org>

test server log LWS_CALLBACK_HTTP

Signed-off-by: Andy Green <andy.green@linaro.org>

logging timestamp creation expose as api

Signed-off-by: Andy Green <andy.green@linaro.org>

cgi

Signed-off-by: Andy Green <andy.green@linaro.org>

user code must explicitly complete http transaction

Signed-off-by: Andy Green <andy.green@linaro.org>

defeat POLLOUT if socket in shutdown wait

After andrejs.hanins@ubnt.com

Signed-off-by: Andy Green <andy.green@linaro.org>

adopt variant with preamble rx

Signed-off-by: Andy Green <andy.green@linaro.org>

ws union member must have actual struct at start not pointer

Signed-off-by: Andy Green <andy.green@linaro.org>

client callback closed if not upgraded also for server connection

https://github.com/warmcat/libwebsockets/issues/437
https://github.com/warmcat/libwebsockets/pull/440

client connect must init position_in_fds_table

windows doesnt have localtime_r

Signed-off-by: Andy Green <andy.green@linaro.org>

test server status no ssl include time header

Signed-off-by: Andy Green <andy.green@linaro.org>

test server add lws_status

Signed-off-by: Andy Green <andy.green@linaro.org>

LWS_BUILD_HASH improve

Signed-off-by: Andy Green <andy.green@linaro.org>

test html add tabs

Signed-off-by: Andy Green <andy.green@linaro.org>

libwebsockets.org url updates

Signed-off-by: Andy Green <andy.green@linaro.org>

lwsl stderr sink use formatted time

AG change to use localtime_r for threadsafety and leave old method as fallback

ssl get rid of build_cert_chain

It's not supported on major distro SSL (Fedora is 1.1) and
libressl (on 2.x) doesn't have it either.

https://github.com/warmcat/libwebsockets/issues/435

Signed-off-by: Andy Green <andy.green@linaro.org>

Stop uv loop in default signal handler, clean-ups

Make sure every handle is closed before destroying the uv loop

Don't destroy ev/uv loops if they haven't been created yet

changelog sync

Signed-off-by: Andy Green <andy.green@linaro.org>

attack.sh add check for nonexistant file processing

Signed-off-by: Andy Green <andy.green@linaro.org>

lws_return_http_status send content length

If we're sending content, we must do so with a
content-length on http/1.1

Signed-off-by: Andy Green <andy.green@linaro.org>

test server example systemd service file

Make sure you have daemonization enabled to use this

make .. -DLWS_WITHOUT_DAEMONIZE=0

Signed-off-by: Andy Green <andy.green@linaro.org>

daemonize work under systemd

Signed-off-by: Andy Green <andy.green@linaro.org>

ah pool lifetime use dynamic rxpos

Signed-off-by: Andy Green <andy.green@linaro.org>

test server allow set uid gid from cmdline

Signed-off-by: Andy Green <andy.green@linaro.org>

windows plat correct assert test in lws_poll_listen_fd

After https://github.com/warmcat/libwebsockets/issues/430

Signed-off-by: Andy Green <andy.green@linaro.org>

context creation info add ecdh_curve

Signed-off-by: Andy Green <andy.green@linaro.org>

test server SSL STS header delivery example

Signed-off-by: Andy Green <andy.green@linaro.org>

test server allow only best quality ciphers

Signed-off-by: Andy Green <andy.green@linaro.org>

ssl add server ecdh curve init

Using "real" SSL certs requires some init for openssl ECDH
curve.  Add a default curve "prime256v1" and allow overriding it
at context creation time.

Signed-off-by: Andy Green <andy.green@linaro.org>

test server allow external certs

Allow the test server to use external certs for testing

libwebsockets-test-server --ssl -C libwebsockets.org.crt -K libwebsockets.org.key -A libwebsockets.org.cer

Signed-off-by: Andy Green <andy.green@linaro.org>

ssl ecdh check errors properly

Signed-off-by: Andy Green <andy.green@linaro.org>

more documentation typos

Signed-off-by: Andy Green <andy.green@linaro.org>

Fix some typos.

debug reduce noise

Signed-off-by: Andy Green <andy.green@linaro.org>

v1.7.0

Signed-off-by: Andy Green <andy.green@linaro.org>

appveyor update openssl url

Signed-off-by: Andy Green <andy.green@linaro.org>

coverity 158147 test ping sprintf bounds

Well, just in the test app arg processing, but yes...

Signed-off-by: Andy Green <andy.green@linaro.org>

coverity 158146 test fraggle sprintf bounds

Well, just in the test app arg processing, but yes...

Signed-off-by: Andy Green <andy.green@linaro.org>

coverity 158145 lws_header_table_detatch must handle no ah attached

callers should protect it so this doesn't make a problem.  But
Coverity is correct the code is confused about it.

Make it okay if we close a connection before the ah got attached.

Signed-off-by: Andy Green <andy.green@linaro.org>

release checklist coverity

Signed-off-by: Andy Green <andy.green@linaro.org>

api doc update pre 1.7

Signed-off-by: Andy Green <andy.green@linaro.org>

timeout settable from info

This adds an info member that allows the user code to
set the library's network action timeout in seconds.

If left at the default 0, the build-time default
AWAITING_TIMEOUT continues to be used.

As suggested

https://github.com/warmcat/libwebsockets/issues/427

Signed-off-by: Andy Green <andy.green@linaro.org>

release checklist api updates

Signed-off-by: Andy Green <andy.green@linaro.org>

http_transaction_completed handle two completions in detach reset order

Signed-off-by: Andy Green <andy.green@linaro.org>

ah owns rxbuf

This is intended to solve a longstanding problem with the
relationship between http/1.1 keep-alive and the service
loop.

Ah now contain an rx buffer which is used during header
processing, and the ah may not be detached from the wsi
until the rx buffer is exhausted.

Having the rx buffer in the ah means we can delay using the
rx until a later service loop.

Ah which have pending rx force POLLIN service on the wsi
they are attached to automatically, so we can interleave
general service / connections with draining each ah rx
buffer.

The possible http/1.1 situations and their dispositions are:

 1) exactly one set of http headers come.  After processing,
    the ah is detached since no pending rx left.  If more
    headers come later, a fresh ah is aqcuired when available
    and the rx flow control blocks the read until then.

 2) more that one whole set of headers come and we remain in
    http mode (no upgrade).  The ah is left attached and
    returns to the service loop after the first set of headers.
    We will get forced service due to the ah having pending
    content (respecting flowcontrol) and process the pending
    rx in the ah.  If we use it all up, we will detach the
    ah.

 3) one set of http headers come with ws traffic appended.
    We service the headers, do the upgrade, and keep the ah
    until the remaining ws content is used.  When we
    exhausted the ws traffix in the ah rx buffer, we
    detach the ah.

Since there can be any amount of http/1.1 pipelining on a
connection, and each may be expensive to service, it's now
enforced there is a return to the service loop after each
header set is serviced on a connection.

When I added the forced service for ah with pending buffering,
I added support for it to the windows plat code.  However this
is untested.

Signed-off-by: Andy Green <andy.green@linaro.org>

autobahn wait for all fork completion

Signed-off-by: Andy Green <andy.green@linaro.org>

autobahn put back 2.10 2.11

The test ordering breaks if we try to skip them, just
leave them in.

Signed-off-by: Andy Green <andy.green@linaro.org>

attack.sh add http1.1 pipelining check

Signed-off-by: Andy Green <andy.green@linaro.org>

release checklist qa

Signed-off-by: Andy Green <andy.green@linaro.org>

libuv integration

This gets the libuv stuff plumbed in and working.

Currently it's only workable for some service thread, and there
is an isolated valgrind problem left

==28425== 128 bytes in 1 blocks are definitely lost in loss record 3 of 3
==28425==    at 0x4C28C50: malloc (in /usr/lib64/valgrind/vgpreload_memcheck-amd64-linux.so)
==28425==    by 0x4C2AB1E: realloc (in /usr/lib64/valgrind/vgpreload_memcheck-amd64-linux.so)
==28425==    by 0x58BBB27: maybe_resize (core.c:748)
==28425==    by 0x58BBB27: uv__io_start (core.c:787)
==28425==    by 0x58C1B80: uv__signal_loop_once_init (signal.c:225)
==28425==    by 0x58C1B80: uv_signal_init (signal.c:260)
==28425==    by 0x58BF7A6: uv_loop_init (loop.c:66)
==28425==    by 0x4157F5: lws_uv_initloop (libuv.c:89)
==28425==    by 0x405536: main (test-server-libuv.c:284)

libuv wants to sign off on all libuv 'handles' that will close, and
callback to do the close confirmation asynchronously.  The wsi close function
is adapted when libuv is in use to work with libuv accordingly and exit the uv
loop the number of remaining wsi is zero.

Signed-off-by: Andy Green <andy.green@linaro.org>

port test-server-libuv.c from libev to libuv

libuv initial replace libev version

release-checklist

Ask sysconf for Android's getdtablesize.

fixed LWS_PRE description

specfile add fuzxy

https://github.com/warmcat/libwebsockets/issues/419

Signed-off-by: Andy Green <andy.green@linaro.org>

lws_reset_header_table dont reset NULL

This is only a temporary, fragile solution.

https://github.com/warmcat/libwebsockets/issues/416

Signed-off-by: Andy Green <andy.green@linaro.org>

license clarification and test apps CC zero

Signed-off-by: Andy Green <andy.green@linaro.org>

lws_parse_uri fix test client use and add more docs

https://github.com/warmcat/libwebsockets/issues/414

Signed-off-by: Andy Green <andy.green@linaro.org>

ah pool take care about freeing headers after parsing

Signed-off-by: Andy Green <andy.green@linaro.org>

debug spew remove ah reset logging

Signed-off-by: Andy Green <andy.green@linaro.org>

LWS_WARN_DEPRECATED and fixup older test apps

Enforce no more internal use of deprecated apis (esp in the test apps)

Also signal clearly to users what is on the way out.

Signed-off-by: Andy Green <andy.green@linaro.org>

autobahn add test script

Signed-off-by: Andy Green <andy.green@linaro.org>

attack.sh exit 0 on success

Signed-off-by: Andy Green <andy.green@linaro.org>

ah http1.1 deal with pipelined headers properly

Connections must hold an ah for the whole time they are
processing one header set, even if eg, the headers are
fragmented and it involves network roundtrip times.

However on http1.1 / keepalive, it must drop the ah when
there are no more header sets to deal with, and reacquire
the ah later when more data appears.  It's because the
time between header sets / http1.1 requests is unbounded
and the ah would be tied up forever.

But in the case that we got pipelined http1.1 requests,
even partial already buffered, we must keep the ah,
resetting it instead of dropping it.  Because we store
the rx data conveniently in a per-tsi buffer since it only
does one thing at a time per thread, we cannot go back to
the event loop to await a new ah inside one service action.

But no problem since we definitely already have an ah,
let's just reuse it at http completion time if more rx is
already buffered.

NB: attack.sh makes request with echo | nc, this
accidentally sends a trailing '\n' from the echo showing
this problem.  With this patch attack.sh can complete well.

Signed-off-by: Andy Green <andy.green@linaro.org>

clean pre 1.7

Signed-off-by: Andy Green <andy.green@linaro.org>

coverity 157401 dont test SHUTDOWN state in mode switch

Signed-off-by: Andy Green <andy.green@linaro.org>

coverity 157402 explicitly disallow handling invalid sockfd

Signed-off-by: Andy Green <andy.green@linaro.org>

coverity 157403 fuzxy handle currently impossible error

Signed-off-by: Andy Green <andy.green@linaro.org>

coverity 157404 get rid of needless NULL check

Signed-off-by: Andy Green <andy.green@linaro.org>

cleanup test app startup messages

Signed-off-by: Andy Green <andy.green@linaro.org>

restrict SO_REUSEPORT to multithreading only so no unexpected change otherwise

SO_REUSEPORT means you don't get any error any more if another
server instance is already running, this will be quite unexpected
for singlethreaded users.

Signed-off-by: Andy Green <andy.green@linaro.org>

http1.1 keepalive drop ah betweentimes

https://github.com/warmcat/libwebsockets/issues/404

Tested with

wget -O- http://localhost:7681/test.html http://localhost:7681/test.html http://localhost:7681/test.html http://localhost:7681/test.html http://localhost:7681/test.html

and confirm no connection processing during that on server side

Signed-off-by: Andy Green <andy.green@linaro.org>

win dont redefine _WINSOCK_DEPRECATED_NO_WARNINGS

Signed-off-by: Andy Green <andy.green@linaro.org>

lextable add x-real-ip

Signed-off-by: Andy Green <andy.green@linaro.org>

reduce debug logging mark socket dead when pollert

Signed-off-by: Andy Green <andy.green@linaro.org>

lws_adopt_socket

Signed-off-by: Andy Green <andy.green@linaro.org>

multithread stability

Signed-off-by: Andy Green <andy.green@linaro.org>

mbed simplify

Signed-off-by: Andy Green <andy.green@linaro.org>

pthreads only as needed

This just lets you build lws 1.6 without pthreads if your OS / toolchain
makes that possible, in the case you don't build the test apps
(libwebsockets-test-server-pthreads needs it)

Signed-off-by: Andy Green <andy.green@linaro.org>