wifi: Add support for hidden network scan

Implement connman_device_driver scan_hidden function. Supply scan
parameters for the hidden network when calling g_supplicant scan
functionality. When a new scan result is added, compare the SSID
with the one looked for. If detected, connect the hidden network.
When detected or when the scan is done, clear the hidden network
parameters.

network: Add functionality to connect a hidden network

When given a struct connman_network, look up a corresponding
service. Set the earlier supplied identity and passphrase for
this service and try to connect it.

service: Do hidden network scan for the given SSID

When a service is set as hidden, do a network scan for the
SSID/name supplied via the Agent API. End the connection
attempt on the original hidden service.

service: Factor out passphrase setting functionality

Factor out passphrase setting functionality, as it will be needed
by other parts of the hidden network code.

device: Add function for requesting a hidden scan

Add function for requesting a hidden (WLAN) network scan. Call
the hidden scan function is implemented by the device in question.

device: Introduce hidden SSID scan function

wispr: Add SSID and length variables to callback

SSID and lenght variables are not used in wispr callback.

agent: Add network name and name length to authentication_cb_t

agent: Handle 'Name' and/or 'SSID' fields on method call return

agent: If a service is hidden, request either 'Name' or 'SSID'

Implement functions to append 'Name' and 'SSID' fields to Agent API
RequestInput D-Bus method call. Add these fields if the service is
hidden.

service: Helper function to check if a service is hidden

wispr: Add authentication_cb_t boolean to callback

service: Use boolean variable to determine valid values

Use the provided boolean variable to determine when valid
values are passed to the authentication_cb_t function.

agent: Be explicit when RequestInput method return provides values

Add a boolean variable to authentication_cb_t callback to explicitely
state when values are returned from RequestInput.

service: Return -EPERM for hidden services and prompt for input

service: No modifications allowed for hidden services

If a service is hidden, no modification are allowed to it.
The hidden service acts as a placeholder to instantiate
a proper connection once it is assigned an SSID.

service: List also hidden services

Show hidden WiFi networks in service list.

service: Disconnect network when service is freed

Call __connman_network_disconnect() when a service is freed.
This prevents wpa_supplicant from trying to connect forever when
ConnMan is shut down.

wifi: Disable network in disconnected state

Disable WiFi network when it ends up in disconnected state
in order to prevent wpa_supplicant looping forever retrying.

Fixes BMC#23973

TODO: Update

Removed stale entries, added wireless background scanning, the command
line tool and the GNOME UI.

manager: Remove support for GetState method and StateChanged signal

build: Remove unused list-profiles test script

manager: Remove support for ProvisionService method

manager: Remove support for ConnectService method

manager: Remove support for LookupService method

doc: Fix race conditions in service handling

doc: Fix race conditions in technology handling

doc: Make session methods as experimental for now

doc: Remove methods to lookup and connect services

doc: Remove method for handling provisioning

doc: Remove extra method and property for global state

doc: Remove leftover property from profile support

doc: Mark session mode property as experimental

doc: Remove deprecated properties and values

doc: Make counter related method as experimental

doc: Update properties and methods for technology interface

doc: Mark clock API as experimental for now

doc: Add method description for browser agent callback

Release 0.78

technology: Check if pending message is NULL before sending it back

The message would be NULL when setting offline mode on and off.

Fixes BMC#24314

service: Make state downgrading routine static

service.c should be the only one messing with service's states.

service: Recompute service state when moving it up

It should be possible to move down an online service to ready and the one
which goes up might come up online after recomputing its state.

service: Only one service should be online at a time

All services which can go online don't get their state to online if a service
is already online. However, when disconnecting a service, we might recompute
which one gets online in replacement.

service: Ensure the service list is well sorted after each update

Fixes BMC#23715

wifi: Set device powered from the interface create callback

As interface_added can potentially show up before the interface creation
callback, the device powered flag can be set from the latter.

ofono: Do not call set_connected() from the activation reply

As the IP setting may not be set when getting the activation D-Bus reply,
set_connected should not be called at that point but rather from
the context_changed routine.

Fixes BMC#24284

tethering: Avoid removing dhcp server twice.

The tethering_dhcp_server pointer needs to be cleared as
otherwise the __connman_tethering_cleanup() will call it again.

wifi: The remove interface callback used stale pointer.

When a wlan interface is removed we call proper method in
supplicant dbus interface. As the return message from supplicant
might come very late, we must not use the wifi pointer as
user data in interface remove callback. This is because the wifi
pointer might be removed before the answer comes from supplicant and
the callback user data pointer would not be valid at that point.

wifi: Add debugging in order to find memory problems.

ipconfig: Remove ipconfig from ipconfig_list

It is possible that ipdevice does not contain ipconfig for
some reason. If that happens, then ipconfig is not removed
from ipconfig_list which will then escalate into freed memory
access when interface is taken down.
The problem was seen with valgrind when tethering was enabled
and then disabled for wifi.

6to4: Use the right interface index with gweb

wispr: Use the right interface index with gweb

gweb: Bind socket to the right interface

gresolv: Bind socket to the right interface

technology: Save the pending reply only when the status is inprogress

For ethernet device, there is no need to save a pending reply as
the technology enablement is synchronous.

Fixes BMC#24249

service: Support automatically added nameservers

IPv6 autoconfigured nameservers can be added to resolver
via netlink messages in rtnl.c. Because of this they are
not seen in service object so we need to get those auto
added nameserver to be added in service.c so that
service can show them to user if necessary.

Fixes BMC#24196

storage: Add default values to settings file.

On a clean start (without default.profile) create the settings file
with default values. Here is a list of default values:

Offlinemode = off.
Wifi = disabled.
bluetooth = disabled.
ethernet = disabled.
3G = disabled.
WiMAX = disabled.

The reason for offlinemode to be off here is that any changes to
the technology will not be recorded if we start in offlinemode.

Fixes BMC#24285

dnsproxy: Do not copy two extra bytes if using TCP

dnsproxy: Get rid of extra strlen() calls

dnsproxy: One extra garbage byte was sent at the end of the message

Fixes BMC#24253

service: Fix memory leak in service_load()

service: Set network_created flag only if create_hidden_wifi succeeds

ofono: Don't set network index when device is removed

A NULL interface means the device is removed so there is no need for
setting the network index as it will eventually be removed.
Setting the network index to -1 prevents wpad or wispr to unreference
the service.

Fixes BMC#23979

service: network_created is set only for hidden services

Fixes BMC#23976

plugins: Don't attempt to save strings with value NULL

If a string with value NULL is set with g_key_file_set_string(),
a critical glib error will be printed.

network: connman_network_set_nameservers() handle NULL argument correctly

Trying to access an array pointer which points to NULL is generally a
bad idea. Instead just return early.

notifier: Remove service from hash in error case

CONNMAN_SERVICE_STATE_FAILURE should be treated in the same
way as CONNMAN_SERVICE_STATE_DISCONNECT or CONNMAN_SERVICE_STATE_IDLE
in  __connman_notifier_service_state_changed().

This should help to reduce the "Service state machine inconsistency detected."
error message.

network: Call indicate error function in error case

Setting the error only on one ipconfig type e.g. IPv4 is not enough.
service.c:combine_state() will report to stay in associating state:

src/service.c:service_indicate_state() service 0x6b1a60 old association - new failure/association => association

After applying the patch it loosk like this:

src/service.c:service_indicate_state() service 0x6b1f70 old association - new failure/association => association
src/service.c:service_indicate_state() service 0x6b1f70 old association - new failure/failure => failure

l2tp: Config save support added

pptp: Config save support added

todo: Mark l2tp and pptp as done

task: Make sure the process is eventually killed

If a task refuses to kill itself, then wait two secs before
trying again and if that does not help then forcefully kill it.

readme: Add l2tp and pptp information

pptp: Do not put password in command line options

pptp: Return authentication errors properly

l2tp: Check authentication error properly

scripts: Report authentication error to connman

The ppp plugin now checks ppp authentication error and report it
to correct connman plugin.

scripts: Compile libppp-plugin.so properly

pptp: Add pptp makefile and configure file

l2tp: Add l2tp makefile and configure file

test: Add test script support for pptp/l2tp

Modify connect-vpn script to handle pptp/l2tp connection.

l2tp: Add l2tp vpn support

Initial revision.

pptp: Add ppp plugin library

pppd will use this library to talk with connman vpn plugin.

Original patch comes from Mohamed Abbas. Prepared for inclusion
by Jukka Rissanen, also changed the pptp function prefix to ppp as
the plugin is used by both pptp and l2tp plugins.

pptp: Add pptp vpn support

Initial revision.

task: Allow vpn plugins to send reply

Change task notify to allow client to send dbus reply. This
will allow vpn plugin to send requested user/password info.

vpn: Add null checks

vpn: Add support to allow ppp tunnelling

pptp and l2tp does not use tun/tab approach so change the vpn.c to
allow vpn daemon to create the interface. Now vpn plugin tell
vpn to create the device or leave to vpn client.
On connection vpn will get the interface name set the index
for the provider.

This patch is prepared by Jukka Rissanen and it contains
Mohamed Abbas original patch + fixes suggested by Daniel Wagner.
Jukka fixed memory leak in vpn_set_ifname().

tethering: Use already existing 'tether' bridge interface

When creating bridge interface 'tether', don't report error if
it already exists. Check also -EALREADY given by connman_inet_ifup()
via enable_bridge() if the bridge interface was already up.

Fixes BMC#23931

iptables: Initiate defined table before working on it

tools: Initiate defined table before working on it in iptables-test

build: Create src/builtin.h via BUILT_SOURCES

network: Fix failed to reconnect to 3G network when connect failed

When connect failed, set the associating value to false again, else
when we connect again the return err will be EALREADY.

bluetooth: Cleanup if technology driver register fails

rfkill.h: Remove unused header file

gdhcp: Use gcc atomics instead glib's ones

g_atomic_int_exchange_and_add() has been removed from glib 2.30
and g_atomic_int_add() should be used. Though there are still
quite a few distros out which do not ship a glib version with
g_atomic_int_add().

Instead of maintaing a compatiblilty glib layer we just use
the built-in functions for atomic memory access.

gweb: Use gcc atomics instead glib's ones

g_atomic_int_exchange_and_add() has been removed from glib 2.30
and g_atomic_int_add() should be used. Though there are still
quite a few distros out which do not ship a glib version with
g_atomic_int_add().

Instead of maintaing a compatiblilty glib layer we just use
the built-in functions for atomic memory access.

plugins: Use gcc atomics instead glib's ones

g_atomic_int_exchange_and_add() has been removed from glib 2.30
and g_atomic_int_add() should be used. Though there are still
quite a few distros out which do not ship a glib version with
g_atomic_int_add().

Instead of maintaing a compatiblilty glib layer we just use
the built-in functions for atomic memory access.

core: Use gcc atomics instead glib's ones

g_atomic_int_exchange_and_add() has been removed from glib 2.30
and g_atomic_int_add() should be used. Though there are still
quite a few distros out which do not ship a glib version with
g_atomic_int_add().

Instead of maintaing a compatiblilty glib layer we just use
the built-in functions for atomic memory access.

doc: Remove outdate SetupRequired property

The APN provisioning is fully handled by oFono.

test: Connecting a saved provider does not need all arguments