cherry-pick ubuntus (disabled) net-update fixes

With the net-update command a special keyring can be downloaded and
imported into apt, which must be signed by a master key. Its is
currently disabled because of security problems with it – and the only
known user before that was Ubuntu.

use a substvar to set the archive-keyring in debian/control

Adds a small helper to extract the small information bits we store in
apt-vendor.ent and uses it in debian/rules to set apt:keyring as a
substvar for debian/control populated with the &keyring-package; info

add a vendor specific file to have configurable entities

manpages sometimes refer to distro-specific things like the name of the
package providing the achive-keyring. Having a central place to
configure this helps in having it consistent in the manpages and allows
to load this info from other places in the buildsystem as well later.

introduce a vendor system to change sources.list

Many derivatives make quiet a few simple changes to apt introducing
silly diffs just to change examples and co making it harder for
them to update apt and harder for us to merge real changes back.

First stop: doc/examples/sources.list

enable NOISE for build logs to enable analyse

It was enabled for a (long) while in Ubuntu, but it shouldn't hurt to
enable it in Debian as well – especially now that Debian has automatic
analyses of the buildlogs which don't work that well without the 'noise'

merge ubuntus apport reporting changes to reduce diff

apport reporting is still disabled by default, but it is available in
Debian/experimental at the moment and a diff is not a good idea anyway.

tests: add a webserverconfig method to abstract config

The URI to use to set a config option is a bit arcane to write/remember
and checking if the setting was successful doubly so.

Git-Dch: Ignore

tests: rm pkgcache.bin in 719263 test

As testcases are running really fast it can happen that files which are
changed in reality are considered unchanged as the modify time isn't
changed. What we could do is disable those caches by default, but some
tests actually depend on those and deriving too much from the default by
default (pun intended) is not a good idea for tests after all.

Git-Dch: Ignore

webserver: use pthreads to handle multiple clients

Clients like browsers prefer to open many connections and keep them open
for a while, so that pages with lot of subelements would take a while to
load (if at all), by using threads as all servers do some way or another
we can resolve this. libapt is not intended to be pthread-safe and stuff
like the storage of the last return code doesn't make too much sense if
multiple clients interact with us, but it is good enough for now and an
other interesting (mis)use of libapt in general.

Git-Dch: Ignore

webserver: strip parameters from filename

Again, not (currently) used by the tests itself, but in interactive
usage of the webserver itself.

Git-Dch: Ignore

webserver: add directoryIndex support defaulting to index.html

Git-Dch: Ignore

webserver: implement ~user access to ~user/public_html/

pretty much useless for the testcases, but handy to test the webserver
itself in 'real world' environments

Git-Dch: Ignore

tests: enhance https support in the testcases

Git-Dch: Ignore

webserver: spurious newline after data confuses curl

Webserver wrongly sends an additional newline after the data which
causes curl to believe that the next request on this socket has no
header data and so includes all headers in the data output.

Git-Dch: Ignore

truncating /dev/null to zero is always successful

Calling truncate on /dev/null can happen by the download methods if they
are instructed to download a file to /dev/null (as testcases are only
interested in the status code, but do not support HEAD requests yet)

So just ignore truncate calls on the /dev/null file as it is always
empty anyway, so truncating to zero isn't a problem.

Git-Dch: Ignore

releasing package apt version 0.9.13.1

fix apport report writing (LP: #1254499)

reset terminal on error (closes: #730795)

update changelog

fix crash when SetCandidateRelease is used

update changelog

Merge remote-tracking branch 'mvo/debian/sid' into debian/sid

Conflicts:
apt-private/private-cmndline.cc

Merge branch 'feature/edit-sources' into debian/sid

add "APT::String::Endswith" and automatic adding of ".list" in apt edit-source

add support for "apt edit-source foo" sources.list.d component editing

add autopkgtest

add missing test/integration/test-bug-720597-build-dep-purge

update changelog

Merge remote-tracking branch 'mvo/feature/short-list' into debian/sid

add "-f" option to "build-dep" as sbuild is using it to fix  regression with cross-building (LP: #1255806)

fix regression that APT::Keep-Fds is not honored (closes: #730490)

fix "apt-get  --purge build-dep" (closes: #720597)

move EditSources into its own file

add check when sources.list changed

add syntax check for sources.list

rename APT::Cmd::AllVersions -> APT::Cmd::All-Versions, APT::Cmd::UseRegexp -> APT::Cmd::Use-Regexp

add APT::Cmd::List-Include-Summary

do not show summary in "apt list"

add basic "edit-sources" command

upload 0.9.13 to unstable

Changed MinAgeSec to MinAge in /etc/cron.daily/apt:200,204  LP: #1206047

small documentation updates

releasing package apt version 0.9.13~exp1

prepare new upload

setup LINES in apt-pkg/install-progress.cc

use StartDpkg()  in PackageManagerProgressDeb822Fd as well

add new pid_t ExecFork(std::set<int> KeepFDs) to get rid of the super ugly APT::Keep-Fds hack and also add a new PackageManagerProgressFd::StartDpkg() progress state

move pty magic into its own functions

fix some more ABI issues, abicheck is happy now

restore ABI and prepare next ABI via #if (APT_PKG_MAJOR >= 4 && APT_PKG_MINOR >= 13)

move pty stuff into its own function

Merge remote-tracking branch 'upstream/debian/sid' into feature/install-progress-refactor

extract getDpkgExecutable() and DPkgPM::BuildPackagesProgressMap() out of the monster long pkgDPkgPM::Go()

improve documentation for Acquire::http::Proxy-Auto-Detect (thanks to Francesco Poli)

make the main loop a while() instead of a for() as I find this (much) easier to read this way)

Merge remote-tracking branch 'upstream/debian/sid' into feature/install-progress-refactor

Conflicts:
apt-pkg/deb/dpkgpm.cc
apt-pkg/makefile

fix failing ./test/integration/test-disappearing-packages (thanks Donkult) - ported from the mvo/feature/install-progress-refactor branch

fix failing ./test/integration/test-disappearing-packages (thanks Donkult!)

test/integration/run-tests: output the failed test names

Merge remote-tracking branch 'mvo/feature/upgrade-api' into debian/sid

use Pkg.FullName() in disappearedPkgs and remove duplicated check

fix install-progress location

move install-progress.{cc,h} to apt-pkg

add Acquire::http::Proxy-Auto-Detect to the apt.conf.5 manpage (closes: 726597)

add APT::Status-deb822-Fd

restore binary compatiblity with the pkgPackageManager interface

fix apt output ordering and update test to match the new human friendly messages that include the architecture

move iprogress.{cc,h} to private-progress.{cc,h} until its fully stable

re-add missing APT::String::Strip

merged debian/sid

use std::string instead of char* in pkgDPkgPM::ProcessDpkgStatusLine()

reshuffle the pkgDPkgPM::ProcessDpkgStatusLine() some more to make it more robust

reshuffle dpkgpm.cc code a bit more

add $* to gdb to make it more useful

add APT::String::Strip(), start cleanup of ProcessDpkgStatusLine

cleanup

ensure that short-name -> long-name detection for dpkg-status works for reinstalls too

Merge branch 'debian/sid' into feature/install-progress-refactor

Conflicts:
apt-pkg/deb/dpkgpm.cc

fix broken clean when apt was finished and ensure that terminal progress is updated when a new dpkg-loop is entered in dpkgpm.cc

fix changelog

releasing package apt version 0.9.12.1

remove POSTINST from framework, file tree can be used for this

tests, do not send pkgname with arch via the status-fd

Merge remote-tracking branch 'upstream/debian/sid' into bugfix/bts-726156-2

fix logic for finding what package dpkg means in the --status-fd and only send out short packagenames

fix progress-segfault in case of dpkg errors/prompts

Errors and conffile prompts have a fourth information piece,
which the "old" code access which isn't provided by the "new" one.

This isn't checking if the messages are really well-formed,
so it could still segfault on misformed messages, but this code
needs more work anyway, so one step at a time.

Closes: 726047

re-add APT::Keep-Fds:: for the dpkg status-fd in dpkgpm.cc as we always need this

rename APT::Progress::Packagemanager Started->Start, Finished->Stop to match pkgAcquireStatus

refactor writing to WriteToStatusFd()

add APT::Progress::PackageManager::Pulse()

move the status-fd progress reporting out of the pkgDPkgPM class, at this point, breaks ABI/API, lets see what we can do about this

move common code into PackageManager::StatusChanged()

deal with nr_terminal_rows unavailable

Merge branch 'debian/sid' of ssh://git.debian.org/git/apt/apt into debian/sid

add missing _() around the new "Progress" string

first iteration of install progress refactor

Merge branch 'debian/sid' of ssh://git.debian.org/git/apt/apt into debian/sid

fix typo

fix typo

releasing package apt version 0.9.12