Merge remote-tracking branch 'origin/feature/deb-src-bts731102' into feature/source-deb822

suppoer $(ARCH) in deb822 sources.list as well

add APT::Sources::Use-Deb822 to allow disabling the deb822 parser

more refactor

refactor deb822 reading into its own function

fix section adding

add unittest for new sourceslist parser as well

first version with test

* document Dpkg::Progress-Fancy (closes: 726169), thanks to James McCoy

* enable release based selection for deb-src (closes: 731102)

remove exposing {MetaIndexInfo,MetaIndexFile,MetaIndexURI} again as this is package system specific

add new LocalFileName() method to metaindex

refactor

add #ifdefed ABI break & cleaner solution once the abi break is in place

use MetaIndexFile() instead of MetaIndexURI()

refactor FindSrc()

add test for aptget source for unavailable package

further refactor, extract GetReleaseForSourceRecord() out of FindSrc(), write out the selection notice to c1out to be consistent with the rest of the source

refactor and move generation of the MetaIndex FileName out of the FindSrc()

add test, deal with InRelease

proof-of-concept for fixing debian #731102

prepare-release: declare the packages needed as source build deps.

drop old /var/state to /var/lib transition artefacts

Regardless of when this transition was, it is so long ago that everyone
who would still need this has a million other problems to deal with now
so lets just drop this code.

generate apt-key script with vendor info about keys

The apt-key script uses quiet a few keyring files for operation which
are specific to the distribution it is build on and is hence one of the
most patched parts – even if it is not that often used anymore now that
a fragment directory for trusted.gpg exists.

cherry-pick ubuntus (disabled) net-update fixes

With the net-update command a special keyring can be downloaded and
imported into apt, which must be signed by a master key. Its is
currently disabled because of security problems with it – and the only
known user before that was Ubuntu.

use a substvar to set the archive-keyring in debian/control

Adds a small helper to extract the small information bits we store in
apt-vendor.ent and uses it in debian/rules to set apt:keyring as a
substvar for debian/control populated with the &keyring-package; info

add a vendor specific file to have configurable entities

manpages sometimes refer to distro-specific things like the name of the
package providing the achive-keyring. Having a central place to
configure this helps in having it consistent in the manpages and allows
to load this info from other places in the buildsystem as well later.

introduce a vendor system to change sources.list

Many derivatives make quiet a few simple changes to apt introducing
silly diffs just to change examples and co making it harder for
them to update apt and harder for us to merge real changes back.

First stop: doc/examples/sources.list

enable NOISE for build logs to enable analyse

It was enabled for a (long) while in Ubuntu, but it shouldn't hurt to
enable it in Debian as well – especially now that Debian has automatic
analyses of the buildlogs which don't work that well without the 'noise'

merge ubuntus apport reporting changes to reduce diff

apport reporting is still disabled by default, but it is available in
Debian/experimental at the moment and a diff is not a good idea anyway.

tests: add a webserverconfig method to abstract config

The URI to use to set a config option is a bit arcane to write/remember
and checking if the setting was successful doubly so.

Git-Dch: Ignore

tests: rm pkgcache.bin in 719263 test

As testcases are running really fast it can happen that files which are
changed in reality are considered unchanged as the modify time isn't
changed. What we could do is disable those caches by default, but some
tests actually depend on those and deriving too much from the default by
default (pun intended) is not a good idea for tests after all.

Git-Dch: Ignore

webserver: use pthreads to handle multiple clients

Clients like browsers prefer to open many connections and keep them open
for a while, so that pages with lot of subelements would take a while to
load (if at all), by using threads as all servers do some way or another
we can resolve this. libapt is not intended to be pthread-safe and stuff
like the storage of the last return code doesn't make too much sense if
multiple clients interact with us, but it is good enough for now and an
other interesting (mis)use of libapt in general.

Git-Dch: Ignore

webserver: strip parameters from filename

Again, not (currently) used by the tests itself, but in interactive
usage of the webserver itself.

Git-Dch: Ignore

webserver: add directoryIndex support defaulting to index.html

Git-Dch: Ignore

webserver: implement ~user access to ~user/public_html/

pretty much useless for the testcases, but handy to test the webserver
itself in 'real world' environments

Git-Dch: Ignore

tests: enhance https support in the testcases

Git-Dch: Ignore

webserver: spurious newline after data confuses curl

Webserver wrongly sends an additional newline after the data which
causes curl to believe that the next request on this socket has no
header data and so includes all headers in the data output.

Git-Dch: Ignore

truncating /dev/null to zero is always successful

Calling truncate on /dev/null can happen by the download methods if they
are instructed to download a file to /dev/null (as testcases are only
interested in the status code, but do not support HEAD requests yet)

So just ignore truncate calls on the /dev/null file as it is always
empty anyway, so truncating to zero isn't a problem.

Git-Dch: Ignore

releasing package apt version 0.9.13.1

fix apport report writing (LP: #1254499)

reset terminal on error (closes: #730795)

update changelog

fix crash when SetCandidateRelease is used

update changelog

Merge remote-tracking branch 'mvo/debian/sid' into debian/sid

Conflicts:
apt-private/private-cmndline.cc

Merge branch 'feature/edit-sources' into debian/sid

add "APT::String::Endswith" and automatic adding of ".list" in apt edit-source

add support for "apt edit-source foo" sources.list.d component editing

add autopkgtest

add missing test/integration/test-bug-720597-build-dep-purge

update changelog

Merge remote-tracking branch 'mvo/feature/short-list' into debian/sid

add "-f" option to "build-dep" as sbuild is using it to fix  regression with cross-building (LP: #1255806)

fix regression that APT::Keep-Fds is not honored (closes: #730490)

fix "apt-get  --purge build-dep" (closes: #720597)

move EditSources into its own file

add check when sources.list changed

add syntax check for sources.list

rename APT::Cmd::AllVersions -> APT::Cmd::All-Versions, APT::Cmd::UseRegexp -> APT::Cmd::Use-Regexp

add APT::Cmd::List-Include-Summary

do not show summary in "apt list"

add basic "edit-sources" command

upload 0.9.13 to unstable

Changed MinAgeSec to MinAge in /etc/cron.daily/apt:200,204  LP: #1206047

small documentation updates

releasing package apt version 0.9.13~exp1

prepare new upload

setup LINES in apt-pkg/install-progress.cc

use StartDpkg()  in PackageManagerProgressDeb822Fd as well

add new pid_t ExecFork(std::set<int> KeepFDs) to get rid of the super ugly APT::Keep-Fds hack and also add a new PackageManagerProgressFd::StartDpkg() progress state

move pty magic into its own functions

fix some more ABI issues, abicheck is happy now

restore ABI and prepare next ABI via #if (APT_PKG_MAJOR >= 4 && APT_PKG_MINOR >= 13)

move pty stuff into its own function

Merge remote-tracking branch 'upstream/debian/sid' into feature/install-progress-refactor

extract getDpkgExecutable() and DPkgPM::BuildPackagesProgressMap() out of the monster long pkgDPkgPM::Go()

improve documentation for Acquire::http::Proxy-Auto-Detect (thanks to Francesco Poli)

make the main loop a while() instead of a for() as I find this (much) easier to read this way)

Merge remote-tracking branch 'upstream/debian/sid' into feature/install-progress-refactor

Conflicts:
apt-pkg/deb/dpkgpm.cc
apt-pkg/makefile

fix failing ./test/integration/test-disappearing-packages (thanks Donkult) - ported from the mvo/feature/install-progress-refactor branch

fix failing ./test/integration/test-disappearing-packages (thanks Donkult!)

test/integration/run-tests: output the failed test names

Merge remote-tracking branch 'mvo/feature/upgrade-api' into debian/sid

use Pkg.FullName() in disappearedPkgs and remove duplicated check

fix install-progress location

move install-progress.{cc,h} to apt-pkg

add Acquire::http::Proxy-Auto-Detect to the apt.conf.5 manpage (closes: 726597)

add APT::Status-deb822-Fd

restore binary compatiblity with the pkgPackageManager interface

fix apt output ordering and update test to match the new human friendly messages that include the architecture

move iprogress.{cc,h} to private-progress.{cc,h} until its fully stable

re-add missing APT::String::Strip

merged debian/sid

use std::string instead of char* in pkgDPkgPM::ProcessDpkgStatusLine()

reshuffle the pkgDPkgPM::ProcessDpkgStatusLine() some more to make it more robust

reshuffle dpkgpm.cc code a bit more

add $* to gdb to make it more useful

add APT::String::Strip(), start cleanup of ProcessDpkgStatusLine

cleanup