apt-pkg/acquire-item.cc: Fix handling of local (file:/) sources

test-indexes.sh: Test handling of local file:// archives

Switch FileFd to not transparently gunzip, since that breaks code which expects the compressed contents to stay (such as the copy backend, or when using file:// repositories. Instead, introduce a new ReadOnlyGzip mode and use that where needed

methods/ftp.h: Handle different logins are on the same server (Closes: #586904).

Use an abstract helper for error handling and output
instead of doing this directly in the CacheSets.
With this method an application like apt-get can change
the behavior of the CacheSets to his liking.
It can for example easily keep track of how packages
were added to the set: by names or with regex's…

debian/changelog: it is an ABI break after all

* cmdline/apt-get.cc:
  - use the cachsets in the install commands

get packages by task^ with FromTask()

fix the gcc warning about the initialisation order of variables caused
by moving Policy to public again (and therefore after SrcList)

test-indexes.sh: quiesce apt-get source; we know that we cannot verify package signatures

test-indexes.sh: Also test compressed index mode with apt.conf.d file

test-indexes.sh: Just for paranoia, test that apt-cache is still working after apt-get update with previously existing indexes

pkgAcqIndex::Done(): If we have an IMS-Hit, also rename the destination file in GzipIndexes mode, to avoid it being cleaned

test-indexes.sh: fix check_indexes call in compressed mode

test-indexes.sh: Actually test for non/pre-existing indexes in compressed mode

test-indexes: Use /etc/apt from temporary work dir, not from system

test-indexes.sh: Refactor common code into functions

test-indexes.sh: More verbose failures on wrong/missing indexes

* apt-pkg/depcache.cc:
  - SetCandidateVer for all pseudo packages
  - SetReInstall for the "all" package of a pseudo package

add a simple method to VerIterator to check if two Versions are similar

* cmdline/cacheset.cc:
  - doesn't include it in the library for now as it is too volatile

Add a GroupedFromCommandLine for the VersionSet similar to the
one for PackageSet and refactor the existing VersionSet methods
to simplify that.

test/test-indexes.sh: Stop hardcoding archive gpg key ID, get it from first failed apt-get update output

apt-pkg/deb/debindexfile.cc: Fix one more place to check for gzipped indexes, to work with apt-get source as well

* apt-pkg/acquire-item.cc:
  - Fix return value of pkgAcqFile::Custom600Headers() in the non-index
    case, to avoid returning NULL and causing crashers in callers. This also
    fixes a compiler warning.

test-indexes.sh: Add source related tests, which uncovers two regressions

changelog: clarify abi break, it's not external

* configure.in:
  - Check for zlib library and headers.

* doc/po/apt-doc.pot, doc/po/de.po:
  - German translation of new Acquire::GzipIndexes option.

* doc/apt.conf.5.xml:
  - Document the new Acquire::GzipIndexes option.

Fix compressed index retrieval for current timestamps

Fix a thinko in r1973, which did the Acquire::GzipIndexes test ealier than the
IMS-Hit test. This led to rename errors.

* debian/rules:
  - Make DEB_BUILD_OPTIONS=noopt actually work by passing the right
    CXXFLAGS.

* debian/control:
  - remove intltool's dependency as it is an ubuntu artefact

merge with debian-experimental-ma to get the public policy back

* apt-pkg/cachefile.h:
  - make pkgPolicy public again, libapt-pkg-perl (and probably
    others) get unhappy without that

* Add test/test-indexes.sh:
  - Test behaviour of index retrieval and usage, in particular with
    uncompressed and gzip compressed indexes.

* apt-pkg/orderlist.cc:
  - untouched packages are never missing
* apt-pkg/packagemanager.cc:
  - packages that are not touched doesn't need to be unpacked

releasing version 0.7.26~exp6

mention abi break in changelog

merged from david

* apt-pkg/acquire-item.cc:
  - If the Acquire::GzipIndexes option is true and we download a gzipped
    index file, keep it as it is (and rename to .gz) instead of
    uncompressing it.

* apt-pkg/cacheset.cc:
  - get the candidate either from an already built depcache
    or use the policy which is a bit faster than depcache generation

correct a minor spelling mistake in the changelog

readd the autoremove protection for the kfreebsd-image as it was lost
in Michaels merge with the ubuntu branch

enhance the split out of the gpgv commandline mangling by splitting out
the call completely

sent Last-Modified header also for Translation files

be sure that the RFC1123StrToTime method is run in a LANG=C environment

* apt-pkg/indexcopy.cc:
  - move the gpg codecopy to a new method and use it also in methods/gpgv.cc

fix compiler warning in the new mirror code

* apt-pkg/policy.cc:
  - get the candidate right for a not-installed pseudo package if
    his non-pseudo friend is installed

remove the "typename" from the const_iterators as gcc-4.4 doesn't like
them and gcc-4.5 does the right thing (TM) with and without them

* apt-pkg/deb/debindexfile.cc:
  - If we do not find uncompressed package/source/translation indexes, look
    for gzip compressed ones.

* apt-pkg/contrib/fileutl.{h,cc}:
  - Add support for transparent reading of gzipped files.
  - Link against zlib (in apt-pkg/makefile) and add zlib build dependency.

merged from lp:~donkult/apt/sid

debian/rules: remove two more leftovers fromthe ubuntu merge

merge  lp:~mvo/apt/ubuntu-mirror-method-improvements

* merge the remaining Ubuntu change:
  - on gpg verification failure warn and restore the last known
    good state
  - on failure display the IP of the server (useful for servers
    that use round robin DNS)
  - support Original-Maintainer in RewritePackageOrder
  - enable cdrom autodetection via libudev by default
  - show messsage about Vcs in use when apt-get source is run for
    packages maintained in a Vcs
  - better support transitional packages with mark auto-installed.
    when the transitional package is in "oldlibs" the new package
    is not marked auto installed (same is true for section
    metapackages)
  - provide new "deb mirror://archive.foo/mirrors.list sid main"
    method expects a list of mirrors (generated on the server e.g.
    via geoip) and will use that, including cycle on failure
  - write apport crash file on package failure (disabled by default
    on debian until apport is available)
  - support mirror failure reporting (disabled by default on debian)

  - backport forgotten Valid-Until patch from the obsolete experimental
    branch to prevent replay attacks better, thanks to Thomas Viehmann
    for the initial patch! (Closes: #499897)
* doc/apt.conf.5.xml:
  - document the new Valid-Until related options
* apt-pkg/contrib/strutl.cc:
  - split StrToTime() into HTTP1.1 and FTP date parser methods and
    use strptime() instead of some self-made scanf mangling
  - use the portable timegm shown in his manpage instead of a strange
    looking code copycat from wget
* ftparchive/writer.cc:
  - add ValidTime option to generate a Valid-Until header in Release file

* apt-pkg/pkgcache.h:
  - switch {,Install-}Size to unsigned long long
  - deal with long long, not with int to remove 2GB Limit (LP: #250909)
  - deprecate AddSize with Multiplier as it is unused and switch to
    boolean instead to handle the sizes more gracefully.
  - switch i{Download,Usr}Size from double to (un)signed long long
* cmdline/apt-get.cc:
  - use unsigned long long instead of double to store values it gets

rename the options, document them and reorder the changelog a bit

move the users away from the deprecated StrToTime() method

use the portable timegm shown in his manpage instead of a strange
looking code copycat from wget

* ftparchive/writer.cc:
  - add ValidTime option to generate a Valid-Until header in Release file

use the Valid-Until header from the Release file but if the user
provides a setting in the configuration prefer the date which is
earlier.

enhance the Valid-Until code a bit by using the correct RFC1123StrToTime
method and allow for better translations of the error messages

* apt-pkg/contrib/strutl.cc:
  - split StrToTime() into HTTP1.1 and FTP date parser methods and
    use strptime() instead of some selfmade scanf mangling

* apt-pkg/indexrecords.cc:
  - backport forgotten Valid-Until patch from the obsolete experimental
    branch to prevent replay attacks better, thanks to Thomas Viehmann
    for the initial patch! (Closes: #499897)

use the GroupedFromCommandLine() method in the dotty and xvcg command
to get all the funky features in less lines

add a GroupedFromCommandLine method to the PackageSet to split the
packages on the commandline into groups based on modifiers

do not fail if an unrelated error is pending in DisplayRecord()

support special release-modifier 'installed' and 'candidate'

accept package versions in the unmet command

enhance the changelog a bit

handle :arch modifier in PackageSet::FromString correctly

apt-cache show --no-all-versions should issues the Candidate

do not insert end() Iterators into the CacheSet even if requested

Don't increase the commandline parameter in the library but in the
application to be really generic.

add --target-release option (Closes: #115520)

Add a option to apt-cache policy to additionally init the DepCache before
starting to get the package informations.
This is useful e.g. for debugging the MultiArchKiller.

use pkgCacheFile and the new CacheSets all over the place

Add a method to get a VersionSet from the Commandline and refactor
the existing methods a bit to reuse them easier intern

store also the SourceList we use internally for export

Switch away from the now deprecated methods for Cache building

* apt-pkg/cachefile.{cc,h}:
  - split Open() into submethods to be able to build only parts
  - make the OpProgress optional in the Cache buildprocess

* cmdline/apt-get.cc:
  - use unsigned long long instead of double to store values it gets

* apt-pkg/depcache.cc:
  - switch i{Download,Usr}Size from double to (un)signed long long

The biggest reason is that this saves a lot of float point operations
we do in AddSizes() on integers. The only reason i see that this was
a double is that it was 64bit long and can therefore store bigger
values than int/long, but with the availablity of (un)signed long long
we are now also at 64bit and can store sizes more than 8 Exabytes big -
by the time this will be a limit the C/C++ Standard will have bigger types,
hopefully.

deprecate AddSize with Multiplier as it is unused and switch to
boolean instead to handle the sizes more gracefully.

* apt-pkg/pkgcache.h:
  - switch {,Install-}Size to unsigned long long
* apt-pkg/depcache.cc:
  - deal with long long, not with int to remove 2GB Limit (LP: #250909)

methods/mirror.cc: debug improvements

implement Fail-Ignore bool in FetchItem that tells the method that a failure of this item is ok and does not need to be tried on all mirrors

methods/mirror.cc: simplify uri.startswith()

methods/mirrors.cc: make cycle through the mirrors work properly

methods/mirror.cc: remove Acquire::Mirror::RefreshInterval (not really useful)

improve error message if mirror method fails

cmdline/apt-report-mirror-failure: port to latest python-apt

methods/mirror.cc: on fail try the next mirror

* apt-pkg/deb/dpkgpm.cc:
  - add missing include
* methods/mirror.{cc,h}:
  - add SelectNextMirror() and InitMirrors() functions
  - read all mirrors into the AllMirrors vector

* apt-pkg/cacheset.{cc,h}:
  - add simple wrapper around std::set for cache structures

rename packageset into cacheset while it is not too late

* cmdline/apt-cache.cc:
  - make the search multiarch compatible by using GrpIterator instead