Merge remote-tracking branch 'mvo/feature/srv-records' into debian/experimental

Add basic (non weight adjusted) shuffling for SrvRecords selection

Also add "Debug::Acquire::SrvRecs" debug option and the option
"Acquire::EnableSrvRecods" to allow disabling this lookup.

Support tabs in sources.list files

Also support vertical tabs, as isspace() does the same.

Closes: #796067

Add support for "apt-cache showsrc --only-source srcpkgname"

Thanks: Steve Slangasek for the suggestion
Closes: 695633

Provide "apt-get full-upgrade" to match "apt full-upgrade"

apt-pkg/contrib/srvrec.cc: res_query() should not generate a _error->Warning()

cleanup

Merge remote-tracking branch 'upstream/debian/experimental' into feature/srv-records

Merge branch 'debian/experimental' into feature/srv-records

Conflicts:
cmdline/apt-helper.cc
cmdline/makefile

releasing package apt version 1.1~exp9

Do not fail if building test/ fails (issues with parallel builds)

Git-Dch: ignore

Fix the test suite harder

Gbp-Dch: ignore

Fix the test suite again

Gbp-Dch: ignore

Re-add support for G++ 4.8 and configure travis to use it

This makes tests work again!

Gbp-Dch: ignore

Really fix all iwyu issues

Git-Dch: ignore

debian/NEWS: Mention new pinning algorithm added in 2.0~exp1

Fix all the wrong removals of includes that iwyu got wrong

Git-Dch: ignore

Cleanup includes after running iwyu

Do not crash in 'apt show' for non-installed packages

For a non-installed package, manual_installed was set to the null
pointer. This was passed to Tag::Rewrite, which expects an string
(empty for null-type values) and the conversion from null pointer
to string does not work correctly.

Replace "extra" in "the following extra packages [...]" by "additional"

This breaks the translation for no big gain, but we broke enough strings
already for that to not really matter anymore.

Closes: #82430

Make pkgCache::Priority() static, it does not need the instance

It still compiles after the change, so just merge it.

Closes: #448627

install: If package already is the newest version, display version

Also do it unconditionally, as it does not hurt.

Closes: #315149

Use terminfo's typical save_cursor/restore_cursor sequences

Not all terminals understand DOS' escape sequences for save/restore
cursor, so use the more typical sequences from terminfo.

Closes: #772521
Signed-off-by: James McCoy <jamessan@debian.org>

Show full package records in apt-cache search -f

This just changes the DoSearch code to use DisplayRecord to
display the record when the full record is requested.

Closes: #660851
[jak@debian.org: Wrote the commit message]

When looking if Provides match, OR them with the normal patches

Simply overriding the value caused patterns that previously matched
a real package name to not match anymore.

Closes: #760868

Document the general effect of the comma operator

Closes: #574939

Add GetPriority(VerIterator) to pkgDepCache::Policy

Also unify the case of considerFiles and ConsiderFiles to be
ConsiderFiles in all cases.

Gbp-Dch: ignore

cachefile.cc: Do not ignore return value of pkgDepCache::Init()

Currently, this always returns true, but it might start returning
false at some point in the future...

Gbp-Dch: ignore

update: Check if the cache could be opened, don't just assume it

This seems to cause Bug#756162, as in that case the depcache
was NULL.

I'm not entirely sure how that happens, but it's better to
be check here rather then crash later on.

Closes: #756162

doc/files.dbk: Improve documentation for {src,}pkgcache.bin

This should be enough for most persons.

Closes: #465551

apt-get: allow non-root --print-uris build-dep

Closes: #283400

add {contrib,non-free}/{metapackages,oldlibs} to section specialhandling

Closes: 788320

apt-cache(8): Drop the #versions >= #package names comparison

Closes: #691281

Also add 'in combination with the other options.' to another error

Gbp-Dch: ignore

Set Acquire::Changelogs::URI::Origin::Tanglu for Tanglu changelogs

debian/control: Remove XS- from Testsuite and bump Standards-Version

Thanks: Lintian

debian/control: Drop the versioned python-apt conflict

Thanks: Lintian

debian/control: Replace debian by Debian

Thanks: Lintian

changelog: Replace reenable by re-enable everywhere

Thanks: Lintian

apt: Add autoremove and auto-remove commands

Make apt compile with clang++ again

This allows us to run the clang static analyzer and to run the
testsuite with the clang MemorySanitizer.

Make auto-remove and auto-clean aliases for the versions without -

Some people type them instead of autoremove and autoclean, so make
them happy.

Closes: #274159
Makes-Happy: Ansgar

apt_preferences(5): Mention overlapping of pin matches

apt_preferences(5): Correct default pin assignment documentation

This was broken, as higher pins were also assigned to versions
that are installed.

Closes: #623706

apt-cache(8): Mention that --names-only search provides

Closes: #618017

apt-cache: Show an error if stats gets any arguments

Closes: #153161

Say "in combination with the other options" if an option is not understood

Closes: #762758

Mention that source order only matter per version

Closes: #617445

Replace UINT_MAX with std::numeric_limits<unsigned int>::max()

Gbp-Dch: ignore

Add integration test for Pin-Priority range checks

Gbp-Dch: ignore

Replace --force-yes by various options starting with --allow

This enables more fine grained control over such exceptions.

Merge branch 'debian/experimental' of https://github.com/DonKult/apt into debian/experimental

po/fr.po: Remove the unbreakable space before ! in the confirm string

This was probably really annoying for French people wanting to remove
essential packages, sorry about that.

Closes: #727680

Accept --upgradeable as synonym for --upgradable

It's a tiny diff, so why not? But no need to document it.

Closes: #787846

Use setresuid() and setresgid() where available

Deprecate SPtrArray<T> and convert everyone to unique_ptr<T[]>

More standardization

Mark SPtr as deprecated, and convert users to std::unique_ptr

Switch to std::unique_ptr, as this is safer than SPtr.

C++11: Switch from auto_ptr to unique_ptr

This is nicer

Remove an invalid fi from a testcase

Gbp-Dch: ignore

Fix integration tests for the removal of the Package pin output

This should make them work again.

Drop the Section field from pkgCache::Package again

This somehow got back, we don't really know why. Emulate the
Section() method in the PkgIterator by looking at the section
of the head of the VersionList.

apt_preferences(5): Re-document how priorities are calculated

The old text did not match either the old or the new implementation,
so let's rewrite it to explain the new implementation.

Closes: #554773

policy: Be more strict about parsing pin files, and document prio 0

Treat invalid pin priorities and overflows as an error.

Closes: #429912

apt-cache: Improve translateability of the "with priority" thing

Gbp-Dch: ignore

Only make Upgradable() return true for packages with a candidate

If there is no candidate, the package should not be considered
upgradeable.

LP: #896689

apt-cache: Modify policy output to use per-version pins

Also optionally enable old output by setting APT::Policy=0.

Add a parameter ConsiderFiles to GetPriority(VerIterator)

This allows us to exclude files from being considered for the
priority, so it will return only specific-version matches.

use a=experimental instead n=experimental in pin documentation

Closes: 783343

document APT::Periodic::RandomSleep

The documentation in the patch is from
https://help.ubuntu.com/community/AutomaticSecurityUpdates

That page is licensed under Creative Commons Attribution-ShareAlike
3.0. Because I'm unsure how that license meshes with apt's license
I've not copied the text but formulated the same information freely
in my own words.

The original text was contributed by Chris Bainbridge [1][3]
and Kees Cook [2]. Thanks to them.

[1] https://help.ubuntu.com/community/AutomaticSecurityUpdates?action=diff&rev1=40&rev2=41
[2] https://help.ubuntu.com/community/AutomaticSecurityUpdates?action=diff&rev1=38&rev2=39
[3] https://help.ubuntu.com/community/AutomaticSecurityUpdates?action=diff&rev1=37&rev2=38

Closes: 776380
Thanks: Chris Bainbridge and Kees Cook for initial text

Do not set unhonored DPKG_NO_TSTP variable for dpkg

Support for that variable was removed in dpkg in 1.15.6, in commit
6f037003e8b96878b485efb7cbd1f846e3bf4e97.

Closes: #765366

document VERSION 2 (and 3) pre-install-pkgs hook interface

[Commiter: Patch adapted to apply to current version of the manpage and
added/moved a few words about Version 3 to make it fit better]

Closes: 627188

Replace all "press enter" occurrences with "press [Enter]"

Thanks: Andre Felipe Machado for initial patch
Closes: 414848

replace direct calls to egrep with grep -E

The rest of the initial patch is not needed or incorrect in our usage.
Big changes for the dselect scripts seem unneeded as well as those are
hardly used by anyone anymore…

[commit message written by commiter]

Closes: 255577
Thanks: David Weinehall for initial patch

remove Dir:: scope limit of RootDir in the documentation

RootDir doesn't only effect Dir-scope but all FindDir directories, so
document it accordingly.

Closes: 659387

support setting a port for rsh:// in sources.list

[Commiter comment: Untested, but looks and compiles fine, so what could
possibly go wrong]

Closes: 624727

po-fixups: fill Project-Id-Version and Encoding correctly

Closes: 612996

travis: add ppa:ubuntu-toolschain-r/test as source for gcc-5

This makes travis-ci able to run our tests again.
Sometimes.
If it doesn't spontaneously fails with internal gcc errors…

Git-Dch: Ignore

Makefile: Add a make fast command for development

This excludes dselect, po, and doc.

apt.cron.daily: Reference 10periodic instead of 02periodic

LP: #1332106

debian/control: Rename libapt-pkg4.15 -> libapt-pkg5.0

debian/gbp.conf: Set multimaint-merge = True

Gbp-Dch: ignore

Annotate more methods with APT_OVERRIDE

Gbp-Dch: ignore
Reported-By: g++ -Wsuggest-override
Thanks: g++ -Wsuggest-override

Bump apt-inst SONAME to 2.0 to adjust for the ABI break in apt-pkg

Merge changelog entries from sid-gcc5

po: Update Simplified Chinese programs translation

* fix a wrong translation.
* update some translations.

po: update zh_CN translation slightly

ExecFork: Use /proc/self/fd to determine which files to close

This significantly reduces the number of files that have to be closed
and seems to be faster, despite the additional reads.

On systems where /proc/self/fd is not available, we fallback to the
old code that closes all file descriptors >= 3.

Closes: #764204

Make QItem a subclass of DescItem

CurrentItem previously was a DescItem, so let's make QItem a
DescItem to not break things.

Re-introduce None as a deprecated alias for No

Gbp-Dch: ignore

Drop C++11 elements from headers

apt-get: Do not include apt-pkg/indexrecords.h

It's gone.

Gbp-Dch: ignore

Fix an obscure warning from GCC

It complained about the previous code:

apt-pkg/sourcelist.cc: In destructor ‘pkgSourceList::~pkgSourceList()’:
apt-pkg/sourcelist.cc:278:4: warning: cannot optimize loop, the loop counter may overflow [-Wunsafe-loop-optimizations]
    for (pkgIndexFile * const File : VolatileFiles)
    ^
There really cannot be an overflow, though. Rewriting it like this
seems to fix it.

Simply ignore cruft in the status files, do not treat it as prio 0

This was broken in case all other sources were < 0.

Replace INT_MIN with std::numeric_limits<int>::min

This should fix travis compilation errors.

Gbp-Dch: ignore

initialize PinVers to a nullptr

This makes test-bug-254770-segfault-if-cache-not-buildable happy.

Git-Dch: Ignore

move manual-bit from 'oldlibs' pkg to its dependencies

oldlibs used to be in APT::Never-MarkAuto-Sections so that old
transition packages can be removed without causing the then
(autoinstalled) renamed package to be autoremoved. It isn't ideal
through as ideally you want the oldlibs package to be removed after
nothing depends on it anymore regardless of if you have once installed
it by hand or not – and if you had the package talking over (the
dependencies) should carry the manual bit now as they are the real deal
now.

As an added bonus if the package has no dependencies because it is an
oldlibs without a direct replacement you should move away from (like
lib1 and lib2 are currently in the archive, but there will hopefully
only be lib2 in the release) you get a lib1 marked as auto.

If the user still needs the oldlibs package for some reason all he has
to do is mark it as manual once as this move is only performed if a
installed package changes its section from a not-Move-Autobit-Sections
to a Move-Autobit-Sections.

move APT::Never-MarkAuto-Sections handling to MarkDelete

Having the handling in MarkInstall means that it just effects
installation of the metapackage, but if the dependencies change the new
dependencies aren't protected (and the old dependencies are still
protected for no 'reason'). Having it in MarkDelete means that if a
metapackage is sheduled for removal all its currently installed
dependencies are marked as manual, which helps against both as in this
case there is no new/old and additionally if a user decides the
installation of a metapackage was wrong he can just remove it
explicitely avoid the manual marking entirely.

no value for MultiArch field is 'no', not 'none'

Git-Dch: Ignore

change to libapt-pkg abi 5.0 with versioned symbols

We changed an aweful lot of stuff, so 5.0 is properly better than 4.X as
a semantic version and as we are at it lets add some trivial symbol
versioning as well: We just mark all exported symbols with the same
version for now. This isn't really the proper thing to do as if we add
symbols in later versions (with the same abi) they will get the same
symbols version, but our .symbols file will protect us from the problems
arising from this as it will ensure that a package acutally depends on a
version of the abi high enough to include the symbol.

update symbols file to current state of affairs

cxx11abi transition happens, we changed a bunch of methods and all that
stuff which is really good™ for an abi. Lets just slowly start to stop
changing more and a first step is to document the current so changes
aren't hidding in a big wall of change anymore.

Git-Dch: Ignore