optimize build time query, thanks to Peter Palfrader

allow multiple distributions for list (including any, any-priv, any-unpriv)

add format options for last build time and last successful build time

Document schema

As far as I know, this should be what is currently in our database.

Use cat/gzip instead of keep-latest

For the secondary package file, it was wrong to use keep-latest, as
Modestas Vainius pointed out. With this change, files are just
copied/unpacked, allowing edos-debcheck to correctly determine if the
build-deps can be satisfied.

This change affects the triggers for all non-standard (*-volatile,
*-bpo, *-edu and experimental) suites, which should all use the
aptitude dep resolver (able to handle such complex dep situations) on
the buildds.

use ~/.wanna-build.yaml if it exists
implement pre-defined list formats

start useing format options for list; shouldn't change behaviour

add/update files from live tree

add path to crontab, taken from live system

Quote the \ for the output to db_load

add %V to format string, and re-sort options alphabetically

resurrect triggers/filter-nonfree from
636fd44b6b3b8f343eb53c4ef2dd053fb91bd4d6 but use always
"get" to avoid tracebacks.

modified crontab

Merge branch 'master' of /org/wanna-build/

No reason to cast it to timestamp anymore, it's now such a field in the db.

Add format option F to export the failed message.

Revert "add non-free files to quinn-diff (and to wanna-build)"

This reverts commit 636fd44b6b3b8f343eb53c4ef2dd053fb91bd4d6.

This commit breaks merging and performance.

Traceback (most recent call last):
  File "/org/wanna-build/triggers/filter-nonfree", line 49, in <module>
    main()
  File "/org/wanna-build/triggers/filter-nonfree", line 44, in main
    okpkgs = check_source(oklist, open(sys.argv[3]), outfile(name, sys.argv[3]))
  File "/org/wanna-build/triggers/filter-nonfree", line 13, in check_source
    if pkg.Section['Section'].startswith('non-free'):
KeyError: 'Section'

Signed-off-by: Philipp Kern <pkern@debian.org>

add non-free files to quinn-diff (and to wanna-build)
(wanna-build hands them only out if asked to do so)
also inlines the loop-variants to only check the sources.list once

delete unused files

add filter code for components

list-order:
- move to yaml-file
- building sorts by buildd, package name now

list_order: switch default for needs-builds to CWn

sort_list_func: unify and remove code duplication

calculate_prio: fix components: parse sections

format: Add distribution and time of state change as options

Merge branch 'master' of /org/buildd.debian.org/git/wanna-build

add %{Text} and %{!Text} with recursive elements

move print_format out from the list code

Unbreak parse_date() for new date format

clean up old entries
switch to mkstats.aba for now

Merge branch 'master' of /org/buildd.debian.org/git/wanna-build

add output format options to --list, with the formats necessary for mkstats

Split the previous state and state change in 2 lines

Now we didn't get a state change in case there was no previous state

Merge branch 'master' of /org/buildd.debian.org/git/wanna-build

factor out priority configuration, and allow per user and arch files

hotfix for mkstats

add "previous state left" to list -v

replace waiting days by state days

beautify keys w/o so much code duplication

avoid french dates by using postgres build in now() function

add new sort options C and W for calculated priority and waiting days

calculate potential build priority with --info

another sync with reality

sync with reality (all changes from /org/wanna-build and currently live)

Fix stupid bugs, add some extra logging.

Make the triggers use multiple Packages file for things like experimental.

Fix typo

Rewrite triggers

Rename merge-all-overlay to merge-all-secondary to avoid confusion.

Also parse the second packages file to clear dep-waits.

Remove unused functions.

Add option to merge a second Packages

This allows a suite like experimental to also have the Packages file
from unstable so that we know better what is installable and what is
not.

Base wb-edos-builddebcheck on the new edos-builddebcheck

We have edos-builddebcheck and add-sources.py from edos-distcheck now,
but it's not giving compatible output to what wanna-build currently
expects.  So we keep the old output format.

Don't requests all the packages again in the same function

It was even in the same variable name.  We just make sure we properly
update it now.

Merge branch 'master' of /org/wanna-build/

Rename variable to avoid confusion.

It probably still requires some rewrite.

wanna-build: bugfix for list_min_age

Signed-off-by: Philipp Kern <pkern@debian.org>

Redo locking behaviour

When processing more than 1 package, don't select each package indivdually
locking that row, but instead lock the table and select all the packages
we want at once.

The lock should allow read-only access but not other writers.

Don't go to state BD-Uninstallable for arches other than unstable.

Stop rotating unused old logs files.

Add space so that the sql statement looks nicer.

Remove alpha from testing and add hurd-i386 to unstable.

Expire old dump files.

Dump the whole database, including the roles.

Move the transaction log to the database.

Run the update script for status page from cron.

Re-add export functionality.

If no option is passed, we want to have all packages.

Buildd's should always connect to the priviliged service to allow them to update the last seen entry.

Make get_all_source_info() support all options we want to use to restrict the output of list.

Make list use state field in the sql select.

The database can filter alot faster than perl, and even has an index for it.

Don't lock the record in case we just want to read it.

It's not useful to wait for the lock, and we might not have permission to do so.

Use the unprivilged service in case it's read-only and not security related.

Don't change state on give-back if we're already in needs-build.

It would go to BD-Uinstallable if already in needs-build state.

If we only ask for info of 1 record, we might be updating it, lock the record.

Dump the pgsql database before and after the "daily" trigger.

Remove this authorized_keys file, it moved to /org/buildd.debian.org/home/.ssh/

Document -A option.  This should be used instead of --database

Ignore the status dir that has the status database in it.

Always allow -o to override the user restriction when given back a package.

The ssh-keys moved to /org/buildd.deian.org.

No reason to lock the database anymore.

Make it use paths directly to our files.

We used to have symlinks in /usr/share/perl5/.  Now we just
set the include path to use our dir.

/etc/wanna-build.conf just included our config file, now use
it directly.

This should probably get changed at some point, if we ever
want to package it.

Make info not print lines that have a NULL in it.

Make info print field names again like the old version

Things like buildd-mail expect to find Package instead of package
in the output of info command.

Merge branch 'master' into postgresql

Some places where still using State-Change instead of state_change.

Add support for the public view of the data.

Currently does this for user nobody, to be able to use from the website.
We probably want to make this decission some other way.

Allow importing packages without version if the state is not-for-us.

The version doesn't get updated anyway.

Allow state Dep-Wait-Removed when importing.

Every arch is now in it's own namespace.

kfreebsd is now part of testing.

Quote tablename so that arches like kfreebsd-amd64 work.

Restore sendmail setting.

Merge commit 'origin/master' into postgresql

Only changes in removed code.

Tell which database is locked.

Patch by pkern?

Merge all the dists into 1 table

This leaves us with 2 tables per arch.  One for the pacakges, one for the users.

Fix spelling of binary_nmu_changelog

Merge branch 'master' into postgresql

Initial version of wanna-build with postgres support.