Re-implement password reset token sending natively

The django version of password reset is broken in multiple way. What's
hurting us in particular is it cannot reset the password of a user where
the old password was generated by a deprecated hasher. Which, of course,
is exactly one of the cases where being able to reset the password is
important.

We still use the same infrastructure, and we use the actual django code
for *changing* the password -- this just replaces the token sender with
something that's a lot simpler and less broken.

Fix runaway paragraph on developer/core

The member profile paragraph was missing the terminating </p> tag.

Tweak wording around minor rev upgrades

Change "risk of upgrading" to "risk associated with upgrading".

Only report "updated list n" if it's actually updated

Remove stupid debugging code left behind

Add tool to sync list information from archives server

pgweb is no longer the master of this information, so add a tool to make
it sync it from the archives server.

Any changes made locally will be overwritten by this tool except the
sortkey field on groups which is local. For now.

Remove incorrect commented out line

Can't use that line without the comment, so get rid of the comment.

Backpatch validators into initial migration

It's just silly to do a real migration with this

Remove externallink field from Mailinglist model

This is not used for anything...

Reference mailinglists by name when sending search query

This way we don't have to keep the exact id values in sync between
different systems, which makes it much less evil.

Remove temporary API used during pglister migration

Added more books to /docs/books/

Information collected by Sarah Conway <sarah.conway@crunchydata.com>

Fix model diffing to be compatible with both 1.8 and 1.11

Rendering a template takes a dict and not a context

This is optional in Django 1.8, but a mandatory change in 1.11.
Backwards compatible.

Fix context processor class name for newer django

Missed this in 09f904f787616c19080032e1dfe0ef08404007c7

Fix OAuth URL imports

Missed this in 74bb6fbd5a0c7f1af2526e3a693aa6f00b8d76da

Fix that HttpServerError now takes a request as parameter

Show django version in system_information

Remove specific url handler for favicon

Only used locally anyway, so we don't care. In production this is
handled by the webserver.

Replace NavContext and render_to_response with render_pgweb

render_to_response does not work on newer django, so it needs to be
replaced. And using a speicfic context actually overcomplicates things,
it's easier to just use a wrapper function. For those cases where we
don't need NavContext, just use render() (the new shortcut function from
django), which also removes the need to use RequestContext.

Import newer version of django-selectable

Sync up to the same version we have on the commitfest app, which will
also be required for eventual django 1.11 support.

Update template configuration for newer django

Also fully backwards compatible

Update URL formats to be compatible with newer django

This format is supported both on the current 1.8 deployment and on newer
versions, so no incompatibilities to worry about.

Validate ssh keys as they are entered in the profile

In particular, reject ssh-dss keys here. They don't work anymore since
an upgrade, for security reasons, but there was not really a way for the
user to know why. With this they will at least know if when they try to
save or change the keys.

Update Recognized Conference guidelines

Update the recognized conference guidelines in the "Financial"
section to be clearer as to how to create a statement of how
financial proceeds are applied.

Support contacting archives search server over http

This makes it a lot easier to do local testing. Of course, in production
we use https and by default.

Shoutboux for 20180301 release

Fix URL reference to the "commands" module and improve language.

Reported by Raymond O'Donnell <rod@iol.ie>

Allow unlinked CVEs and poll for valid links

This way new CVEs that are added will start off being listed, but not
with a link. When upstream (currently redhat) publishes the CVE, a
cronjob will pick this up and update it with a link.

Of course, we still only show CVEs that are listed as public, but this
should hopefully get rid of some of the questions of why we link to a
404.

Make it more clear tha bug reports are public

Make it super clear that bug reports and docs corrections are both
posted to a public mailinglist and archived in the public archives.

Purge /applications-v2.xml when SB apps are changed.

Fix spelling on docsbug form

Fix "RedHat" type and add instructions for the SUSE rpm repository.
Patches by Devrim Gündüz on pgsql-www.

Fix yum spider for versions with >1 repo rpm

The code was supposed to pick the latest version of the repo rpm in this
scenario, but at some point the data structure was updated and the code
was not, so it ended up actually picking the *oldest* version of the
repo rpm.

Mark security archives redirect as permanent

This silences a deprecation warning.

Fix mailinglist link in README

Use https rather than http and the new URL for the list page.

Add a top margin on the newstag

The newstag label was sitting close on the textblock, add a bit of
top-margin to create separation.

Reviewed by: Magnus Hagander <magnus@hagander.net>

Fix ordering of CVE entries

Content for 2018-02-08 cumulative release.

Fix markup on about/advantages

Close paragraph which was left open, causing the next heading to
be in the wrong context.

Update SPI address.

Remove undefined class declaration

There is no navFooter class defined in the CSS, a fact made quite
clear due to one of its uses being misspelled without any problems.
Remove class declaration.

Close input tags

XHTML requires all tags to be closed.

Fix paragraphs on donate page

There was a stray opening paragraph, and a missing closing one.
Remove and add.

Avoid redirect on opensource.org links

http://www.opensource.org/licenses/postgresql redirects with a
301 to its https counterpart, update the link to save a redirect
for our users.

This link is present in all the presskits as well, but the amount
of clicks there should be low enough to not bother.

Fix incorrect anchors on event archive

The name attribute of an anchor link cannot contain spaces,
pass the header name via the slugify filter to ensure it's
compliant.

Use https for all postgresql.org links

Presskit 10: rename OSX to macOS

There is no such thing as OSX anymore, it is now macOS. This
updates the version 10 presskit, but leaves the backbranch
presskits even though Apple has retroactively renamed the old
versions macOS as well.

Ensure all <img> tags are closed

The <img .. /> tag is required to be to closed in XHTML, as opposed
to HTML where <img ..> is valid. Properly close all currently open
img tags and also add alt="" attributes where missing.

Update URLs for EDB installers. The old ones were 2 website generations ago, and incurred at least 2 redirects.

Clarify some wording

Fix typo

Don't list unsupported versions that have no patches at all

That just generates a completely empty page in the output, so remove the
link completely instead.

For supported versions we list all of them, including if they have no
patches.

Activate new security pages

This also removes the two previous static pages for this information.
Access to the old "security archives" URL is now redirected back to the
main security page, since the archive is replaced with a dynamically
built of per-version security patches.

Remove dead code

Fix query for version-specific security support list

When asking for version x, we should still list all versions the patch
in question applies to, not limit it to the current one.

Small refectoring

Makes the code easier to use in future feed support

Add explicit group permissions check for varnish purge and pending mod

Previously we just used "is member of staff", but for better granuality
explicitly also check membership of groups. This introduces the new
group "varnish purgers" for that permission.

Remove references to vector_other

The actual field was already removed, but references in admin.py were
accidentally left around. Oops.

Database:ify the list of security patches

This finally moves the patches into the db, which makes it a lot easier
to filter patches in the views.

It also adds the new way of categorising patches, which is assigning
them a CVSSv3 score.

For now, there are no public views to this, and the old static pages
remain. This is so we can backfill all existing security patches before
we make it public.

Remove majordomo2 subscription form

Replace it with a redirect to lists.postgresql.org, where pglister lives.

Change mailpref redirect to go to pglister

Add view that lists all available tags as json

For external consumption. Only tag and description is viewed, but URLs
to the feeds and pages can easily be constructed using it.

Fix admin base for non-notification models

Add a createuser callback for cauth django plugin

This callback can prevent new users from being created based on specific
criteria. The plugin is defined in settings.py, so it can be any python
code. For example, it can look up in a specific table if this user is
supposed to be allowed to log in at all.

Add ability to import user to django cauth example

This has been in used around a number of community sites already,
backpatch it into the upstream master.

Add possibility to turn off django cauth using settings in sample

This sample is used across most of our other sites, so add functionality
to install without having a local master repo.

Back-patch of pgeu commit 3e4d8c9101c2d309b134c2f5638aa40db8ef2cf5

Fix doc comments for devel version

Don't say version 0.0 in the emails that are sent out. That's what we
call it internally, but the URL should have /devel/ in it. Fix this both
in the template, and then if it comes through in the form again in case
the user picked up a link elsewhere that is incorrect.

Modify sentence on production PostgreSQL instances on about page.

Add URL to @postgresql on global footer and Contact page

Don't crash when adding models with optional m2m fields

If the m2m field is optional, there will be no "pre" data available, not
even an empty one. Don't crash in this case, just assume it's empty
(which it is).

This could happen when adding a new Organisation, which currently is the
only model we have with optional m2m fields

Mark text as safe in bug report email

Since we're sending the email as text/plain, we shouldn't be doing HTML
escaping on it.

Update migration with previous changes

This was missed in ab36183fdac33c699ae7ed076a7ee85a9cbd895e. It's not a
change that actually changes the database in any way, so no need to
create an actual migration.

Consistently refer to Community events in submission form

Original patch had "badged", and it was renamed to Community event to
make it more clear, but all texts clearly didn't get the memo.

Remove support for "remove after notify" on moderation

This broke when we had ManyToMany relations on a record. We didn't use
to have that, but with tags for news we now do. With this change, the
"reject with a notice" becomes a two step operation, the first one
adding the notification and the second one doing the removal. That'll
have to do for now, and at some point in the future we may create a
completely separate (non /admin/) workflow for moderation and fix it
that way.

Fix reply-to address for docs comments emails

Set sender name on bug report and docs comments email

Add support for setting recipient name and sender name

Send -bugs and -docs emails from noreply address

Sending from the submitters address runs afoul to DMARC and other
restrictions. Instead, send the email from a defined noreply address.
Instead, add the original submitter to both the Cc and the Reply-To
header, to make sure they receive followups.

Patch by Stephen, minor changes by Magnus

Remove dead file

Update for new edition of book

Avoid spans overlapping each other when there are many tags

Predictable ordering for newstags

Include more fields in newstag admin listing

Use proper attribute for script language

The 'language' attribute is deprecated and replaced with 'type' in
xhtml.

Use &amp entity instead of bare ampersand in text

Using a bare '&' in text elements is sometimes Ok, but always
generate warnings in validation checks. Move to using the amp
entity which is the recommended way to render '&' in xhtml.

Add tag support for news items

This lets us separate things like project news from other OSS and from
commercial postings, for example, allowing for people to subscribe to
different feeds with just the parts they are interested in.

Add support for notification emails on m2m changes

Unfortunately, we'll send one email for each m2m field, instead of
collecting them to a single one. That's because there is no signal
delivered at the end of them all, there will be one sent for each field.

Luckily we don't have a lot of m2m fields at this point, and no model
has more than one, so at this point that part is not a problem.

It also means that if a regular field *and* an m2m field is changed,
then we will get two notifications.

Finally, enable these notifications for the Organisation fields, meaning
we will get a notification when an Organisation changes managers, which
was not working before.

Add support for descriptive texts over m2m checkboxes

This allows the assignment of "hover mouse to show"-descriptions for m2m
fields with multiple checkboxes.

Fix submission forms for many2many fields with checkboxes

This includes proper styling (no more centering of the checkbox itself)
and actually saving the m2m fields on submit.

Add ability for cauth sites to download ssh public keys

This removes the last need to directly access the upstream database
(from the git server), so remove that view as well.

Remove community authentication 1.0

Community authentication 1.0 relied on PostgreSQL connections between
all servers, and hasn't been used for years.

This includes removing the code that migrates users from the old
community authentication system to the new one. This means that any user
who has not logged in since 2011 will no longer be able to user their
oan account, and have to create a new one.

Remove legacy workaround to support old community auth

This workaround enabled a weaker password hasher to work with old
versions of the community authentication plugin. This was already
overridden in prod, but remove the old workaround completely from the
code so we don't accidentally re-enable it.

Remove IRIX and Tru64 from /about

Support for SGI IRIX was removed from the postgresql.git repo
in commit ea91a6be8957 with release 9.3 as the last supported
version, and Tru64 in a6d488cb53 with 9.4 as the last version.
Remove from /about to manage expectations.

Remove extra space in tweets

Implement automatic tweeting of news

Once a twitter account has been registered (using the twitter_register
management command), the twitter_post command wills start posting all
new news to twitter, once they are approved. It will only post news from
the past 7 days to avoid accidentally flooding with old news.

Change personal email to group email for donations

Not only is Josh no longer -core, it's better to consistently refer
people to contact the group addresses to make sure they get timely
responses.

Add "Associazione ITPUG" to International sites.

Prevent changes of column width on events form

Do this by setting the max width of the lefthand column in the table, so
it doesn't change when the checkbox for community events is clicked.

A better solution would of course be to make the forms properly
responsive, but that's part of a "next generation website", rather than
a quick fix...

Enable events to be badged.

Adds the "badged" flag to the Event model in order to distinguish
community badged events from other PostgreSQL oriented events.
Seven total events will be displayed on the homepage, with up to
four community events displayed. If there are no upcoming
community events then, then the header "Events" is shown.

The event submission interface allows a user to opt-in to
listing an event as a "community" event and provide an
explanation for moderators as to why the event should be
considered a community event.

Expands the list of News and Planet PostgreSQL blog entries to 10.