Fix top queries header inconsistency

Merge pull request #482 from darold/pgiraud-patch-1

Fix markdown format

Fix markdown format

Add regression test for logplex format.

Add support to Heroku's PostgreSQL logplex format. You should be able to
parse these logs as follow:

    heroku logs -p postgres | pgbadger -f logplex -o heroku.html -

or if you have already saved the output to a file:

    pgbadger heroku.log

The logplex format is autodectected like any other supported format.
pgBadger understand the following default log_line_prefix:

    database = %d connection_source = %r sql_error_code = %e

or simply:

    sql_error_code = %e

Let me know if there's any other default log_line_prefix. The prefix
can always be set using the -p | --prefix pgbadger option:

    pgbadger --p 'base = %d source = %r sql_state = %e' heroku.log

for example.

Thanks to Anthony Sosso for the feature request.

Fix pgbadger help on URI use.

Fix broken wildcard use in ssh URI introduced in previous patch. Thanks to Tobias Bussmann for the report.

Allow URI with space in path to log file. Thanks to Tobias Bussmann for the report.

Merge pull request #478 from tbussmann/patch-1

Fix URI samples in documentation

Fix URI samples in documentation

Merge pull request #474 from credativ/test-duration

t/02_basics.t: Don't fail if syslog test takes more than 10s

t/02_basics.t: Don't fail if syslog test takes more than 10s

The syslog test checks if the result is exactly 24281 bytes, but if the
run takes 10s or more, the result is longer.

Generated on Tue Feb 19 12:24:58 2019
Log file: t/fixtures/pg-syslog.1.bz2
Parsed 59,921 log entries in 19s  <-- PROBLEM HERE
Log start from 2019-02-11 13:15:39 to 2019-02-11 13:16:26

Update ChangeLog and version to 10.3

Remove extra space at end of line.

Add minimal test to syslog parser.

Fix a call to autodetect_format().

Fix statistics reports when there a filter on database, user, client or
application is requested. Some queries was not reported.

Merge branch 'master' of github.com:darold/pgbadger

Fix autodetection of pg>=10 defauilt log line prefix.

Fix autodetection of log file with "non standard" log line prefix. If
--prefix specify %t | %m | %n and %p or %c, set format to stderr. Thanks
to Alex Danvy for the report.

Merge pull request #471 from madtibo/truncate_error_statement

Truncate error statement

truncate statement when maxlength is used

editor config changes

Add test for multiple output format.

The -o | --outfile option can now be used multiple time to dump
output in several format in a single command. For example:

  pgbadger -o out.txt -o out.html -o - -x json /log/postgresql-11.log

Here pgbadger will create two reports in text and html format saved
in the two corresponding file. It will also output a json report on
standard output. Thanks to Nikolay for the feature request.

Move detection of output format and setting of out filename into a dedicated function set_output_extension().

Fix another pgBouncer log parsing issue. Thanks to Douglas J Hunley for the report.

Update Changelog and version to 10.2

Update usage of pgbadger.

Update pgbadger command examples.

Adjust end of progress bar with files with estimate size (bz2 compressed files and remote compressed files.

Update year in copyright.

Add information about URI notation to parse remote log files.

Force progress to reach 100% at end of parsing of compressed remote file.

Extract information about PL/pgSQL function call in queries of temporary file reports. The information is append to the details display block.

Fix progress bar with csv files.

Fix reading binary file as input file instead of log file.

Encode html output of queries into UTF8 to avoid message "Wide character
in print". Thanks to Colin 't Hart for the report.

Add Checkpoints distance key/value for distance peak.

Fix pgbouncer parsing and request throughput reports. Thanks to Levente Birta for the report.

Fix some typo.

Fix use of csvlog instead of csv for input format.

Add support to http or ftp remote PostgreSQL log file download.
The log file is parsed during the download using curl command
and never saved to disk. With ssh remote log parsing you can use
uri as comand line argument to specify the PostgreSQL log file.

ssh://localhost/postgresql-10-main.log
http://localhost/postgresql-10-main.log.gz
ftp://localhost/postgresql-10-main.log

with http and ftp protocol you need to specify the log file format
at end of the uri:

http://localhost/postgresql-10-main.log:stderr

You can specify multiple uri for log files to be parsed. This is
usefull when you have pgbouncer log file on a remote host and
PostgreSQL logs in the local host.

Old syntax to parse remote log file using -r option is still
working but is obsolete and might be removed in two or three
major versions.

Add support to pgbouncer 1.8 Stats log format. Thanks to Levente Birta for the report.

Add warning about parallel processing disabled with csvlog. Thanks to cstdenis for the report.

Add information in usage output about single process forcing with csvlog
format in -j and -J options. Thanks to cstdenis for the report.

Fix unknown line format error for multiline log while incremental analysis over ssh. Thanks to Wooyoung Cho for the report.

Add -k (--insecure) option to curl command to be able to download logs from server using a self signed certificate.

Auto adjust javascript graph timezone. Thanks to Massimino Sala for the feature request.

Add support to HTTP logfile download by pgBadger, for example:
    /usr/bin/pgbadger http://www.mydom.com/postgresql-10.log
Will parse the file during download using curl command.

Apply change to README by 0xflotus to source file doc/pgBadger.pod.

Merge pull request #448 from 0xflotus/patch-1

fixed being

fixed being

Reapply fix missing replacement of bind parameters after some extra code cleaning. Thanks to Bernhard J. M. Grun for the report.

Revert "Fix missing replacement of bind parameters. Thanks to Bernhard J. M. Grun for the report."

This reverts commit 14fef5ec9bb6be25a657b4199e0764374114a2b7.

Fix missing replacement of bind parameters. Thanks to Bernhard J. M. Grun for the report.

Add --exclude-db option to compute report about everything except the specified database. The option can be used multiple time.

Restore Makefile.PL

Update ChangelLog and version to 10.1

Update SQL beautifier to v3.1 of pgFormatter.

Add test on pgbouncer log parser.

Some little performances improvment.

Fix not a valid file descriptor at pgbadger line 12314.

Fix unwanted newline in progressbar at startup.

Remove circleci files from the project.

Remove dependency of bats and jq for the test suite, they are replaced
with Test::Simple and JSON::XS.

Add more tests especially for incremental mode and input from stdin that
was broken in release 10.0.

Thanks a lot to Etienne Bersac who have initiate the pgbadger test suite
and added the contributing on pgBadger documentation.

Merge pull request #435 from credativ/fix-pod

Sync pgbadger, pod, and README, and fix some syntax errors

Add documentation on how to install Perl module JSON::XS from apt and yum repositories.

Fix URI for CSS in incremental mode. Thanks to Floris van Nee for the report.

Merge branch 'master' of github.com:darold/pgbadger

Fix fatal error when looking for log from STDIN. Thanks to Jacek Szpot for the report.

Merge pull request #438 from SteveNewson/osx_sed_support

Fixes SED use for OSX builds

Fixes SED use for OSX builds

Fix illegal division by zero in incrental mode. Thanks to aleszeleny for the report.

Sync pgbadger, pod, and README, and fix some syntax errors

pgbadger, doc/pgBadger.pod, and README were out of sync. Fix by running
"make", and slight editing of pgbadger when the pod file was more
correct.

Also, the input was using "\" line-continuations which would need to be
\\ for pod to correctly handle them. Fix by formatting as a single line
instead, which is better suitable for cut-and-paste (and there's already
longer lines in the surrounding text). In plus, crontabs do not support \
anyway. In passing, fix +%F crontab example to be +\%F because % is
magic in crontabs.

Update ChangeLog with last change for v10.0

Replace SQL::Beautify with v3.0 of pgFormatter::Beautify

Fix checkpoint distance and estimate not reported in incremental mode.
Thanks to aleszeleny for the report.

Update Changelog and version to 10.0

Fix title of pgbouncer simultaneous session report. Thansks yo Jehan Guillaume De Rorthais for the report.

Add support of pgbouncer syslog log file format. Thanks to djester for the feature request.

Fix error when a remote log is empty. Thanks to Parasit Hendersson for the report.

Add support to all auto_explain format (text, xml, json and yaml).

Fix test with binary format. Binary file must be generated as it is dependent of the plateform. Thanks to Michal Nowak for the report.

Fix case where an empty explain plan is generated.

Fix parsing of autodetected default format with a prefix in command line.

Remove dependency of git command.

Update documentation about options changes and remove of the [%l-1] part of the mandatory prefix.

List of changes in this commit:

  - Fix parsing of vacuum / analyze system usage for PostgreSQL 10.
    Thanks to Achilleas Mantzios for the patch.
  - Fix Temporary File Activity table.
  - Remove dependency to git during install.
  - Add support to auto_explain json output format. Thanks to dmius
    for the report.
  - Fix auto_explain parser and queries that was counted twice.
    Thanks to zam6ak for the report.
  - Add support to %q placeholder in log_line_prefix.
  - Fix checkpoint regex to match PostgreSQL 10 log messages. Thanks
    to Edmund Horner for the patch.
  - Update description of -f | --format option by adding information
    about jsonlog format.
  - Fix wrong long name for option -J that should be --Jobs intead
    of --job_per_file. Thanks to Chad Trabant for the report.
  - Add jsonlog input format. Some users are using the jsonlog format
    of Michael Paquier extension, with -f jsonlog pgbadger will be
    able to parse the log.
  - Fix query normalisation to not duplicate with bind queries.
    Normalisation of values are now tranformed into a single ? and no
    more 0 for numbers, two single quote for string. Thanks to vadv
    for the report.
  - Fix log level count. Thanks to Jean-Christophe Arnu for the report.
  - Make pgbadger more compliant with B::Lint bare sub name.
  - Made perlcritic happy.
  - Add --prettify-json command line option to prettify JSON output.
    Default output is all in single line.
  - Fix Events distribution report.
  - Fix bug with --prefix when log_line_prefix contain multiple %%.
    Thanks to svb007 for the report.
  - Add --log-timezone  +/-XX  command line option to set the number
    of hours from GMT of the timezone that must be used to adjust
    date/time read from log file before beeing parsed. Using this
    option make more difficult log search with a date/time because the
    time will not be the same in the log. Note that you might still
    need to adjust the graph timezone using -Z when the client has not
    the same timezone. Thanks to xdexter for the feature request.
  - Apply timezone to bar chart in pgBouncer reports.
  - Apply timezone to bar chart in Top queries reports.
  - Apply timezone to bar chart in Most frequent errors/events report.
  - Remove INDEXES from the keyword list and add BUFFERS to this list.
  - Fix normalization of query using cursors.

Remove Dockerfile and documentation about docker run. pgBadger comes as
a single Perl script without any dependence and it can be used on any
plateform. It is a non sens to use docker to run pgbadger, if you don't
want to install anything, just copy the file pgbadger where you want and
execute it.

The badger is back to home, modify all links to new URLs
   - Web site: http://pgbadger.darold.net
   - Source code: https://github.com/darold/pgbadger
Change copyright year and name.

The badger is back to home, modify all links to new URLs
  - Web site: http://pgbadger.darold.net
  - Source code: https://github.com/darold/pgbadger
Change copyright year and name.

Merge pull request #423 from pgiraud/tfa_grid

Fix broken grid when no temp files activity

Fix broken grid when no temp files activity

Fixes #422

Merge pull request #419 from julmon/fix_374_bis

Add doc warning about log_MDS vs log_D + log_S

Add doc warning about log_MDS vs log_D + log_S

Merge pull request #416 from julmon/fix_375

g modifier usage when unescaping log_line_prefix

g modifier usage when unescaping log_line_prefix

Merge pull request #414 from julmon/fix_352

Apply timezone offset to bar charts

Merge pull request #415 from julmon/fix_358

Delete current temp file info if we meet an error for the same PID