sadf: JSON: Add PSI support

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

sadf: XML: Add PSI support

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

sadf: Cosmetic changes

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

sadf: RAW: Add PSI support

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

sadf: CSV/ppc: Add PSI support

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

sadf: Update option -q to support PSI statistics

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

sar: PSI: Display pressure-stall statistics

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

sar: Add PSI keyword to option -q

Specifying "sar -q PSI" will be equivalent to "sar -q CPU,MEM,IO".

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

sar: PSI: Read PSI statistics

Read statistics from /proc/pressure/* files.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

Fix #233: sar: PSI: Basic definitions

This is the first patch to add support for pressure-stall information
(PSI) to sar.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

Starting sysstat-12.3.3

Update sysstat version number in configure script.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

sysstat-12.3.2

sysstat version 12.3.2 final packaging.
lsm and spec files updated.
Changelog added.

pidstat and cifsiostat commands have been largely rewritten in this
version. In particular they now use a linked list with dynamic
allocation for all the items being monitored. Memory footprint should be
reduced. Last, several bugs have been fixed in pidstat.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

Update NLS translations

Sync with The Translation Project

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

Update configure script

Take into account commit 1b4185b.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

Merge branch 'ffontaine-master'

Link with -lintl if needed

Some libc implementations like uclibc or musl provides
gettext stubs via libintl library. Without it, build will fail on:

/home/fabrice/buildroot/output/host/bin/arm-linux-gcc -o cifsiostat -D_LARGEFILE_SOURCE -D_LARGEFILE64_SOURCE -D_FILE_OFFSET_BITS=64  -Os   -Wall -Wstrict-prototypes -pipe -O2 cifsiostat.o librdstats_light.a libsyscom.a -s
/home/fabrice/buildroot/output/host/opt/ext-toolchain/bin/../lib/gcc/arm-buildroot-linux-musleabihf/8.3.0/../../../../arm-buildroot-linux-musleabihf/bin/ld: tapestat.o: in function `usage':
tapestat.c:(.text+0x44c): undefined reference to `libintl_gettext'

Signed-off-by: Fabrice Fontaine <fontaine.fabrice@gmail.com>

pidstat: Remove unused global variable

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

cifsiostat: Major code refactoring

Now use a linked list with dynamic allocation to save CIFS filesystems.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

Fix #228: pidstat's -l replaces "\0" with " ", displaying unnecesary data

Fix issue #228.
Also add use cases to simulation test environment.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

pidstat: Add a new non regression test

This is to test pidstat's option -e.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

pidstat: Add a replacement function for fork()

The replacement function will be used in a non regression test.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

pidstat: Update non regression tests

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

pidstat: Major code refactoring

Now use a linked list and dynamic allocatin to save tasks being
monitored.
Also fix several bugs that were lurking in previous pidstat version,
like threads that were displayed as attached to the wrong thread leader
if their real leader was not displayed because it was not an active
task.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

iostat: Make sure pointer on linked list has been initialized

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

pidstat: Add new non regression tests

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

pidstat: Remove extra space at end of command name

When pidstat was used with option "-l" to display the command name and
all its arguments, a space was added at the end after all the arguments.
Remove it as it is unneeded and it may prevent the user from displaying
lines based on a pattern located at the end of line
(e.g. pidstat -l -C "pattern$" ...)

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

Fix sa2 script, so it wont complain about "unrecognized archive format"
on empty list for compress program.

Signed-off-by: Anatoly Pugachev <matorola@gmail.com>

pidstat: Add new non regression tests

New non regression tests for the pidstat command. Tests should be run in
sysstat simulation environment (use do_test script).

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

pidstat: Cosmetic updates

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

pidstat: Add non regression tests

First tests set for pidstat.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

pidstat: Add a replacement function for getpwuid()

This replacement function will be used in tests environment.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

pidstat: Set up test environment

Update pidstat for use in non regression tests.
Create all the necessary files in tests directory.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

iostat: Add new ng tests for flush I/Os

Test part of iostat code which reads flush I/O operations using
/sys/block/xxx/stat file (instead of /proc/diskstats file).

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

Starting sysstat-12.3.2

Update sysstat version number in configure script.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

sysstat-12.3.1

sysstat version 12.3.1 final packaging.
lsm and spec files updated.
Changelog added.

This version includes new interesting features such as:
* the possibility to display system topology (logical core, socket and
NUMA node numbers) with mpstat,
* statistics for flush I/O operations with iostat,
* and the support for SMB2 version of statistics file for the cifsiostat
command.

It also fixes some bugs concerning iostat and sadf. Enjoy!

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

Update NLS translations

Sync with the Translation Project.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

iostat: Add ng tests for flush I/Os statistics

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

iostat: Make code a bit more solid

Add some extra verifications even though flush operations are normally
counted as writes before being merged.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

iostat: Update non regression tests results

Take into account flush operations statistics.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

iostat.h: Update comment

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

iostat: Indicate that flush ops are counted as writes before being
merged

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

Merge branch 'koct9i-flush'

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

iostat: Add flush I/O statistics

Statistics for flush operations have been added into Linux 5.5

Signed-off-by: Konstantin Khlebnikov <khlebnikov@yandex-team.ru>
Link: https://git.kernel.org/pub/scm/linux/kernel/git/torvalds/linux.git/commit/?id=b6866318657717c8914673a6394894d12bc9ff5e

Fix #243: Heap overflow in logic2_display_loop()

Make sure that all tests from check_file_actlst() function are done on a
data file, even if this file has activities with unknown formats.
"sadf -H" and, e.g., "sadf -Hx" should as a consequence behave the same.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

Fix #242: Double free in check_file_actlst()

Avoid freeing buffer() twice.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

cifsiostat: Fix compilation warning

Fix wrong type used to read number of open files.

cifsiostat.c:398:18: warning: format ‘%d’ expects argument of type ‘int *’, but argument 4 has type ‘long long unsigned int *’ [-Wformat=]

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

cifsiostat: Add SMB2 non regression test

Test cifsiostat output using /proc/fs/cifs/Stats file with SMB2 format.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

cifsiostat: Add support for SMB2 version

The /proc/fs/cifs/Stat file format is different between SMB1 and SMB2
versions. Now support both of them.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

cifsiostat: Add non regression tests

Add non regression tests for cifsiostat command.
These tests are intended to be run in sysstat's simulation test
environment (use do_test script).

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

tapestat: Add non regression tests

Add non regression tests for tapestat command.
These tests are intended to be run in sysstat's simulation test
environment (use do_test script).

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

mpstat: Add new non regression tests

Add new non regression tests for topology and JSON output.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

mpstat: Display negative values if topology cannot be read

Display socket and core numbers as -1 if the topology couldn't be read.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

Merge pull request #239 from maxice8/fix-musl-includes

add missing includes for musl

add missing includes for musl

simtest: Add new non regression tests for iostat

Test iostat values for  JSON output format.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

iostat: Fix wrong unit used in JSON output

The values for the amount of data read/written or discarded were always
expressed in blocks/s in the JSON output generated by iostat. It should
take into account the unit (blocks, kB, MB) selected by the user.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

mpstat: Update manual page

Explain new option -T.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

mpstat: Add new switch to display system topology

Add new switch "-T", which tells mpstat to display system topology
(core, socket and node for each cpu).
See #225.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

simtest: Add non regression tests for mpstat command

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

mpstat: Update manual page

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

sa_common.c: Fix typo in comment

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

mpstat: Allow to select individual CPU/nodes with option -A

Previously, using option -A with mpstat would display statistics for all
CPU and nodes (i.e. using -A would also imply -P ALL -N ALL).
Now this is true only if the user didn't specify explicitly a list of
CPU or nodes using options -P or -N.
Example: "mpstat -A -P1,4" will display all possible statistics but only
those concerning CPU 1 and 4 for CPU-related metrics.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

Merge pull request #238 from albert-github/feature/bug_line_md

Missing empty line

Missing empty line

A very minor improvement. The github markdown interprets the `---` directly after the backticks correctly, but other markdown interpreters see it as an indication for a new section.
Problem can be overcome by an empty line and is also consistent with the other usages in the FAQ.md

Starting sysstat-12.3.1

Update sysstat version number in configure script.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

sysstat-12.2.0

sysstat version 12.2.0 final packaging.
lsm and spec files updated.
Changelog added.

Nothing to get really excited about this version which merely includes a
few bugfixes and adds small improvements to sar and sadf.
But this version marks the beginning of a new stable series, which is
why you should upgrade anyway :-)

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

Update NLS translations

Sync with the Translation Project.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

Updated FAQ

Explain the most probable cause for error message displayed by sar and
sadf: "Enf of system activity file unexpected".

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

simtest: Add more non regression tests

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

simtest: Fix typo in TLIST file

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

simtest: Add new non regression tests

Add new tests for sar and sadf.
In particular, make sure that sar and sadf can read a binary datafile
with unknown activity type or format.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

simtest: sar/sadf/iostat: Test environment variables

Take into account some environment variables to make sure they are
properly interpreted by sar, sadf and iostat.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

simtest: Update code so that environment variables can be tested

Now read the contents of environment variables if option --getenv has
been entered on the command line (apply for sar, sadc, sadf and iostat
for now).

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

simtest: Display a success message if all tests were OK

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

sadf: Update manual page

Time used with option -e has no longer to be given in local time.
See commit ecbf5ac.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

simtest: Update tests

Also add a test to check sadf PCP output (test 00590): Make sure we can
create such a PCP archive if needed libraries are present.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

simtest: Add tests to check 12.0.x XML output validity

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

Update DTD and XSD documents so that XML output from 12.0.x versions
validates

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

simtest: Add new tests to check sadf XML header validity

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

sadf: XML: Update XSD document so that XML header validates

Trying to validate XML output from "sadf -Hx" fails because some
elements are expected to be found, e.g.:

$ sadf -Hx | xmllint --schema xml/sysstat.xsd -
<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE sysstat PUBLIC "DTD v3.8 sysstat //EN" "http://pagesperso-orange.fr/sebastien.godard/sysstat-3.8.dtd">
<sysstat xmlns="http://pagesperso-orange.fr/sebastien.godard/sysstat" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://pagesperso-orange.fr/sebastien.godard sysstat.xsd">
<sysdata-version>3.8</sysdata-version>
<host nodename="linux-4.home">
<sysname>Linux</sysname>
<release>5.0.16-100.fc28.x86_64</release>
<machine>x86_64</machine>
<number-of-cpus>8</number-of-cpus>
<file-date>2019-10-12</file-date>
<file-utc-time>16:03:24</file-utc-time>
<timezone>CET</timezone>
</host>
</sysstat>
-:9: element host: Schemas validity error : Element '{http://pagesperso-orange.fr/sebastien.godard/sysstat}host': Missing child element(s). Expected is ( {http://pagesperso-orange.fr/sebastien.godard/sysstat}statistics ).
- fails to validate

Update XSD document to indicate that "statistics" and "restarts"
elements may not exist.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

sadf: PCP: Save timezone value in archive file

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

simtest: Update tests output to take into account timezone value

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

sadf: Display timezone value

Update sadf to display timezone value in the XML, JSON and Header
formats.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

Update DTD and XSD documents to take into account new timezone field

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

sar/sadf: Add timezone value in binary data file

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

simtest: Check for FIXME tags at the end of the tests list

Move test used to look for FIXME tags at the end of the list.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

sar/sadf: Make sure we can read file headers structures from older
versions

Reading the file_header or file_activity structures from a daily data
file from an older version where fewer fields were present might be a
problem as we allocate buffers based on the size of the structure from
the file. This buffer would ithen be to small for the remap_struct()
function to remap the fields to current (larger) structures.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

configure: Add more checks

Check for more include files.
In particular, make sure that <linux/sched.h> and <pcp/impl.h> files
exist before including them.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

simtest: Make sure TZ variable is taken into account

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

simtest: Make more tests independent from timezone value

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

simtest: Try to get more info from test 00571

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

sar/sadf: Change 'flags' type from unsigned int to uint64_t

Need more bits for future extensions.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

simtest: Update test expected result for sadf raw output

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

sadf: Enhance raw format ouput

Now also display records header contents in debug mode.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

simtest: Fix false positive test result

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

Starting sysstat-12.2.0

Update sysstat version number in configure script.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

sysstat-12.1.7

sysstat version 12.1.7 final packaging.
lsm and spec files updated.
Changelog added.

The main new feature brought by this version is the support for stable
identifiers for sar disks statistics. This stable identifier (which
won't change across reboots) is the WWN (World-Wide Name) of the device.
The sar and sadf commands included in this version are also ready to read
new formats of binary data files which could arrive in a (hopefully)
distant future.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

Update NLS translations

Sync with the Translation Project.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

simtest: Add non regression test for sa2 shell script

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>

configure: Add sar_dir configuration variable

This variable defines the directory where the sar binary command is
located.
This variable will be used in sa2 shell script.

Signed-off-by: Sebastien GODARD <sysstat@users.noreply.github.com>