Merged changes r1927-r1963 from the trunk into multiarch branch.

svn path=/branches/multiarch/; revision=1964

Support NASM's upcoming RIP-relative syntax, with a few differences.

This adds a "default" directive that takes either "rel" or "abs".  This
sets whether the default mode for simple displacements is RIP-relative (rel)
or not (abs).  The default without a directive is "abs".

Also added is corresponding "rel" and "abs" effective address modifiers
to override whatever default is set:
[rel label] is RIP-relative
[abs label] is not.

In default rel mode, [label] defaults to the former, in default abs mode,
the latter.  Also, segment overrides (note difference from NASM below) are
abs regardless of mode, unless explicitly overridden with rel:
[fs:label] is always abs
[rel fs:label] is always rel

However, we have a number of differences from NASM in this handling due to
what I feel to be yasm's more sane handling of [dword ...] and [qword ...].
In yasm, these set the displacement size, rather than the address size; the
latter is set using a a32/a64 prefix.  I feel this is more sane as in 64-bit
mode the two can be different in the MovOffs (A0/A1 mov *ax) case.

Also, yasm disables default-rel mode if any segment register is used, not
just FS or GS as NASM currently does.

See modules/arch/x86/tests/riprel1.asm and
modules/arch/x86/tests/riprel2.asm for examples, as well as my recent
posting to the nasm-devel mailing list on SF.

svn path=/trunk/yasm/; revision=1963

Support "oword", "do", and "reso" as aliases for "dqword", "ddq", and
"resdq" respectively, for compatibility with NASM (sigh).

svn path=/trunk/yasm/; revision=1962

* Added code to the cpp module to pass include directories to the cpp program.
* Marked a string for gettext.
* Fixed a comment error.

svn path=/branches/multiarch/; revision=1961

Make Python messages a little less threatening.

Suggested by: Brian Gladman

svn path=/trunk/yasm/; revision=1960

Remove unused variable.

svn path=/trunk/yasm/; revision=1959

Fix VC++ build order dependencies.
Patch by: mu@

svn path=/trunk/yasm/; revision=1958

Ensure Python is available before trying to run gen_x86_insn.py.
Use registry key search to avoid version/location dependency.

Noticed by: Brian Gladman  <brg@gladman.plus.com>

svn path=/trunk/yasm/; revision=1957

Include ctype.h into files that now use tolower().

svn path=/trunk/yasm/; revision=1956

Make CPU feature flags and registers case insensitive again.
This was accidentally removed in [1929].
Add test case for these so it doesn't happen again.

svn path=/trunk/yasm/; revision=1955

Add support for IEEE-754r "half precision" (16-bit) float format.
This format is used by SSE5.
Update minor tests; more extensive tests will be added soon.

svn path=/trunk/yasm/; revision=1954

Add SSE5 (new AMD SSE) instructions support.

svn path=/trunk/yasm/; revision=1953

Fix #114: Incorrect ELF32 ..gotpc address calculation.
Reported by: Loren Merritt
Fix by: mu@

We already had a testcase for this, but it had an incorrect "golden" result.

svn path=/trunk/yasm/; revision=1952

Finish cleanup made in [1948].

svn path=/trunk/yasm/; revision=1951

Switch x86 operand storage from manual bitfields to C structure bitfields.

svn path=/trunk/yasm/; revision=1950

Change modifiers from a prioritized shifted sequence into an ordered array.
Move GAS suffixes to a separate field in x86_insn_info rather than
having them embedded in the modifier field.

svn path=/trunk/yasm/; revision=1949

Now that part of the build uses just Python, break apart the Python
and Pyrex (only required for bindings) checks.

svn path=/trunk/yasm/; revision=1948

Add Id tag.

svn path=/trunk/yasm/; revision=1947

Now that we have more cpu feature bits, properly document SSE4a as such.
Also correct name of k8 chip (clawhammer) and add venice, k10 processors.

svn path=/trunk/yasm/; revision=1946

Restructure x86 CPU handling to allow for more than 30 CPU feature flags.

svn path=/trunk/yasm/; revision=1945

Run gen_x86_insn.py from vc and vc8 builds.
Users who build out of SVN will need to install Python, but this is painless even for
Windows users
(go to http://www.python.org/download/ and download and install the appropriate MSI)

Delete generated files from SVN; these are massive and annoying to keep updated
(massive diffs).

svn path=/trunk/yasm/; revision=1944

Shrink the size of the x86_insn_info structure, particularly on 64-bit
systems, by combining operand lists into a single array (and trying to find
overlaps where possible).  This saves about 4K even on a 32-bit system.

Also shrink the generated gperf code by outputting the number of info
structures directly rather than using NELEMS().

svn path=/trunk/yasm/; revision=1943

Now that genperf takes an output filename, change informational outputs
to stdout instead of stderr.

svn path=/trunk/yasm/; revision=1942

Added dependency generation to cpp module.

svn path=/branches/multiarch/; revision=1941

Delayed destruction of arguments list until cpp_preproc_destroy() in cpp module.

svn path=/branches/multiarch/; revision=1940

Change genperf to take input and output filenames rather than outputting to
standard output.  This makes for better error handling behavior with make
(redirecting the standard output could leave empty files behind on error).

svn path=/trunk/yasm/; revision=1939

Check in generated files from the Python script added in [1937].

While I prefer not to have generated files in the source repository,
do this for now in the interest of sanity on the Windows side (to allow
building directly from a SVN checkout).

An alternative might be to require Python on Windows when building from
SVN.  If at some point we decide to go that route, it will be easy enough
to remove these files and add the necessary bits to Mkfiles/vc and
Mkfiles/vc8.

svn path=/trunk/yasm/; revision=1938

Change x86 instruction tables to be automatically generated.
This combines the C and perfect hash tables into a single source file,
and allows for easier future changes to the source-level structures.

The Python-built files are included in the distribution so that Python
is not added as a dependency.

The generated code has been verified equal against the old tables,
excepting a number of bugfixes.

Most of the bugs fixed are in the CPU field, plus a few GAS suffix fixes.

svn path=/trunk/yasm/; revision=1937

Fixed missing semicolon in file.h due to mistake when committing r1935.

svn path=/branches/multiarch/; revision=1936

Changed gas parser to only pass the first cpp line marker onto the debugging module.

svn path=/branches/multiarch/; revision=1935

Added yasm_get_include_dir() function.

svn path=/branches/multiarch/; revision=1934

Re-enable lc3b in flat Mkfiles.

svn path=/trunk/yasm/; revision=1933

Windows build fixes:
* modules.vcproj: Add x86cpu.c, x86regtmod.c, and lc3b arch files to fix build.
* x85geninsn.c: Clean up a couple of unused variables.
* genperf.c: Use sprintf instead of snprintf; convert filename backslashes to slashes.

svn path=/trunk/yasm/; revision=1932

Fix a couple of Doxygen nits.

svn path=/trunk/yasm/; revision=1931

Bring Mkfiles up to date with [1929].

svn path=/trunk/yasm/; revision=1930

Break apart perfect hash lookup generation and x86 arch-specific
instruction handling.

Use the GNU gperf file format, but continue to use our custom minimal
perfect hash generator.

svn path=/trunk/yasm/; revision=1929

Unbreak distcheck in lc3b tests.

svn path=/trunk/yasm/; revision=1928

Unbreak distcheck when Python is available by pulling in bitvect.h.

svn path=/trunk/yasm/; revision=1927

Added code to gas parser to handle line markers produced by cpp.

svn path=/branches/multiarch/; revision=1926

* Marked message strings so gettext can find them.
* Updated POTFILES.in

svn path=/branches/multiarch/; revision=1925

Tiny documentation fix for recent changes in the preprocessor create() inteface.

svn path=/branches/multiarch/; revision=1924

Removed FILE* argument from preprocessor create() interface. The preprocessor now opens the input file itself.

svn path=/branches/multiarch/; revision=1923

Removed FILE* argument from parser interface. The FILE* given was simply stored and never used.

svn path=/branches/multiarch/; revision=1922

Changed cpp module to destroy the argument list and free the memory it uses.

svn path=/branches/multiarch/; revision=1921

Modified cpp module to read directly from the preprocessor using a pipe, rather than storing the output in a temporary file.

svn path=/branches/multiarch/; revision=1920

Simplified cpp module, re-structuring much of the code and improving comments.

svn path=/branches/multiarch/; revision=1919

Fixed yasm frontend to call the correct wrappers (yasm_preproc_create and yasm_arch_create) rather than directly calling members of the preproc and arch modules.

svn path=/branches/multiarch/; revision=1918

Cleaned up cpp_invoke() function and removed call to asprintf().

svn path=/branches/multiarch/; revision=1917

Initial version of cpp module (on multiarch branch).

svn path=/branches/multiarch/; revision=1916

Merge [1912], [1913], [1914] into multiarch branch.

svn path=/branches/multiarch/; revision=1915

Unbitrot lc3b architecture.
Requested by: Paul Barker <paulbarker@mailsnare.net>

svn path=/trunk/yasm/; revision=1914

Set value->sign appropriately instead of ineffective passing of -1 to
output_value().

svn path=/trunk/yasm/; revision=1913

Fix warning documentation to match behavior of yasm_value_output_basic().

svn path=/trunk/yasm/; revision=1912

GAS parser: Push down directive lookup to parser to simplify tokenizer.

svn path=/trunk/yasm/; revision=1910

Add support for the following AMD instructions added in their July 2007
documentation update:
 - LZCNT
 - POPCNT
 - EXTRQ
 - INSERTQ
 - MOVNTSD
 - MOVNTSS

This required some new tricks in the x86 code, as EXTRQ and INSERTQ have
two imm8 parameters (the first one of which goes into the EA field), and
INSERTQ has a *4* parameter version (xmm1, xmm2, imm8, imm8).  Instead of
globally making the structures 4 wide, we just special-case INSERTQ.

svn path=/trunk/yasm/; revision=1909

Update yasm.rules so that it's compatible with the Intel compiler.

Contributed by: Brian Gladman <brg@gladman.plus.com>

svn path=/trunk/yasm/; revision=1908

Fix #112: Use yasm__strcasecmp instead of strcasecmp.

svn path=/trunk/yasm/; revision=1907

Fix typo in VC7 modules.vcproj.

Reported by: Stefan Sellmer <stefansel@hotmail.de>

svn path=/trunk/yasm/; revision=1906

HAMT: Update stored key when building tree downwards from identical keys.
Not doing this could cause us to lose an entry if the tree is deep enough
that we need to rehash the keys as we're moving downward.

Reported by: Stefan Sellmer <stefansel@hotmail.de>

svn path=/trunk/yasm/; revision=1905

Fix #111: Correctly #define HAVE__STRICMP for vc and vc8.

Reported by: Brian Gladman

svn path=/trunk/yasm/; revision=1904

Fix two bugs in HAMT:
 - HAMT_search() wasn't doing a full string comparison on the key before
   returning success.
 - HAMT_insert()'s check for the above was always doing a case-sensitive
   check; fixed to use case-insensitive when the HAMT is supposed to be
   case-insensitive (and likewise for HAMT_search).

svn path=/trunk/yasm/; revision=1903

Add command line option aliases for -d (to -D) and -u (to -U) for
compatibility with NASM command line.

Requested by: Mike Frysinger <vapier@gentoo.org>

svn path=/trunk/yasm/; revision=1902

Use intnum_tobv() in a couple more places.

svn path=/trunk/yasm/; revision=1901

Change intnum so it stores long instead of unsigned long; this allows
intnum to not allocate bitvectors for "most" negative numbers.

We pay a bit more in conversion, but save big in terms of memory and
malloc/free calls
(e.g. ~10,000 allocations and ~250K bytes for elf-x86id.asm test).

svn path=/trunk/yasm/; revision=1900

Add support for second parameter (fill value) to .org directive in GAS
parser.

Add testcase for both local labels and .org fill.

Noticed by: Jung Lee <moorang@gmail.com>
Testcase from: Xiaoming Mo <xiaoming.mo@skelix.org>

svn path=/trunk/yasm/; revision=1899

Add support for GAS local labels (1:, 1f, 1b).

Noticed by: Jung Lee <moorang@gmail.com>

svn path=/trunk/yasm/; revision=1898

Doxygen documentation fixes.

svn path=/trunk/yasm/; revision=1897

Don't use an inner structure for line mappings.
Fix a nit in yasm_linemap_poke() for the case when set() has not been
called before calling this function; the prior behavior could result
in incorrect line numbers due to not properly adjusting the new line
number.

svn path=/trunk/yasm/; revision=1896

Merge expr-int.h into expr.h, removing YASM_EXPR_INTERNAL in the process.

svn path=/trunk/yasm/; revision=1895

Merge bc-int.h into bytecode.h, removing YASM_BC_INTERNAL in the process.

svn path=/trunk/yasm/; revision=1894

Remove YASM_LIB_INTERNAL.  It never really gained us that much in terms of
visibility savings, as basically everything defined it.

svn path=/trunk/yasm/; revision=1893

Clean up a number of obsolete autoconf-detected standard C things.

svn path=/trunk/yasm/; revision=1892

Bring Mkfiles up-to-date with [1889].

svn path=/trunk/yasm/; revision=1891

Bring POTFILES.in up to date.

svn path=/trunk/yasm/; revision=1890

Change handling of frontend (mnenomic) instructions to make it easier to
customize on the arch side of things.  Instead of passing around an
arch_data[4] for instructions, now the arch can extend the structure itself
to add additional information in any format it likes.

svn path=/trunk/yasm/; revision=1889

Properly mark yasm_arch->create() error parameter as an output param.

svn path=/trunk/yasm/; revision=1888

Update splint script.

svn path=/trunk/yasm/; revision=1887

Optimize negating a simple intnum.

svn path=/trunk/yasm/; revision=1886

Fix buglet in handling of SEG of SEG:OFF.  We were deleting the term at
the wrong level.  As we weren't changing numterms before either, this
really could have no effect other than not freeing the memory immediately
(it would be freed later).

svn path=/trunk/yasm/; revision=1885

Fix default filename buffer overflow.
Note: this is not a security issue.

Noticed by: Mike Frysinger <vapier@gentoo.org>

svn path=/trunk/yasm/; revision=1884

Remove errant else.  This should not have had any serious effects, as
combining IP-relative and shifts is very unusual (and probably not possible).

svn path=/trunk/yasm/; revision=1883

Fix bin objfmt handling of cross-section RIP-relative values; also clean
up absolute value handling.

svn path=/trunk/yasm/; revision=1878

Make sure objfmt_coff->win64 gets set to 0 in win32 mode.

svn path=/trunk/yasm/; revision=1873

Fix uninitialized variable, memory leak.

svn path=/trunk/yasm/; revision=1872

Correct CPU definitions for Prescott, Conroe, Penryn, and Nehalem.
All are 64-bit capable and thus should set CPU_Hammer; Prescott
was mistakingly also setting AMD features such as 3DNow.

svn path=/trunk/yasm/; revision=1870

Don't try to yasm_expr_copy(NULL).

Found by: zzuf

svn path=/trunk/yasm/; revision=1867

Fix use-after-free in linemap_poke.  The first yasm_linemap_set call can
realloc linemap->map->vector, invalidating the mapping pointer.

Found by: zzuf+valgrind

svn path=/trunk/yasm/; revision=1866

Fix a few bugs in new directive handling.

Found by: zzuf

svn path=/trunk/yasm/; revision=1865

Fix typo in filename reference in [1853].

svn path=/trunk/yasm/; revision=1854

Fix #102: Permit non-standard macho section names.

Two forms are legal ({} are replaceables):
SECTION {segname} {sectname}
SECTION {sectname} segname={segname}
Also,
SECTION {sectname}
where sectname is unrecognized is also legal, defaults segname to __TEXT,
and generates a warning.

Contributed by: bird-yasm@anduin.net

svn path=/trunk/yasm/; revision=1852

Clean up directive handling.  This standardizes error/warning messages and
makes value/parameters more well-defined and flexible enough to handle
string parameters.  Value/parameters would now be better called name/values,
but avoid changing the name for now.

svn path=/trunk/yasm/; revision=1851

Support .set in GAS parser.

Contributed by: Sebastian D'Alessandro <sejawoya@yahoo.com.ar>

svn path=/trunk/yasm/; revision=1850

Fix issue with [1843]; we can't use strlen() here as we can be given
an unterminated input string.

svn path=/trunk/yasm/; revision=1849

Fix yasm__xstrdup() for the case when the destination is larger than the
source.

svn path=/trunk/yasm/; revision=1843

Move absolute section handling into NASM parser, removing all traces of it
from libyasm core.  Now absolute sections are tracked locally to the parser
and the parser generates EQUs directly for labels in absolute sections.

Fixes #106 and #103.

svn path=/trunk/yasm/; revision=1842

Updated testcase result to match [1840] missed in that commit.

svn path=/trunk/yasm/; revision=1841

Fix handling of SVM (AMD Pacifica) instructions that take an implicit
rax/eax/ax operand.  This operand actually selects the address size, so
make it a memory operand instead of a register operand (GAS follows this
approach as well).  Enable SVM instructions in non-64-bit mode as well.

Now the following opcodes work as intended:
 invlpga [rax/eax/ax], ecx
 skinit [eax]
 vmload/vmrun/vmsave [rax/eax/ax]

Noticed by: arkon@ragestorm.net
MFC after: 2 days

svn path=/trunk/yasm/; revision=1840

Clean up expect_() in both parsers.  In the nasm parser we were passing a
raw string as a printf string which could have resulted in a random memory
access.

svn path=/trunk/yasm/; revision=1839

Fix #107: Float input "1.000000" hit an edge case in the code that caused
the rounding increment at the end of float conversion to wrap the mantissa
from all 1's to 0, resulting in an incorrect result.

svn path=/trunk/yasm/; revision=1836

Fix handling of SSE4 crc opcodes with 64-bit register operands.
Noticed by: arkon@ragestorm.net

Fix bug relating to recognizing crc32 rax, bh as an error: the opersize=64
changing into REX prefix was happening too late to be caught as an error.
Move this logic from tobytes()/len() functions into finalize(), with proper
prefix handling.

MFC after: 2 days

svn path=/trunk/yasm/; revision=1835