llvm-test-suite: Add a rule to run pnacl-finalize before translating.

BUG=http://code.google.com/p/nativeclient/issues/detail?id=3348

Review URL: https://codereview.chromium.org/13816002

Revert "llvm-test-suite: set a higher timeout for almabench."

This reverts commit 5fbda4d1852fccd580cddf7cca211e1546453748.

The global override takes priority over this local override.

BUG=none

Review URL: https://codereview.chromium.org/11230035

llvm-test-suite: set a higher timeout for almabench.

Sometimes it finishes within bounds, and sometimes not (on ARM qemu).
Currently we expect it to not finish, so we sometimes have
"unexpected passes" when it does finish.

BUG= red bots

Review URL: https://codereview.chromium.org/11232010

Add TCLSH Make variable to fix breakage from upstream r159308
They removed the autoconf stuff to find it, but the testsuite
repo still expects it to work.

BUG=broken LLVM testsuite bots
TEST=llvm testsuite bots

Review URL: https://chromiumcodereview.appspot.com/10837351

Add codereview.settings for Rietveld use

Testsuite: Redirect nexe stdout/stderr directly to output file.

This, along with a change to run.py, will fix several benchmarks
which depend on the relative ordering of stdout/stderr output.

Change-Id: I3cf01a23a626471a4cc0e3692d424c8f30a0eaba

Fix some more common storage issues with lvm-test-suit

Change-Id: I3819229b19e0d6e6e7c6e056c36e410cec487db9

Fix a few of the llvm-test-suite problems.

All of the fixed ones compile now but some still cause runtime errors.

Change-Id: I3b4b0d04cd92cb68bfbbba0abee16e8b22bc7d4b

Merge "Convert a few tests to not use common storage"

Convert a few tests to not use common storage

mostly adding extra "extern" keywords and moving definitions around

Change-Id: I7289e7372ae21c218b4f3303e70af6527690f0a9

Revert "Increase runtime limit of spirit"

This reverts commit d423b686b1756a572fb3d4ac9ac31cb29a7a90c7.

Instead of doing it per-benchmark, we will override TIMEILIMIT
on the command line (several arm benchmarks are also timing out).
This will also be a change in the nacl repo instead of here.

Increase runtime limit of spirit

Change-Id: Iac2fbaeac4241b28fa4eb06b8106eb6034571702

Merge remote-tracking branch 'origin/upstream/master' into master

Change-Id: I0734525fcdb85a4c9dfd992134c0f64afb4a018c

Fix compile time output in llvm testsuite

Change-Id: I162ba95b54af1fa58b8bbdb0884a0f8b8c0dc2dd

make api local for testing.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@147875 91177308-0d34-0410-b5e6-96231b3b80d8

Added test for atomic property of c++ objects
with non-trivial copy/assignment methods using the
new api. // rdar://6137845

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@147873 91177308-0d34-0410-b5e6-96231b3b80d8

Fix the test case for // rdar://6137845

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@147822 91177308-0d34-0410-b5e6-96231b3b80d8

Bump 464.h264ref run-time limit.  This appears to have failed on our ARMv7 -O0
nightly tester due to exceeding this cap.
rdar://10650337

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@147611 91177308-0d34-0410-b5e6-96231b3b80d8

Add $(LIBS) to the single source build as well.

Regenerate.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@146731 91177308-0d34-0410-b5e6-96231b3b80d8

Use LLVM_SRC to detect whether we have a built clang.

This should fix PR11047.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@146730 91177308-0d34-0410-b5e6-96231b3b80d8

Test for r146414 checked in clang.
This is for // rdar://10513599

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@146415 91177308-0d34-0410-b5e6-96231b3b80d8

Add pnacl-specific Makefile and report template left out of last patch

Change-Id: I305d7b1c1b9d14a55f1f7dc68cc04d8c87f899ba

Basic support for building pexes, translating and running them
PNACL_ARCH, PNACL_BIN, and PNACL_RUN are provided at the command line by a
driver script (in the pnacl repo)
Change-Id: I28ef1374cdab02ff7b07340d448d1af75403c2fe

On Debian testing and recent Ubuntu systems llvm-ld fails to find libc,
causing every test in the nightly testsuite to fail.  But llvm-ld is only
using libc to work out which symbols to internalize, not for linking with
it.  How can libc effect which symbols are internalized?  I can see two
possibilities: either libc makes use of a function defined in the bitcode
(which it clearly doesn't) or a weak function occurs both in the bitcode
and in libc (in which case using the bitcode's copy should be OK).  Thus
there doesn't seem to any point in looking at libc and comparable system
libraries (eg: libstdc++) when internalizing, and this is confirmed by my
testing: not passing -lc or $(LIBS) when invoking llvm-ld doesn't cause
any failures.  So a simple fix for the Debian issue would be simply not
to pass them to llvm-ld.  But then the question arises: why use llvm-ld
at all rather than "opt -std-link-opts"?  This patch goes all the way
and drops llvm-ld in favour of "opt -std-link-opts".  It also removes
some apparently pointless Makefile rules, which I suspect exist because
llvm-ld produces two output files, X (a script) and X.bc (the bitcode).
With this llvm-ld is not used by the nightly testsuite at all.  It works
for me, but since I don't know the nightly testsuite infrastructure well
I may have broken something, so please review.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@143460 91177308-0d34-0410-b5e6-96231b3b80d8

In two cases where llvm-ld is being used as a simple bitcode linker
use llvm-link instead.  It's not clear where llvm-ld is going: if it
will be removed or turned into a real linker.  Whichever one it is
it seems pointless to use it for this.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@143456 91177308-0d34-0410-b5e6-96231b3b80d8

Errors here should be ignored, as they are already for all other
rules in this Makefile.  Otherwise the nightly test fails if clang
(or dragonegg) fails to compile some test, because this rule then
fails to convert the .ll output from clang (which doesn't exist
because clang failed) to .bc.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@142659 91177308-0d34-0410-b5e6-96231b3b80d8

Add report description for dbgopt.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@142362 91177308-0d34-0410-b5e6-96231b3b80d8

Fixed test. const reference properties do not
require copying to temporary.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@142190 91177308-0d34-0410-b5e6-96231b3b80d8

ToT is now for 3.1.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@142045 91177308-0d34-0410-b5e6-96231b3b80d8

Add FloatMM.c, a single precision version of RealMM.c

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@141710 91177308-0d34-0410-b5e6-96231b3b80d8

test-suite/LNTBased: Add an example of how to define a minimal LNTBased test.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@141421 91177308-0d34-0410-b5e6-96231b3b80d8

Get this compiling with gcc-4.6, which did some more header trimming.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@141175 91177308-0d34-0410-b5e6-96231b3b80d8

Err... 3.0svn

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@140371 91177308-0d34-0410-b5e6-96231b3b80d8

Miscelleous updates:

a) We're using 2.60.
b) It's llvm 2.9.
c) We no longer support systems old enough to not have standard c headers.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@140359 91177308-0d34-0410-b5e6-96231b3b80d8

EH testcase. This tests r140335.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@140336 91177308-0d34-0410-b5e6-96231b3b80d8

Add comment.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@140333 91177308-0d34-0410-b5e6-96231b3b80d8

Add a filter test to the nightly test suite.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@140286 91177308-0d34-0410-b5e6-96231b3b80d8

Migrate the rest of the compiler checking to the testsuite from the toplevel
llvm configure script.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@140219 91177308-0d34-0410-b5e6-96231b3b80d8

Migrate llvm-gcc handling to the test-suite project where it belongs.

(Part #2 will be committed in llvm.)

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@140215 91177308-0d34-0410-b5e6-96231b3b80d8

Reenable inlined_cleanup on Darwin-ARM. This seems to be passing now.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@139749 91177308-0d34-0410-b5e6-96231b3b80d8

Add some EH cleanup tests.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@139737 91177308-0d34-0410-b5e6-96231b3b80d8

Add some simple throw and rethrow exception handling tests.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@139730 91177308-0d34-0410-b5e6-96231b3b80d8

Silence warnings about "control may reach end of non-void function"

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@138828 91177308-0d34-0410-b5e6-96231b3b80d8

llc "-f" option is long gone!

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@138755 91177308-0d34-0410-b5e6-96231b3b80d8

The siod and consumer-lame tests appear to fail when using dragonegg,
because their output does not match the output when they are built
with gcc.  But in fact it is gcc that is miscompiling these tests,
so force comparison with the reference output to avoid these false
negatives.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@138650 91177308-0d34-0410-b5e6-96231b3b80d8

Make 176.gcc work on Darwin platforms with a lower default stack size.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@138480 91177308-0d34-0410-b5e6-96231b3b80d8

176.gcc was disabled with Clang for a use of lvalue casts, but it is easy to
patch yourself or get updated source from SPEC. I updated the Apple copy.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@138322 91177308-0d34-0410-b5e6-96231b3b80d8

Fix 403.gcc so it works remotely.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@137577 91177308-0d34-0410-b5e6-96231b3b80d8

A useful test for //rdar://9778214

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@135347 91177308-0d34-0410-b5e6-96231b3b80d8

reenable oggenc, lets see if it works now, it works for me.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@134970 91177308-0d34-0410-b5e6-96231b3b80d8

temporarily disable oggenc to let the buildbots go green

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@134881 91177308-0d34-0410-b5e6-96231b3b80d8

Simplify.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@134564 91177308-0d34-0410-b5e6-96231b3b80d8

cleanup.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@134450 91177308-0d34-0410-b5e6-96231b3b80d8

Run ms_struct tests only on x86_64. They are target dependent.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@134243 91177308-0d34-0410-b5e6-96231b3b80d8

Add little test harness to measure and compare quality of linenumber information preserved by clang. It produces .lineinfo file, for example

.|int main() {
 |  int Array[100][200], i, j;
+|  double sum = 0.0;
 |
.|  for (i=0; i < 100; i+=2)
.|    for (j=0; j < 200; j++)
.|      Array[i][j] = 0;
-|  test_indvars(Array[0], Array);
 |
x|  for (i=0; i < 100; i+=2)
x|    for (j=0; j < 200; j++)
.|      sum += Array[i][j];
 |
.|  printf("Checksum = %.0lf\n", sum);
 |
-|  return 0;
.|}

Here,

. in first column indicates both clang and base compiler preserves line number information for this line.
+ in first column indicates only clang preserves line number information for this line.
- in first column indicates neigther clang nor base compiler preserves line number information for this line.
x in first column indicates clang does not preserve line number information for this line.

CC is base compiler and LCC is clang. OPTFLAGS controls the optimization level.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@133276 91177308-0d34-0410-b5e6-96231b3b80d8

GCC only implements #pragma ms_struct on Darwin, so don't try to test it
on other platforms.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@133058 91177308-0d34-0410-b5e6-96231b3b80d8

Not all targets have a signed plain char (implementation defined). Be explicit.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@131929 91177308-0d34-0410-b5e6-96231b3b80d8

Make these tests return a deterministic exit code.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@131535 91177308-0d34-0410-b5e6-96231b3b80d8

New test for packed ms_struct layout.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@131107 91177308-0d34-0410-b5e6-96231b3b80d8

A rather exhaustive test case for ms_struct attribute.
Passes both clang and llvm-gcc. // rdar://8823265

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@131105 91177308-0d34-0410-b5e6-96231b3b80d8

Test for packing of ms_struct bitfields.
// rdar://8823265

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@130852 91177308-0d34-0410-b5e6-96231b3b80d8

More unit tests for ms_struct and zero-length
bitfield alignment rules.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@130798 91177308-0d34-0410-b5e6-96231b3b80d8

Test related to rules for zero-length bitfields
in ms_struct structs. // rdar://8823265

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@130784 91177308-0d34-0410-b5e6-96231b3b80d8

build: Add support for an EXECUTION_ENVIRONMENT_OVERRIDES variable, which can
used to override various environment variables for test execution. Useful for
tweaking things like dyld library paths, for example.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@130578 91177308-0d34-0410-b5e6-96231b3b80d8

Executable test for clang's // rdar://9309454

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@130548 91177308-0d34-0410-b5e6-96231b3b80d8

Add missing ms_struct attribute to test.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@130512 91177308-0d34-0410-b5e6-96231b3b80d8

Excutable test case for use of ms_struct attribute
in clang. // rdar://8823265.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@130459 91177308-0d34-0410-b5e6-96231b3b80d8

Update to use timeit-target when running with --without-llvm.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@130143 91177308-0d34-0410-b5e6-96231b3b80d8

build: Add support for building a version of the 'timeit' tool which will run on
the target.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@130142 91177308-0d34-0410-b5e6-96231b3b80d8

build: Fix "make tools" to work even when a TEST=... option is set.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@130141 91177308-0d34-0410-b5e6-96231b3b80d8

RunSafely: Change to use 'sh -c' when running remotely (like we do on the
host). This is necessary if TIMEIT isn't a shell builtin.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@130140 91177308-0d34-0410-b5e6-96231b3b80d8

Fix test case for nonfragile-abi too (-arch i386).

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@130032 91177308-0d34-0410-b5e6-96231b3b80d8

Executable test for clang's // rdar:// 9072317

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@130020 91177308-0d34-0410-b5e6-96231b3b80d8

Add a test for member function pointer conversion to bool.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@129831 91177308-0d34-0410-b5e6-96231b3b80d8

Test case for 129634. <rdar://problem/8933028>

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@129821 91177308-0d34-0410-b5e6-96231b3b80d8

The build target should also build the llc-beta executables for TEST=nightly
ENABLE_LLCBETA=1.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@129702 91177308-0d34-0410-b5e6-96231b3b80d8

Test-suite makefile build target for LLCBETA. Some people still use it :)

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@129604 91177308-0d34-0410-b5e6-96231b3b80d8

test-suite: Bump timeout limit for Bullet a bit more.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@129586 91177308-0d34-0410-b5e6-96231b3b80d8

Add a "make build" target to the test-suite.

I use this as follows
make -j8 build TEST=simple ...
make TEST=simple ...

This is the only reasonable way I've come up with for manual
benchmarking. I'm checking in since others have asked for the feature.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@129530 91177308-0d34-0410-b5e6-96231b3b80d8

Proper whitespace removal.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@129529 91177308-0d34-0410-b5e6-96231b3b80d8

Oops. I used the wrong whitespace script for a Makefile!

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@129528 91177308-0d34-0410-b5e6-96231b3b80d8

whitespace

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@129526 91177308-0d34-0410-b5e6-96231b3b80d8

Add a trivial script to extract the times from *.report.txt files.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@128900 91177308-0d34-0410-b5e6-96231b3b80d8

Skip the property-reference-object test when using llvm-gcc.
It won't even compile with llvm-gcc and only works with clang.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@128460 91177308-0d34-0410-b5e6-96231b3b80d8

updated reference output file to match the convention.
// rdar://9070460

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@128438 91177308-0d34-0410-b5e6-96231b3b80d8

This is test for clang's // rdar://9070460.
I have modified the Makefile so test is skipped
for llvm-gcc (which does not fully support this feature).

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@128436 91177308-0d34-0410-b5e6-96231b3b80d8

Add report format for TEST=dbg

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@128424 91177308-0d34-0410-b5e6-96231b3b80d8

Tidy up TEST=dbg reports.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@128423 91177308-0d34-0410-b5e6-96231b3b80d8

Test case for 128412.  <rdar://problem/9186245>

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@128414 91177308-0d34-0410-b5e6-96231b3b80d8

This timeout was not enough on some machines.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@128270 91177308-0d34-0410-b5e6-96231b3b80d8

Increase the timeout in the hope of fixing PR9469.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@128083 91177308-0d34-0410-b5e6-96231b3b80d8

Commit of shame: Forgot a semicolon.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@126971 91177308-0d34-0410-b5e6-96231b3b80d8

Testcase for <rdar://problem/8824861>.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@126968 91177308-0d34-0410-b5e6-96231b3b80d8

Do not force -std=c99. clang will take it literally and reject c++ constructs.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@126908 91177308-0d34-0410-b5e6-96231b3b80d8

Check x86_64 also.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@126906 91177308-0d34-0410-b5e6-96231b3b80d8

Do not specify -std=c99 for c++ testcases.
o llvm-gcc issues a ignores it after issuing a warning.
o On the otherside, clang follows it by rejecting c++ constructs in the testcase.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@126390 91177308-0d34-0410-b5e6-96231b3b80d8

Really use clang instead of llvmgcc as the compiler.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@126340 91177308-0d34-0410-b5e6-96231b3b80d8

Adopt clang as the compiler.
Stay within 80 cols.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@126329 91177308-0d34-0410-b5e6-96231b3b80d8

test-suite/fpcmp: Finish turning FileUtilities.cpp into a C program.

git-svn-id: http://llvm.org/svn/llvm-project/test-suite/trunk@125586 91177308-0d34-0410-b5e6-96231b3b80d8