1 ; RUN: llc < %s -mtriple=x86_64-apple-darwin -mcpu=core-avx2 -mattr=avx2,+fma -fp-contract=fast | FileCheck %s
2 ; RUN: llc < %s -mtriple=x86_64-unknown-unknown -mcpu=bdver2 -mattr=-fma4 -fp-contract=fast | FileCheck %s
3 ; RUN: llc < %s -mtriple=x86_64-unknown-unknown -mcpu=bdver1 -fp-contract=fast | FileCheck %s --check-prefix=CHECK_FMA4
5 ; CHECK: test_x86_fmadd_ps
6 ; CHECK: vfmadd213ps %xmm2, %xmm1, %xmm0
8 ; CHECK_FMA4: test_x86_fmadd_ps
9 ; CHECK_FMA4: vfmaddps %xmm2, %xmm1, %xmm0, %xmm0
11 define <4 x float> @test_x86_fmadd_ps(<4 x float> %a0, <4 x float> %a1, <4 x float> %a2) {
12 %x = fmul <4 x float> %a0, %a1
13 %res = fadd <4 x float> %x, %a2
17 ; CHECK: test_x86_fmsub_ps
18 ; CHECK: fmsub213ps %xmm2, %xmm1, %xmm0
20 ; CHECK_FMA4: test_x86_fmsub_ps
21 ; CHECK_FMA4: vfmsubps %xmm2, %xmm1, %xmm0, %xmm0
23 define <4 x float> @test_x86_fmsub_ps(<4 x float> %a0, <4 x float> %a1, <4 x float> %a2) {
24 %x = fmul <4 x float> %a0, %a1
25 %res = fsub <4 x float> %x, %a2
29 ; CHECK: test_x86_fnmadd_ps
30 ; CHECK: fnmadd213ps %xmm2, %xmm1, %xmm0
32 ; CHECK_FMA4: test_x86_fnmadd_ps
33 ; CHECK_FMA4: vfnmaddps %xmm2, %xmm1, %xmm0, %xmm0
35 define <4 x float> @test_x86_fnmadd_ps(<4 x float> %a0, <4 x float> %a1, <4 x float> %a2) {
36 %x = fmul <4 x float> %a0, %a1
37 %res = fsub <4 x float> %a2, %x
41 ; CHECK: test_x86_fnmsub_ps
42 ; CHECK: fnmsub213ps %xmm2, %xmm1, %xmm0
44 ; CHECK_FMA4: test_x86_fnmsub_ps
45 ; CHECK_FMA4: fnmsubps %xmm2, %xmm1, %xmm0, %xmm0
47 define <4 x float> @test_x86_fnmsub_ps(<4 x float> %a0, <4 x float> %a1, <4 x float> %a2) {
48 %x = fmul <4 x float> %a0, %a1
49 %y = fsub <4 x float> <float -0.000000e+00, float -0.000000e+00, float -0.000000e+00, float -0.000000e+00>, %x
50 %res = fsub <4 x float> %y, %a2
54 ; CHECK: test_x86_fmadd_ps_y
55 ; CHECK: vfmadd213ps %ymm2, %ymm1, %ymm0
57 ; CHECK_FMA4: test_x86_fmadd_ps_y
58 ; CHECK_FMA4: vfmaddps %ymm2, %ymm1, %ymm0, %ymm0
60 define <8 x float> @test_x86_fmadd_ps_y(<8 x float> %a0, <8 x float> %a1, <8 x float> %a2) {
61 %x = fmul <8 x float> %a0, %a1
62 %res = fadd <8 x float> %x, %a2
66 ; CHECK: test_x86_fmsub_ps_y
67 ; CHECK: vfmsub213ps %ymm2, %ymm1, %ymm0
69 ; CHECK_FMA4: test_x86_fmsub_ps_y
70 ; CHECK_FMA4: vfmsubps %ymm2, %ymm1, %ymm0, %ymm0
72 define <8 x float> @test_x86_fmsub_ps_y(<8 x float> %a0, <8 x float> %a1, <8 x float> %a2) {
73 %x = fmul <8 x float> %a0, %a1
74 %res = fsub <8 x float> %x, %a2
78 ; CHECK: test_x86_fnmadd_ps_y
79 ; CHECK: vfnmadd213ps %ymm2, %ymm1, %ymm0
81 ; CHECK_FMA4: test_x86_fnmadd_ps_y
82 ; CHECK_FMA4: vfnmaddps %ymm2, %ymm1, %ymm0, %ymm0
84 define <8 x float> @test_x86_fnmadd_ps_y(<8 x float> %a0, <8 x float> %a1, <8 x float> %a2) {
85 %x = fmul <8 x float> %a0, %a1
86 %res = fsub <8 x float> %a2, %x
90 ; CHECK: test_x86_fnmsub_ps_y
91 ; CHECK: vfnmsub213ps %ymm2, %ymm1, %ymm0
93 define <8 x float> @test_x86_fnmsub_ps_y(<8 x float> %a0, <8 x float> %a1, <8 x float> %a2) {
94 %x = fmul <8 x float> %a0, %a1
95 %y = fsub <8 x float> <float -0.000000e+00, float -0.000000e+00, float -0.000000e+00, float -0.000000e+00, float -0.000000e+00, float -0.000000e+00, float -0.000000e+00, float -0.000000e+00>, %x
96 %res = fsub <8 x float> %y, %a2
100 ; CHECK: test_x86_fmadd_pd_y
101 ; CHECK: vfmadd213pd %ymm2, %ymm1, %ymm0
103 ; CHECK_FMA4: test_x86_fmadd_pd_y
104 ; CHECK_FMA4: vfmaddpd %ymm2, %ymm1, %ymm0, %ymm0
106 define <4 x double> @test_x86_fmadd_pd_y(<4 x double> %a0, <4 x double> %a1, <4 x double> %a2) {
107 %x = fmul <4 x double> %a0, %a1
108 %res = fadd <4 x double> %x, %a2
109 ret <4 x double> %res
112 ; CHECK: test_x86_fmsub_pd_y
113 ; CHECK: vfmsub213pd %ymm2, %ymm1, %ymm0
115 ; CHECK_FMA4: test_x86_fmsub_pd_y
116 ; CHECK_FMA4: vfmsubpd %ymm2, %ymm1, %ymm0, %ymm0
118 define <4 x double> @test_x86_fmsub_pd_y(<4 x double> %a0, <4 x double> %a1, <4 x double> %a2) {
119 %x = fmul <4 x double> %a0, %a1
120 %res = fsub <4 x double> %x, %a2
121 ret <4 x double> %res
124 ; CHECK: test_x86_fmsub_pd
125 ; CHECK: vfmsub213pd %xmm2, %xmm1, %xmm0
127 ; CHECK_FMA4: test_x86_fmsub_pd
128 ; CHECK_FMA4: vfmsubpd %xmm2, %xmm1, %xmm0, %xmm0
130 define <2 x double> @test_x86_fmsub_pd(<2 x double> %a0, <2 x double> %a1, <2 x double> %a2) {
131 %x = fmul <2 x double> %a0, %a1
132 %res = fsub <2 x double> %x, %a2
133 ret <2 x double> %res
136 ; CHECK: test_x86_fnmadd_ss
137 ; CHECK: vfnmadd213ss %xmm2, %xmm1, %xmm0
139 ; CHECK_FMA4: test_x86_fnmadd_ss
140 ; CHECK_FMA4: vfnmaddss %xmm2, %xmm1, %xmm0, %xmm0
142 define float @test_x86_fnmadd_ss(float %a0, float %a1, float %a2) {
143 %x = fmul float %a0, %a1
144 %res = fsub float %a2, %x
148 ; CHECK: test_x86_fnmadd_sd
149 ; CHECK: vfnmadd213sd %xmm2, %xmm1, %xmm0
151 ; CHECK_FMA4: test_x86_fnmadd_sd
152 ; CHECK_FMA4: vfnmaddsd %xmm2, %xmm1, %xmm0, %xmm0
154 define double @test_x86_fnmadd_sd(double %a0, double %a1, double %a2) {
155 %x = fmul double %a0, %a1
156 %res = fsub double %a2, %x
160 ; CHECK: test_x86_fmsub_sd
161 ; CHECK: vfmsub213sd %xmm2, %xmm1, %xmm0
163 ; CHECK_FMA4: test_x86_fmsub_sd
164 ; CHECK_FMA4: vfmsubsd %xmm2, %xmm1, %xmm0, %xmm0
166 define double @test_x86_fmsub_sd(double %a0, double %a1, double %a2) {
167 %x = fmul double %a0, %a1
168 %res = fsub double %x, %a2
172 ; CHECK: test_x86_fnmsub_ss
173 ; CHECK: vfnmsub213ss %xmm2, %xmm1, %xmm0
175 ; CHECK_FMA4: test_x86_fnmsub_ss
176 ; CHECK_FMA4: vfnmsubss %xmm2, %xmm1, %xmm0, %xmm0
178 define float @test_x86_fnmsub_ss(float %a0, float %a1, float %a2) {
179 %x = fsub float -0.000000e+00, %a0
180 %y = fmul float %x, %a1
181 %res = fsub float %y, %a2
185 ; CHECK: test_x86_fmadd_ps_load
186 ; CHECK: vmovaps (%rdi), %xmm2
187 ; CHECK: vfmadd213ps %xmm1, %xmm0, %xmm2
189 ; CHECK_FMA4: test_x86_fmadd_ps_load
190 ; CHECK_FMA4: vfmaddps %xmm1, (%rdi), %xmm0, %xmm0
192 define <4 x float> @test_x86_fmadd_ps_load(<4 x float>* %a0, <4 x float> %a1, <4 x float> %a2) {
193 %x = load <4 x float>* %a0
194 %y = fmul <4 x float> %x, %a1
195 %res = fadd <4 x float> %y, %a2
199 ; CHECK: test_x86_fmsub_ps_load
200 ; CHECK: vmovaps (%rdi), %xmm2
201 ; CHECK: fmsub213ps %xmm1, %xmm0, %xmm2
203 ; CHECK_FMA4: test_x86_fmsub_ps_load
204 ; CHECK_FMA4: vfmsubps %xmm1, (%rdi), %xmm0, %xmm0
206 define <4 x float> @test_x86_fmsub_ps_load(<4 x float>* %a0, <4 x float> %a1, <4 x float> %a2) {
207 %x = load <4 x float>* %a0
208 %y = fmul <4 x float> %x, %a1
209 %res = fsub <4 x float> %y, %a2