blob: 1beb53159379213220bacffc9f706f8c205b9075 [file] [log] [blame]
Daniel Dunbara5728872009-12-15 20:14:24 +00001// RUN: %clang_cc1 -DUSE_64 -triple x86_64-unknown-unknown -emit-llvm -o %t %s
2// RUN: %clang_cc1 -DUSE_ALL -triple x86_64-unknown-unknown -fsyntax-only -o %t %s
Daniel Dunbareb154252008-10-05 06:38:36 +00003
4#ifdef USE_ALL
5#define USE_3DNOW
6#define USE_64
7#define USE_SSE4
8#endif
9
10// 64-bit
11typedef char V8c __attribute__((vector_size(8 * sizeof(char))));
12typedef signed short V4s __attribute__((vector_size(8)));
13typedef signed int V2i __attribute__((vector_size(8)));
14typedef signed long long V1LLi __attribute__((vector_size(8)));
15
16typedef float V2f __attribute__((vector_size(8)));
17
18// 128-bit
19typedef char V16c __attribute__((vector_size(16)));
20typedef signed short V8s __attribute__((vector_size(16)));
21typedef signed int V4i __attribute__((vector_size(16)));
22typedef signed long long V2LLi __attribute__((vector_size(16)));
23
24typedef float V4f __attribute__((vector_size(16)));
25typedef double V2d __attribute__((vector_size(16)));
26
Bruno Cardoso Lopes5ce94622010-08-03 01:57:18 +000027// 256-bit
28typedef signed int V8i __attribute__((vector_size(32)));
29typedef signed long long V4LLi __attribute__((vector_size(32)));
30
31typedef double V4d __attribute__((vector_size(32)));
32typedef float V8f __attribute__((vector_size(32)));
33
Daniel Dunbareb154252008-10-05 06:38:36 +000034void f0() {
35 signed char tmp_c;
36// unsigned char tmp_Uc;
37 signed short tmp_s;
38#ifdef USE_ALL
39 unsigned short tmp_Us;
40#endif
41 signed int tmp_i;
42 unsigned int tmp_Ui;
43 signed long long tmp_LLi;
44// unsigned long long tmp_ULLi;
45 float tmp_f;
46 double tmp_d;
47
48 void* tmp_vp;
49 const void* tmp_vCp;
50 char* tmp_cp;
51 const char* tmp_cCp;
52 int* tmp_ip;
53 float* tmp_fp;
54 const float* tmp_fCp;
55 double* tmp_dp;
56 const double* tmp_dCp;
57
58#define imm_i 32
59#define imm_i_0_2 0
60#define imm_i_0_4 3
61#define imm_i_0_8 7
62#define imm_i_0_16 15
63 // Check this.
64#define imm_i_0_256 0
65
66 V2i* tmp_V2ip;
67 V1LLi* tmp_V1LLip;
68 V2LLi* tmp_V2LLip;
69
70 // 64-bit
71 V8c tmp_V8c;
72 V4s tmp_V4s;
73 V2i tmp_V2i;
74 V1LLi tmp_V1LLi;
75#ifdef USE_3DNOW
76 V2f tmp_V2f;
77#endif
78
79 // 128-bit
80 V16c tmp_V16c;
81 V8s tmp_V8s;
82 V4i tmp_V4i;
83 V2LLi tmp_V2LLi;
84 V4f tmp_V4f;
85 V2d tmp_V2d;
86
Bruno Cardoso Lopes5ce94622010-08-03 01:57:18 +000087 // 256-bit
88 V4d tmp_V4d;
89 V8f tmp_V8f;
90 V4LLi tmp_V4LLi;
91 V8i tmp_V8i;
92
Daniel Dunbareb154252008-10-05 06:38:36 +000093 tmp_i = __builtin_ia32_comieq(tmp_V4f, tmp_V4f);
94 tmp_i = __builtin_ia32_comilt(tmp_V4f, tmp_V4f);
95 tmp_i = __builtin_ia32_comile(tmp_V4f, tmp_V4f);
96 tmp_i = __builtin_ia32_comigt(tmp_V4f, tmp_V4f);
97 tmp_i = __builtin_ia32_comige(tmp_V4f, tmp_V4f);
98 tmp_i = __builtin_ia32_comineq(tmp_V4f, tmp_V4f);
99 tmp_i = __builtin_ia32_ucomieq(tmp_V4f, tmp_V4f);
100 tmp_i = __builtin_ia32_ucomilt(tmp_V4f, tmp_V4f);
101 tmp_i = __builtin_ia32_ucomile(tmp_V4f, tmp_V4f);
102 tmp_i = __builtin_ia32_ucomigt(tmp_V4f, tmp_V4f);
103 tmp_i = __builtin_ia32_ucomige(tmp_V4f, tmp_V4f);
104 tmp_i = __builtin_ia32_ucomineq(tmp_V4f, tmp_V4f);
105 tmp_i = __builtin_ia32_comisdeq(tmp_V2d, tmp_V2d);
106 tmp_i = __builtin_ia32_comisdlt(tmp_V2d, tmp_V2d);
107 tmp_i = __builtin_ia32_comisdle(tmp_V2d, tmp_V2d);
108 tmp_i = __builtin_ia32_comisdgt(tmp_V2d, tmp_V2d);
109 tmp_i = __builtin_ia32_comisdge(tmp_V2d, tmp_V2d);
110 tmp_i = __builtin_ia32_comisdneq(tmp_V2d, tmp_V2d);
111 tmp_i = __builtin_ia32_ucomisdeq(tmp_V2d, tmp_V2d);
112 tmp_i = __builtin_ia32_ucomisdlt(tmp_V2d, tmp_V2d);
113 tmp_i = __builtin_ia32_ucomisdle(tmp_V2d, tmp_V2d);
114 tmp_i = __builtin_ia32_ucomisdgt(tmp_V2d, tmp_V2d);
115 tmp_i = __builtin_ia32_ucomisdge(tmp_V2d, tmp_V2d);
116 tmp_i = __builtin_ia32_ucomisdneq(tmp_V2d, tmp_V2d);
Anders Carlsson79dcf5f2009-05-18 19:16:46 +0000117 tmp_V4f = __builtin_ia32_cmpps(tmp_V4f, tmp_V4f, 0);
118 tmp_V4f = __builtin_ia32_cmpps(tmp_V4f, tmp_V4f, 1);
119 tmp_V4f = __builtin_ia32_cmpps(tmp_V4f, tmp_V4f, 2);
120 tmp_V4f = __builtin_ia32_cmpps(tmp_V4f, tmp_V4f, 3);
121 tmp_V4f = __builtin_ia32_cmpps(tmp_V4f, tmp_V4f, 4);
122 tmp_V4f = __builtin_ia32_cmpps(tmp_V4f, tmp_V4f, 5);
123 tmp_V4f = __builtin_ia32_cmpps(tmp_V4f, tmp_V4f, 6);
124 tmp_V4f = __builtin_ia32_cmpps(tmp_V4f, tmp_V4f, 7);
125 tmp_V4f = __builtin_ia32_cmpss(tmp_V4f, tmp_V4f, 0);
126 tmp_V4f = __builtin_ia32_cmpss(tmp_V4f, tmp_V4f, 1);
127 tmp_V4f = __builtin_ia32_cmpss(tmp_V4f, tmp_V4f, 2);
128 tmp_V4f = __builtin_ia32_cmpss(tmp_V4f, tmp_V4f, 3);
129 tmp_V4f = __builtin_ia32_cmpss(tmp_V4f, tmp_V4f, 4);
130 tmp_V4f = __builtin_ia32_cmpss(tmp_V4f, tmp_V4f, 5);
131 tmp_V4f = __builtin_ia32_cmpss(tmp_V4f, tmp_V4f, 6);
132 tmp_V4f = __builtin_ia32_cmpss(tmp_V4f, tmp_V4f, 7);
Daniel Dunbareb154252008-10-05 06:38:36 +0000133 tmp_V4f = __builtin_ia32_minps(tmp_V4f, tmp_V4f);
134 tmp_V4f = __builtin_ia32_maxps(tmp_V4f, tmp_V4f);
135 tmp_V4f = __builtin_ia32_minss(tmp_V4f, tmp_V4f);
136 tmp_V4f = __builtin_ia32_maxss(tmp_V4f, tmp_V4f);
Daniel Dunbareb154252008-10-05 06:38:36 +0000137
Daniel Dunbareb154252008-10-05 06:38:36 +0000138 tmp_V8c = __builtin_ia32_paddsb(tmp_V8c, tmp_V8c);
139 tmp_V4s = __builtin_ia32_paddsw(tmp_V4s, tmp_V4s);
140 tmp_V8c = __builtin_ia32_psubsb(tmp_V8c, tmp_V8c);
141 tmp_V4s = __builtin_ia32_psubsw(tmp_V4s, tmp_V4s);
142 tmp_V8c = __builtin_ia32_paddusb(tmp_V8c, tmp_V8c);
143 tmp_V4s = __builtin_ia32_paddusw(tmp_V4s, tmp_V4s);
144 tmp_V8c = __builtin_ia32_psubusb(tmp_V8c, tmp_V8c);
145 tmp_V4s = __builtin_ia32_psubusw(tmp_V4s, tmp_V4s);
Daniel Dunbareb154252008-10-05 06:38:36 +0000146 tmp_V4s = __builtin_ia32_pmulhw(tmp_V4s, tmp_V4s);
147 tmp_V4s = __builtin_ia32_pmulhuw(tmp_V4s, tmp_V4s);
Daniel Dunbareb154252008-10-05 06:38:36 +0000148 tmp_V8c = __builtin_ia32_pavgb(tmp_V8c, tmp_V8c);
149 tmp_V4s = __builtin_ia32_pavgw(tmp_V4s, tmp_V4s);
150 tmp_V8c = __builtin_ia32_pcmpeqb(tmp_V8c, tmp_V8c);
151 tmp_V4s = __builtin_ia32_pcmpeqw(tmp_V4s, tmp_V4s);
152 tmp_V2i = __builtin_ia32_pcmpeqd(tmp_V2i, tmp_V2i);
153 tmp_V8c = __builtin_ia32_pcmpgtb(tmp_V8c, tmp_V8c);
154 tmp_V4s = __builtin_ia32_pcmpgtw(tmp_V4s, tmp_V4s);
155 tmp_V2i = __builtin_ia32_pcmpgtd(tmp_V2i, tmp_V2i);
156 tmp_V8c = __builtin_ia32_pmaxub(tmp_V8c, tmp_V8c);
157 tmp_V4s = __builtin_ia32_pmaxsw(tmp_V4s, tmp_V4s);
158 tmp_V8c = __builtin_ia32_pminub(tmp_V8c, tmp_V8c);
159 tmp_V4s = __builtin_ia32_pminsw(tmp_V4s, tmp_V4s);
Anders Carlsson79dcf5f2009-05-18 19:16:46 +0000160 tmp_V2d = __builtin_ia32_cmppd(tmp_V2d, tmp_V2d, 0);
161 tmp_V2d = __builtin_ia32_cmppd(tmp_V2d, tmp_V2d, 1);
162 tmp_V2d = __builtin_ia32_cmppd(tmp_V2d, tmp_V2d, 2);
163 tmp_V2d = __builtin_ia32_cmppd(tmp_V2d, tmp_V2d, 3);
164 tmp_V2d = __builtin_ia32_cmppd(tmp_V2d, tmp_V2d, 4);
165 tmp_V2d = __builtin_ia32_cmppd(tmp_V2d, tmp_V2d, 5);
166 tmp_V2d = __builtin_ia32_cmppd(tmp_V2d, tmp_V2d, 6);
167 tmp_V2d = __builtin_ia32_cmppd(tmp_V2d, tmp_V2d, 7);
168 tmp_V2d = __builtin_ia32_cmpsd(tmp_V2d, tmp_V2d, 0);
169 tmp_V2d = __builtin_ia32_cmpsd(tmp_V2d, tmp_V2d, 1);
170 tmp_V2d = __builtin_ia32_cmpsd(tmp_V2d, tmp_V2d, 2);
171 tmp_V2d = __builtin_ia32_cmpsd(tmp_V2d, tmp_V2d, 3);
172 tmp_V2d = __builtin_ia32_cmpsd(tmp_V2d, tmp_V2d, 4);
173 tmp_V2d = __builtin_ia32_cmpsd(tmp_V2d, tmp_V2d, 5);
174 tmp_V2d = __builtin_ia32_cmpsd(tmp_V2d, tmp_V2d, 6);
175 tmp_V2d = __builtin_ia32_cmpsd(tmp_V2d, tmp_V2d, 7);
Daniel Dunbareb154252008-10-05 06:38:36 +0000176 tmp_V2d = __builtin_ia32_minpd(tmp_V2d, tmp_V2d);
177 tmp_V2d = __builtin_ia32_maxpd(tmp_V2d, tmp_V2d);
178 tmp_V2d = __builtin_ia32_minsd(tmp_V2d, tmp_V2d);
179 tmp_V2d = __builtin_ia32_maxsd(tmp_V2d, tmp_V2d);
Daniel Dunbareb154252008-10-05 06:38:36 +0000180 tmp_V16c = __builtin_ia32_paddsb128(tmp_V16c, tmp_V16c);
181 tmp_V8s = __builtin_ia32_paddsw128(tmp_V8s, tmp_V8s);
182 tmp_V16c = __builtin_ia32_psubsb128(tmp_V16c, tmp_V16c);
183 tmp_V8s = __builtin_ia32_psubsw128(tmp_V8s, tmp_V8s);
184 tmp_V16c = __builtin_ia32_paddusb128(tmp_V16c, tmp_V16c);
185 tmp_V8s = __builtin_ia32_paddusw128(tmp_V8s, tmp_V8s);
186 tmp_V16c = __builtin_ia32_psubusb128(tmp_V16c, tmp_V16c);
187 tmp_V8s = __builtin_ia32_psubusw128(tmp_V8s, tmp_V8s);
Daniel Dunbareb154252008-10-05 06:38:36 +0000188 tmp_V8s = __builtin_ia32_pmulhw128(tmp_V8s, tmp_V8s);
Daniel Dunbareb154252008-10-05 06:38:36 +0000189 tmp_V16c = __builtin_ia32_pavgb128(tmp_V16c, tmp_V16c);
190 tmp_V8s = __builtin_ia32_pavgw128(tmp_V8s, tmp_V8s);
191 tmp_V16c = __builtin_ia32_pcmpeqb128(tmp_V16c, tmp_V16c);
192 tmp_V8s = __builtin_ia32_pcmpeqw128(tmp_V8s, tmp_V8s);
193 tmp_V4i = __builtin_ia32_pcmpeqd128(tmp_V4i, tmp_V4i);
194 tmp_V16c = __builtin_ia32_pcmpgtb128(tmp_V16c, tmp_V16c);
195 tmp_V8s = __builtin_ia32_pcmpgtw128(tmp_V8s, tmp_V8s);
196 tmp_V4i = __builtin_ia32_pcmpgtd128(tmp_V4i, tmp_V4i);
197 tmp_V16c = __builtin_ia32_pmaxub128(tmp_V16c, tmp_V16c);
198 tmp_V8s = __builtin_ia32_pmaxsw128(tmp_V8s, tmp_V8s);
199 tmp_V16c = __builtin_ia32_pminub128(tmp_V16c, tmp_V16c);
200 tmp_V8s = __builtin_ia32_pminsw128(tmp_V8s, tmp_V8s);
Daniel Dunbareb154252008-10-05 06:38:36 +0000201 tmp_V8s = __builtin_ia32_packsswb128(tmp_V8s, tmp_V8s);
202 tmp_V4i = __builtin_ia32_packssdw128(tmp_V4i, tmp_V4i);
203 tmp_V8s = __builtin_ia32_packuswb128(tmp_V8s, tmp_V8s);
204 tmp_V8s = __builtin_ia32_pmulhuw128(tmp_V8s, tmp_V8s);
205 tmp_V4f = __builtin_ia32_addsubps(tmp_V4f, tmp_V4f);
206 tmp_V2d = __builtin_ia32_addsubpd(tmp_V2d, tmp_V2d);
207 tmp_V4f = __builtin_ia32_haddps(tmp_V4f, tmp_V4f);
208 tmp_V2d = __builtin_ia32_haddpd(tmp_V2d, tmp_V2d);
209 tmp_V4f = __builtin_ia32_hsubps(tmp_V4f, tmp_V4f);
210 tmp_V2d = __builtin_ia32_hsubpd(tmp_V2d, tmp_V2d);
211 tmp_V8s = __builtin_ia32_phaddw128(tmp_V8s, tmp_V8s);
212 tmp_V4s = __builtin_ia32_phaddw(tmp_V4s, tmp_V4s);
213 tmp_V4i = __builtin_ia32_phaddd128(tmp_V4i, tmp_V4i);
214 tmp_V2i = __builtin_ia32_phaddd(tmp_V2i, tmp_V2i);
215 tmp_V8s = __builtin_ia32_phaddsw128(tmp_V8s, tmp_V8s);
216 tmp_V4s = __builtin_ia32_phaddsw(tmp_V4s, tmp_V4s);
217 tmp_V8s = __builtin_ia32_phsubw128(tmp_V8s, tmp_V8s);
218 tmp_V4s = __builtin_ia32_phsubw(tmp_V4s, tmp_V4s);
219 tmp_V4i = __builtin_ia32_phsubd128(tmp_V4i, tmp_V4i);
220 tmp_V2i = __builtin_ia32_phsubd(tmp_V2i, tmp_V2i);
221 tmp_V8s = __builtin_ia32_phsubsw128(tmp_V8s, tmp_V8s);
222 tmp_V4s = __builtin_ia32_phsubsw(tmp_V4s, tmp_V4s);
223 tmp_V16c = __builtin_ia32_pmaddubsw128(tmp_V16c, tmp_V16c);
224 tmp_V8c = __builtin_ia32_pmaddubsw(tmp_V8c, tmp_V8c);
225 tmp_V8s = __builtin_ia32_pmulhrsw128(tmp_V8s, tmp_V8s);
226 tmp_V4s = __builtin_ia32_pmulhrsw(tmp_V4s, tmp_V4s);
227 tmp_V16c = __builtin_ia32_pshufb128(tmp_V16c, tmp_V16c);
228 tmp_V8c = __builtin_ia32_pshufb(tmp_V8c, tmp_V8c);
229 tmp_V16c = __builtin_ia32_psignb128(tmp_V16c, tmp_V16c);
230 tmp_V8c = __builtin_ia32_psignb(tmp_V8c, tmp_V8c);
231 tmp_V8s = __builtin_ia32_psignw128(tmp_V8s, tmp_V8s);
232 tmp_V4s = __builtin_ia32_psignw(tmp_V4s, tmp_V4s);
233 tmp_V4i = __builtin_ia32_psignd128(tmp_V4i, tmp_V4i);
234 tmp_V2i = __builtin_ia32_psignd(tmp_V2i, tmp_V2i);
235 tmp_V16c = __builtin_ia32_pabsb128(tmp_V16c);
236 tmp_V8c = __builtin_ia32_pabsb(tmp_V8c);
237 tmp_V8s = __builtin_ia32_pabsw128(tmp_V8s);
238 tmp_V4s = __builtin_ia32_pabsw(tmp_V4s);
239 tmp_V4i = __builtin_ia32_pabsd128(tmp_V4i);
240 tmp_V2i = __builtin_ia32_pabsd(tmp_V2i);
241 tmp_V4s = __builtin_ia32_psllw(tmp_V4s, tmp_V1LLi);
242 tmp_V2i = __builtin_ia32_pslld(tmp_V2i, tmp_V1LLi);
243 tmp_V1LLi = __builtin_ia32_psllq(tmp_V1LLi, tmp_V1LLi);
244 tmp_V4s = __builtin_ia32_psrlw(tmp_V4s, tmp_V1LLi);
245 tmp_V2i = __builtin_ia32_psrld(tmp_V2i, tmp_V1LLi);
246 tmp_V1LLi = __builtin_ia32_psrlq(tmp_V1LLi, tmp_V1LLi);
247 tmp_V4s = __builtin_ia32_psraw(tmp_V4s, tmp_V1LLi);
248 tmp_V2i = __builtin_ia32_psrad(tmp_V2i, tmp_V1LLi);
Daniel Dunbareb154252008-10-05 06:38:36 +0000249 tmp_V2i = __builtin_ia32_pmaddwd(tmp_V4s, tmp_V4s);
250 tmp_V8c = __builtin_ia32_packsswb(tmp_V4s, tmp_V4s);
251 tmp_V4s = __builtin_ia32_packssdw(tmp_V2i, tmp_V2i);
252 tmp_V8c = __builtin_ia32_packuswb(tmp_V4s, tmp_V4s);
253
254 (void) __builtin_ia32_ldmxcsr(tmp_Ui);
255 tmp_Ui = __builtin_ia32_stmxcsr();
256 tmp_V4f = __builtin_ia32_cvtpi2ps(tmp_V4f, tmp_V2i);
257 tmp_V2i = __builtin_ia32_cvtps2pi(tmp_V4f);
Daniel Dunbareb154252008-10-05 06:38:36 +0000258 tmp_i = __builtin_ia32_cvtss2si(tmp_V4f);
259#ifdef USE_64
260 tmp_LLi = __builtin_ia32_cvtss2si64(tmp_V4f);
261#endif
262 tmp_V2i = __builtin_ia32_cvttps2pi(tmp_V4f);
Daniel Dunbareb154252008-10-05 06:38:36 +0000263 (void) __builtin_ia32_maskmovq(tmp_V8c, tmp_V8c, tmp_cp);
264 tmp_V4f = __builtin_ia32_loadups(tmp_fCp);
265 (void) __builtin_ia32_storeups(tmp_fp, tmp_V4f);
Daniel Dunbareb154252008-10-05 06:38:36 +0000266 (void) __builtin_ia32_storehps(tmp_V2ip, tmp_V4f);
267 (void) __builtin_ia32_storelps(tmp_V2ip, tmp_V4f);
268 tmp_i = __builtin_ia32_movmskps(tmp_V4f);
269 tmp_i = __builtin_ia32_pmovmskb(tmp_V8c);
270 (void) __builtin_ia32_movntps(tmp_fp, tmp_V4f);
271 (void) __builtin_ia32_movntq(tmp_V1LLip, tmp_V1LLi);
272 (void) __builtin_ia32_sfence();
273
274 tmp_V4s = __builtin_ia32_psadbw(tmp_V8c, tmp_V8c);
275 tmp_V4f = __builtin_ia32_rcpps(tmp_V4f);
276 tmp_V4f = __builtin_ia32_rcpss(tmp_V4f);
277 tmp_V4f = __builtin_ia32_rsqrtps(tmp_V4f);
278 tmp_V4f = __builtin_ia32_rsqrtss(tmp_V4f);
279 tmp_V4f = __builtin_ia32_sqrtps(tmp_V4f);
280 tmp_V4f = __builtin_ia32_sqrtss(tmp_V4f);
Daniel Dunbareb154252008-10-05 06:38:36 +0000281 (void) __builtin_ia32_maskmovdqu(tmp_V16c, tmp_V16c, tmp_cp);
282 tmp_V2d = __builtin_ia32_loadupd(tmp_dCp);
283 (void) __builtin_ia32_storeupd(tmp_dp, tmp_V2d);
Daniel Dunbareb154252008-10-05 06:38:36 +0000284 tmp_i = __builtin_ia32_movmskpd(tmp_V2d);
285 tmp_i = __builtin_ia32_pmovmskb128(tmp_V16c);
286 (void) __builtin_ia32_movnti(tmp_ip, tmp_i);
287 (void) __builtin_ia32_movntpd(tmp_dp, tmp_V2d);
288 (void) __builtin_ia32_movntdq(tmp_V2LLip, tmp_V2LLi);
Daniel Dunbareb154252008-10-05 06:38:36 +0000289 tmp_V2LLi = __builtin_ia32_psadbw128(tmp_V16c, tmp_V16c);
290 tmp_V2d = __builtin_ia32_sqrtpd(tmp_V2d);
291 tmp_V2d = __builtin_ia32_sqrtsd(tmp_V2d);
Daniel Dunbareb154252008-10-05 06:38:36 +0000292 tmp_V2d = __builtin_ia32_cvtdq2pd(tmp_V4i);
293 tmp_V4f = __builtin_ia32_cvtdq2ps(tmp_V4i);
294 tmp_V2LLi = __builtin_ia32_cvtpd2dq(tmp_V2d);
295 tmp_V2i = __builtin_ia32_cvtpd2pi(tmp_V2d);
296 tmp_V4f = __builtin_ia32_cvtpd2ps(tmp_V2d);
297 tmp_V4i = __builtin_ia32_cvttpd2dq(tmp_V2d);
298 tmp_V2i = __builtin_ia32_cvttpd2pi(tmp_V2d);
299 tmp_V2d = __builtin_ia32_cvtpi2pd(tmp_V2i);
300 tmp_i = __builtin_ia32_cvtsd2si(tmp_V2d);
Daniel Dunbareb154252008-10-05 06:38:36 +0000301#ifdef USE_64
302 tmp_LLi = __builtin_ia32_cvtsd2si64(tmp_V2d);
Daniel Dunbareb154252008-10-05 06:38:36 +0000303#endif
304 tmp_V4i = __builtin_ia32_cvtps2dq(tmp_V4f);
305 tmp_V2d = __builtin_ia32_cvtps2pd(tmp_V4f);
306 tmp_V4i = __builtin_ia32_cvttps2dq(tmp_V4f);
Daniel Dunbareb154252008-10-05 06:38:36 +0000307 (void) __builtin_ia32_clflush(tmp_vCp);
308 (void) __builtin_ia32_lfence();
309 (void) __builtin_ia32_mfence();
310 tmp_V16c = __builtin_ia32_loaddqu(tmp_cCp);
311 (void) __builtin_ia32_storedqu(tmp_cp, tmp_V16c);
312 tmp_V4s = __builtin_ia32_psllwi(tmp_V4s, tmp_i);
313 tmp_V2i = __builtin_ia32_pslldi(tmp_V2i, tmp_i);
314 tmp_V1LLi = __builtin_ia32_psllqi(tmp_V1LLi, tmp_i);
315 tmp_V4s = __builtin_ia32_psrawi(tmp_V4s, tmp_i);
316 tmp_V2i = __builtin_ia32_psradi(tmp_V2i, tmp_i);
317 tmp_V4s = __builtin_ia32_psrlwi(tmp_V4s, tmp_i);
318 tmp_V2i = __builtin_ia32_psrldi(tmp_V2i, tmp_i);
319 tmp_V1LLi = __builtin_ia32_psrlqi(tmp_V1LLi, tmp_i);
320 tmp_V1LLi = __builtin_ia32_pmuludq(tmp_V2i, tmp_V2i);
321 tmp_V2LLi = __builtin_ia32_pmuludq128(tmp_V4i, tmp_V4i);
322 tmp_V8s = __builtin_ia32_psraw128(tmp_V8s, tmp_V8s);
323 tmp_V4i = __builtin_ia32_psrad128(tmp_V4i, tmp_V4i);
324 tmp_V8s = __builtin_ia32_psrlw128(tmp_V8s, tmp_V8s);
325 tmp_V4i = __builtin_ia32_psrld128(tmp_V4i, tmp_V4i);
326 tmp_V2LLi = __builtin_ia32_psrlq128(tmp_V2LLi, tmp_V2LLi);
327 tmp_V8s = __builtin_ia32_psllw128(tmp_V8s, tmp_V8s);
328 tmp_V4i = __builtin_ia32_pslld128(tmp_V4i, tmp_V4i);
329 tmp_V2LLi = __builtin_ia32_psllq128(tmp_V2LLi, tmp_V2LLi);
330 tmp_V8s = __builtin_ia32_psllwi128(tmp_V8s, tmp_i);
331 tmp_V4i = __builtin_ia32_pslldi128(tmp_V4i, tmp_i);
332 tmp_V2LLi = __builtin_ia32_psllqi128(tmp_V2LLi, tmp_i);
333 tmp_V8s = __builtin_ia32_psrlwi128(tmp_V8s, tmp_i);
334 tmp_V4i = __builtin_ia32_psrldi128(tmp_V4i, tmp_i);
335 tmp_V2LLi = __builtin_ia32_psrlqi128(tmp_V2LLi, tmp_i);
336 tmp_V8s = __builtin_ia32_psrawi128(tmp_V8s, tmp_i);
337 tmp_V4i = __builtin_ia32_psradi128(tmp_V4i, tmp_i);
338 tmp_V8s = __builtin_ia32_pmaddwd128(tmp_V8s, tmp_V8s);
339 (void) __builtin_ia32_monitor(tmp_vp, tmp_Ui, tmp_Ui);
340 (void) __builtin_ia32_mwait(tmp_Ui, tmp_Ui);
Daniel Dunbareb154252008-10-05 06:38:36 +0000341 tmp_V16c = __builtin_ia32_lddqu(tmp_cCp);
342 tmp_V2LLi = __builtin_ia32_palignr128(tmp_V2LLi, tmp_V2LLi, imm_i);
343 tmp_V1LLi = __builtin_ia32_palignr(tmp_V1LLi, tmp_V1LLi, imm_i);
Daniel Dunbareb154252008-10-05 06:38:36 +0000344 (void) __builtin_ia32_storelv4si(tmp_V2ip, tmp_V2LLi);
345#ifdef USE_SSE4
346 tmp_V16c = __builtin_ia32_pblendvb128(tmp_V16c, tmp_V16c, tmp_V16c);
347 tmp_V8s = __builtin_ia32_pblendw128(tmp_V8s, tmp_V8s, imm_i_0_256);
348 tmp_V2d = __builtin_ia32_blendpd(tmp_V2d, tmp_V2d, imm_i_0_256);
349 tmp_V4f = __builtin_ia32_blendps(tmp_V4f, tmp_V4f, imm_i_0_256);
350 tmp_V2d = __builtin_ia32_blendvpd(tmp_V2d, tmp_V2d, tmp_V2d);
351 tmp_V4f = __builtin_ia32_blendvps(tmp_V4f, tmp_V4f, tmp_V4f);
352 tmp_V8s = __builtin_ia32_packusdw128(tmp_V4i, tmp_V4i);
353 tmp_V16c = __builtin_ia32_pmaxsb128(tmp_V16c, tmp_V16c);
354 tmp_V4i = __builtin_ia32_pmaxsd128(tmp_V4i, tmp_V4i);
355 tmp_V4i = __builtin_ia32_pmaxud128(tmp_V4i, tmp_V4i);
356 tmp_V8s = __builtin_ia32_pmaxuw128(tmp_V8s, tmp_V8s);
357 tmp_V16c = __builtin_ia32_pminsb128(tmp_V16c, tmp_V16c);
358 tmp_V4i = __builtin_ia32_pminsd128(tmp_V4i, tmp_V4i);
359 tmp_V4i = __builtin_ia32_pminud128(tmp_V4i, tmp_V4i);
360 tmp_V8s = __builtin_ia32_pminuw128(tmp_V8s, tmp_V8s);
361 tmp_V4i = __builtin_ia32_pmovsxbd128(tmp_V16c);
362 tmp_V2LLi = __builtin_ia32_pmovsxbq128(tmp_V16c);
363 tmp_V8s = __builtin_ia32_pmovsxbw128(tmp_V16c);
364 tmp_V2LLi = __builtin_ia32_pmovsxdq128(tmp_V4i);
365 tmp_V4i = __builtin_ia32_pmovsxwd128(tmp_V8s);
366 tmp_V2LLi = __builtin_ia32_pmovsxwq128(tmp_V8s);
367 tmp_V4i = __builtin_ia32_pmovzxbd128(tmp_V16c);
368 tmp_V2LLi = __builtin_ia32_pmovzxbq128(tmp_V16c);
369 tmp_V8s = __builtin_ia32_pmovzxbw128(tmp_V16c);
370 tmp_V2LLi = __builtin_ia32_pmovzxdq128(tmp_V4i);
371 tmp_V4i = __builtin_ia32_pmovzxwd128(tmp_V8s);
372 tmp_V2LLi = __builtin_ia32_pmovzxwq128(tmp_V8s);
373 tmp_V2LLi = __builtin_ia32_pmuldq128(tmp_V4i, tmp_V4i);
374 tmp_V4i = __builtin_ia32_pmulld128(tmp_V4i, tmp_V4i);
375 tmp_V4f = __builtin_ia32_roundps(tmp_V4f, imm_i_0_16);
Eric Christopher2ac74722010-03-04 01:34:19 +0000376 tmp_V4f = __builtin_ia32_roundss(tmp_V4f, tmp_V4f, imm_i_0_16);
377 tmp_V2d = __builtin_ia32_roundsd(tmp_V2d, tmp_V2d, imm_i_0_16);
Daniel Dunbareb154252008-10-05 06:38:36 +0000378 tmp_V2d = __builtin_ia32_roundpd(tmp_V2d, imm_i_0_16);
Mon P Wange5582f02008-10-18 02:43:25 +0000379 tmp_V4f = __builtin_ia32_insertps128(tmp_V4f, tmp_V4f, tmp_i);
Daniel Dunbareb154252008-10-05 06:38:36 +0000380#endif
Bruno Cardoso Lopes5ce94622010-08-03 01:57:18 +0000381
382 tmp_V4d = __builtin_ia32_addpd256(tmp_V4d, tmp_V4d);
383 tmp_V8f = __builtin_ia32_addps256(tmp_V8f, tmp_V8f);
384 tmp_V4d = __builtin_ia32_addsubpd256(tmp_V4d, tmp_V4d);
385 tmp_V8f = __builtin_ia32_addsubps256(tmp_V8f, tmp_V8f);
386 tmp_V4d = __builtin_ia32_andpd256(tmp_V4d, tmp_V4d);
387 tmp_V8f = __builtin_ia32_andps256(tmp_V8f, tmp_V8f);
388 tmp_V4d = __builtin_ia32_andnpd256(tmp_V4d, tmp_V4d);
389 tmp_V8f = __builtin_ia32_andnps256(tmp_V8f, tmp_V8f);
390 tmp_V4d = __builtin_ia32_divpd256(tmp_V4d, tmp_V4d);
391 tmp_V8f = __builtin_ia32_divps256(tmp_V8f, tmp_V8f);
392 tmp_V4d = __builtin_ia32_haddpd256(tmp_V4d, tmp_V4d);
393 tmp_V8f = __builtin_ia32_hsubps256(tmp_V8f, tmp_V8f);
394 tmp_V4d = __builtin_ia32_hsubpd256(tmp_V4d, tmp_V4d);
395 tmp_V8f = __builtin_ia32_haddps256(tmp_V8f, tmp_V8f);
396 tmp_V4d = __builtin_ia32_maxpd256(tmp_V4d, tmp_V4d);
397 tmp_V8f = __builtin_ia32_maxps256(tmp_V8f, tmp_V8f);
398 tmp_V4d = __builtin_ia32_minpd256(tmp_V4d, tmp_V4d);
399 tmp_V8f = __builtin_ia32_minps256(tmp_V8f, tmp_V8f);
400 tmp_V4d = __builtin_ia32_mulpd256(tmp_V4d, tmp_V4d);
401 tmp_V8f = __builtin_ia32_mulps256(tmp_V8f, tmp_V8f);
402 tmp_V4d = __builtin_ia32_orpd256(tmp_V4d, tmp_V4d);
403 tmp_V8f = __builtin_ia32_orps256(tmp_V8f, tmp_V8f);
404 tmp_V4d = __builtin_ia32_subpd256(tmp_V4d, tmp_V4d);
405 tmp_V8f = __builtin_ia32_subps256(tmp_V8f, tmp_V8f);
406 tmp_V4d = __builtin_ia32_xorpd256(tmp_V4d, tmp_V4d);
407 tmp_V8f = __builtin_ia32_xorps256(tmp_V8f, tmp_V8f);
408 tmp_V2d = __builtin_ia32_vpermilvarpd(tmp_V2d, tmp_V2LLi);
409 tmp_V4f = __builtin_ia32_vpermilvarps(tmp_V4f, tmp_V4i);
410 tmp_V4d = __builtin_ia32_vpermilvarpd256(tmp_V4d, tmp_V4LLi);
411 tmp_V8f = __builtin_ia32_vpermilvarps256(tmp_V8f, tmp_V8i);
412 tmp_V4d = __builtin_ia32_blendpd256(tmp_V4d, tmp_V4d, 0x7);
413 tmp_V8f = __builtin_ia32_blendps256(tmp_V8f, tmp_V8f, 0x7);
414 tmp_V4d = __builtin_ia32_blendvpd256(tmp_V4d, tmp_V4d, tmp_V4d);
415 tmp_V8f = __builtin_ia32_blendvps256(tmp_V8f, tmp_V8f, tmp_V8f);
416 tmp_V8f = __builtin_ia32_dpps256(tmp_V8f, tmp_V8f, 0x7);
417 tmp_V4d = __builtin_ia32_shufpd256(tmp_V4d, tmp_V4d, 0x7);
418 tmp_V8f = __builtin_ia32_shufps256(tmp_V8f, tmp_V8f, 0x7);
419 tmp_V4d = __builtin_ia32_cmppd256(tmp_V4d, tmp_V4d, 0);
420 tmp_V8f = __builtin_ia32_cmpps256(tmp_V8f, tmp_V8f, 0);
421 tmp_V2d = __builtin_ia32_vextractf128_pd256(tmp_V4d, 0x7);
422 tmp_V4f = __builtin_ia32_vextractf128_ps256(tmp_V8f, 0x7);
423 tmp_V4i = __builtin_ia32_vextractf128_si256(tmp_V8i, 0x7);
424 tmp_V4d = __builtin_ia32_cvtdq2pd256(tmp_V4i);
425 tmp_V8f = __builtin_ia32_cvtdq2ps256(tmp_V8i);
426 tmp_V4f = __builtin_ia32_cvtpd2ps256(tmp_V4d);
427 tmp_V8i = __builtin_ia32_cvtps2dq256(tmp_V8f);
428 tmp_V4d = __builtin_ia32_cvtps2pd256(tmp_V4f);
429 tmp_V4i = __builtin_ia32_cvttpd2dq256(tmp_V4d);
430 tmp_V4i = __builtin_ia32_cvtpd2dq256(tmp_V4d);
431 tmp_V8i = __builtin_ia32_cvttps2dq256(tmp_V8f);
432 tmp_V4d = __builtin_ia32_vperm2f128_pd256(tmp_V4d, tmp_V4d, 0x7);
433 tmp_V8f = __builtin_ia32_vperm2f128_ps256(tmp_V8f, tmp_V8f, 0x7);
434 tmp_V8i = __builtin_ia32_vperm2f128_si256(tmp_V8i, tmp_V8i, 0x7);
435 tmp_V2d = __builtin_ia32_vpermilpd(tmp_V2d, 0x7);
436 tmp_V4f = __builtin_ia32_vpermilps(tmp_V4f, 0x7);
437 tmp_V4d = __builtin_ia32_vpermilpd256(tmp_V4d, 0x7);
438 tmp_V8f = __builtin_ia32_vpermilps256(tmp_V8f, 0x7);
439 tmp_V4d = __builtin_ia32_vinsertf128_pd256(tmp_V4d, tmp_V2d, 0x7);
440 tmp_V8f = __builtin_ia32_vinsertf128_ps256(tmp_V8f, tmp_V4f, 0x7);
441 tmp_V8i = __builtin_ia32_vinsertf128_si256(tmp_V8i, tmp_V4i, 0x7);
442 tmp_V8f = __builtin_ia32_movshdup256(tmp_V8f);
443 tmp_V8f = __builtin_ia32_movsldup256(tmp_V8f);
444 tmp_V4d = __builtin_ia32_movddup256(tmp_V4d);
445 tmp_V4d = __builtin_ia32_sqrtpd256(tmp_V4d);
446 tmp_V8f = __builtin_ia32_sqrtps256(tmp_V8f);
447 tmp_V8f = __builtin_ia32_sqrtps_nr256(tmp_V8f);
448 tmp_V8f = __builtin_ia32_rsqrtps256(tmp_V8f);
449 tmp_V8f = __builtin_ia32_rsqrtps_nr256(tmp_V8f);
450 tmp_V8f = __builtin_ia32_rcpps256(tmp_V8f);
451 tmp_V4d = __builtin_ia32_roundpd256(tmp_V4d, tmp_i);
452 tmp_V8f = __builtin_ia32_roundps256(tmp_V8f, tmp_i);
453 tmp_V4d = __builtin_ia32_unpckhpd256(tmp_V4d, tmp_V4d);
454 tmp_V4d = __builtin_ia32_unpcklpd256(tmp_V4d, tmp_V4d);
455 tmp_V8f = __builtin_ia32_unpckhps256(tmp_V8f, tmp_V8f);
456 tmp_V8f = __builtin_ia32_unpcklps256(tmp_V8f, tmp_V8f);
457 tmp_V8i = __builtin_ia32_si256_si(tmp_V4i);
458 tmp_V8f = __builtin_ia32_ps256_ps(tmp_V4f);
459 tmp_V4d = __builtin_ia32_pd256_pd(tmp_V2d);
460 tmp_V4i = __builtin_ia32_si_si256(tmp_V8i);
461 tmp_V4f = __builtin_ia32_ps_ps256(tmp_V8f);
462 tmp_V2d = __builtin_ia32_pd_pd256(tmp_V4d);
463 tmp_i = __builtin_ia32_vtestzpd(tmp_V2d, tmp_V2d);
464 tmp_i = __builtin_ia32_vtestcpd(tmp_V2d, tmp_V2d);
465 tmp_i = __builtin_ia32_vtestnzcpd(tmp_V2d, tmp_V2d);
466 tmp_i = __builtin_ia32_vtestzps(tmp_V4f, tmp_V4f);
467 tmp_i = __builtin_ia32_vtestcps(tmp_V4f, tmp_V4f);
468 tmp_i = __builtin_ia32_vtestnzcps(tmp_V4f, tmp_V4f);
469 tmp_i = __builtin_ia32_vtestzpd256(tmp_V4d, tmp_V4d);
470 tmp_i = __builtin_ia32_vtestcpd256(tmp_V4d, tmp_V4d);
471 tmp_i = __builtin_ia32_vtestnzcpd256(tmp_V4d, tmp_V4d);
472 tmp_i = __builtin_ia32_vtestzps256(tmp_V8f, tmp_V8f);
473 tmp_i = __builtin_ia32_vtestcps256(tmp_V8f, tmp_V8f);
474 tmp_i = __builtin_ia32_vtestnzcps256(tmp_V8f, tmp_V8f);
475 tmp_i = __builtin_ia32_ptestz256(tmp_V4LLi, tmp_V4LLi);
476 tmp_i = __builtin_ia32_ptestc256(tmp_V4LLi, tmp_V4LLi);
477 tmp_i = __builtin_ia32_ptestnzc256(tmp_V4LLi, tmp_V4LLi);
478 tmp_i = __builtin_ia32_movmskpd256(tmp_V4d);
479 tmp_i = __builtin_ia32_movmskps256(tmp_V8f);
Daniel Dunbareb154252008-10-05 06:38:36 +0000480}