mirror of
https://github.com/RPCS3/llvm-mirror.git
synced 2024-11-24 19:52:54 +01:00
AMDGPU/GlobalISel: Legalize smulh/umulh and scalarize mul
llvm-svn: 352162
This commit is contained in:
parent
ac7ab5ba9e
commit
922c4ade38
@ -1396,6 +1396,9 @@ LegalizerHelper::fewerElementsVector(MachineInstr &MI, unsigned TypeIdx,
|
|||||||
return Legalized;
|
return Legalized;
|
||||||
}
|
}
|
||||||
case TargetOpcode::G_ADD:
|
case TargetOpcode::G_ADD:
|
||||||
|
case TargetOpcode::G_MUL:
|
||||||
|
case TargetOpcode::G_SMULH:
|
||||||
|
case TargetOpcode::G_UMULH:
|
||||||
case TargetOpcode::G_FADD:
|
case TargetOpcode::G_FADD:
|
||||||
case TargetOpcode::G_FMUL:
|
case TargetOpcode::G_FMUL:
|
||||||
case TargetOpcode::G_FSUB:
|
case TargetOpcode::G_FSUB:
|
||||||
|
@ -97,7 +97,10 @@ AMDGPULegalizerInfo::AMDGPULegalizerInfo(const GCNSubtarget &ST,
|
|||||||
setAction({G_ASHR, S32}, Legal);
|
setAction({G_ASHR, S32}, Legal);
|
||||||
setAction({G_ASHR, 1, S32}, Legal);
|
setAction({G_ASHR, 1, S32}, Legal);
|
||||||
setAction({G_SUB, S32}, Legal);
|
setAction({G_SUB, S32}, Legal);
|
||||||
setAction({G_MUL, S32}, Legal);
|
|
||||||
|
getActionDefinitionsBuilder({G_MUL, G_UMULH, G_SMULH})
|
||||||
|
.legalFor({S32})
|
||||||
|
.scalarize(0);
|
||||||
|
|
||||||
// FIXME: 64-bit ones only legal for scalar
|
// FIXME: 64-bit ones only legal for scalar
|
||||||
getActionDefinitionsBuilder({G_AND, G_OR, G_XOR})
|
getActionDefinitionsBuilder({G_AND, G_OR, G_XOR})
|
||||||
|
@ -586,6 +586,8 @@ AMDGPURegisterBankInfo::getInstrMapping(const MachineInstr &MI) const {
|
|||||||
case AMDGPU::G_SADDE:
|
case AMDGPU::G_SADDE:
|
||||||
case AMDGPU::G_USUBE:
|
case AMDGPU::G_USUBE:
|
||||||
case AMDGPU::G_SSUBE:
|
case AMDGPU::G_SSUBE:
|
||||||
|
case AMDGPU::G_UMULH:
|
||||||
|
case AMDGPU::G_SMULH:
|
||||||
if (isSALUMapping(MI))
|
if (isSALUMapping(MI))
|
||||||
return getDefaultMappingSOP(MI);
|
return getDefaultMappingSOP(MI);
|
||||||
LLVM_FALLTHROUGH;
|
LLVM_FALLTHROUGH;
|
||||||
|
@ -2,17 +2,39 @@
|
|||||||
# RUN: llc -mtriple=amdgcn-mesa-mesa3d -mcpu=fiji -O0 -run-pass=legalizer %s -o - | FileCheck %s
|
# RUN: llc -mtriple=amdgcn-mesa-mesa3d -mcpu=fiji -O0 -run-pass=legalizer %s -o - | FileCheck %s
|
||||||
|
|
||||||
---
|
---
|
||||||
name: test_mul
|
name: test_mul_s32
|
||||||
body: |
|
body: |
|
||||||
bb.0:
|
bb.0:
|
||||||
liveins: $vgpr0, $vgpr1
|
liveins: $vgpr0, $vgpr1
|
||||||
|
|
||||||
; CHECK-LABEL: name: test_mul
|
; CHECK-LABEL: name: test_mul_s32
|
||||||
; CHECK: [[COPY:%[0-9]+]]:_(s32) = COPY $vgpr0
|
; CHECK: [[COPY:%[0-9]+]]:_(s32) = COPY $vgpr0
|
||||||
; CHECK: [[COPY1:%[0-9]+]]:_(s32) = COPY $vgpr1
|
; CHECK: [[COPY1:%[0-9]+]]:_(s32) = COPY $vgpr1
|
||||||
; CHECK: [[MUL:%[0-9]+]]:_(s32) = G_MUL [[COPY]], [[COPY1]]
|
; CHECK: [[MUL:%[0-9]+]]:_(s32) = G_MUL [[COPY]], [[COPY1]]
|
||||||
|
; CHECK: $vgpr0 = COPY [[MUL]](s32)
|
||||||
%0:_(s32) = COPY $vgpr0
|
%0:_(s32) = COPY $vgpr0
|
||||||
%1:_(s32) = COPY $vgpr1
|
%1:_(s32) = COPY $vgpr1
|
||||||
%2:_(s32) = G_MUL %0, %1
|
%2:_(s32) = G_MUL %0, %1
|
||||||
$vgpr0 = COPY %2
|
$vgpr0 = COPY %2
|
||||||
...
|
...
|
||||||
|
|
||||||
|
---
|
||||||
|
name: test_mul_v2s32
|
||||||
|
body: |
|
||||||
|
bb.0:
|
||||||
|
liveins: $vgpr0_vgpr1, $vgpr2_vgpr3
|
||||||
|
|
||||||
|
; CHECK-LABEL: name: test_mul_v2s32
|
||||||
|
; CHECK: [[COPY:%[0-9]+]]:_(<2 x s32>) = COPY $vgpr0_vgpr1
|
||||||
|
; CHECK: [[COPY1:%[0-9]+]]:_(<2 x s32>) = COPY $vgpr2_vgpr3
|
||||||
|
; CHECK: [[UV:%[0-9]+]]:_(s32), [[UV1:%[0-9]+]]:_(s32) = G_UNMERGE_VALUES [[COPY]](<2 x s32>)
|
||||||
|
; CHECK: [[UV2:%[0-9]+]]:_(s32), [[UV3:%[0-9]+]]:_(s32) = G_UNMERGE_VALUES [[COPY1]](<2 x s32>)
|
||||||
|
; CHECK: [[MUL:%[0-9]+]]:_(s32) = G_MUL [[UV]], [[UV2]]
|
||||||
|
; CHECK: [[MUL1:%[0-9]+]]:_(s32) = G_MUL [[UV1]], [[UV3]]
|
||||||
|
; CHECK: [[BUILD_VECTOR:%[0-9]+]]:_(<2 x s32>) = G_BUILD_VECTOR [[MUL]](s32), [[MUL1]](s32)
|
||||||
|
; CHECK: $vgpr0_vgpr1 = COPY [[BUILD_VECTOR]](<2 x s32>)
|
||||||
|
%0:_(<2 x s32>) = COPY $vgpr0_vgpr1
|
||||||
|
%1:_(<2 x s32>) = COPY $vgpr2_vgpr3
|
||||||
|
%2:_(<2 x s32>) = G_MUL %0, %1
|
||||||
|
$vgpr0_vgpr1 = COPY %2
|
||||||
|
...
|
||||||
|
40
test/CodeGen/AMDGPU/GlobalISel/legalize-smulh.mir
Normal file
40
test/CodeGen/AMDGPU/GlobalISel/legalize-smulh.mir
Normal file
@ -0,0 +1,40 @@
|
|||||||
|
# NOTE: Assertions have been autogenerated by utils/update_mir_test_checks.py
|
||||||
|
# RUN: llc -mtriple=amdgcn-mesa-mesa3d -mcpu=fiji -O0 -run-pass=legalizer %s -o - | FileCheck %s
|
||||||
|
|
||||||
|
---
|
||||||
|
name: test_smulh_s32
|
||||||
|
body: |
|
||||||
|
bb.0:
|
||||||
|
liveins: $vgpr0, $vgpr1
|
||||||
|
|
||||||
|
; CHECK-LABEL: name: test_smulh_s32
|
||||||
|
; CHECK: [[COPY:%[0-9]+]]:_(s32) = COPY $vgpr0
|
||||||
|
; CHECK: [[COPY1:%[0-9]+]]:_(s32) = COPY $vgpr1
|
||||||
|
; CHECK: [[SMULH:%[0-9]+]]:_(s32) = G_SMULH [[COPY]], [[COPY1]]
|
||||||
|
; CHECK: $vgpr0 = COPY [[SMULH]](s32)
|
||||||
|
%0:_(s32) = COPY $vgpr0
|
||||||
|
%1:_(s32) = COPY $vgpr1
|
||||||
|
%2:_(s32) = G_SMULH %0, %1
|
||||||
|
$vgpr0 = COPY %2
|
||||||
|
...
|
||||||
|
|
||||||
|
---
|
||||||
|
name: test_smulh_v2s32
|
||||||
|
body: |
|
||||||
|
bb.0:
|
||||||
|
liveins: $vgpr0_vgpr1, $vgpr2_vgpr3
|
||||||
|
|
||||||
|
; CHECK-LABEL: name: test_smulh_v2s32
|
||||||
|
; CHECK: [[COPY:%[0-9]+]]:_(<2 x s32>) = COPY $vgpr0_vgpr1
|
||||||
|
; CHECK: [[COPY1:%[0-9]+]]:_(<2 x s32>) = COPY $vgpr2_vgpr3
|
||||||
|
; CHECK: [[UV:%[0-9]+]]:_(s32), [[UV1:%[0-9]+]]:_(s32) = G_UNMERGE_VALUES [[COPY]](<2 x s32>)
|
||||||
|
; CHECK: [[UV2:%[0-9]+]]:_(s32), [[UV3:%[0-9]+]]:_(s32) = G_UNMERGE_VALUES [[COPY1]](<2 x s32>)
|
||||||
|
; CHECK: [[SMULH:%[0-9]+]]:_(s32) = G_SMULH [[UV]], [[UV2]]
|
||||||
|
; CHECK: [[SMULH1:%[0-9]+]]:_(s32) = G_SMULH [[UV1]], [[UV3]]
|
||||||
|
; CHECK: [[BUILD_VECTOR:%[0-9]+]]:_(<2 x s32>) = G_BUILD_VECTOR [[SMULH]](s32), [[SMULH1]](s32)
|
||||||
|
; CHECK: $vgpr0_vgpr1 = COPY [[BUILD_VECTOR]](<2 x s32>)
|
||||||
|
%0:_(<2 x s32>) = COPY $vgpr0_vgpr1
|
||||||
|
%1:_(<2 x s32>) = COPY $vgpr2_vgpr3
|
||||||
|
%2:_(<2 x s32>) = G_SMULH %0, %1
|
||||||
|
$vgpr0_vgpr1 = COPY %2
|
||||||
|
...
|
40
test/CodeGen/AMDGPU/GlobalISel/legalize-umulh.mir
Normal file
40
test/CodeGen/AMDGPU/GlobalISel/legalize-umulh.mir
Normal file
@ -0,0 +1,40 @@
|
|||||||
|
# NOTE: Assertions have been autogenerated by utils/update_mir_test_checks.py
|
||||||
|
# RUN: llc -mtriple=amdgcn-mesa-mesa3d -mcpu=fiji -O0 -run-pass=legalizer %s -o - | FileCheck %s
|
||||||
|
|
||||||
|
---
|
||||||
|
name: test_umulh_s32
|
||||||
|
body: |
|
||||||
|
bb.0:
|
||||||
|
liveins: $vgpr0, $vgpr1
|
||||||
|
|
||||||
|
; CHECK-LABEL: name: test_umulh_s32
|
||||||
|
; CHECK: [[COPY:%[0-9]+]]:_(s32) = COPY $vgpr0
|
||||||
|
; CHECK: [[COPY1:%[0-9]+]]:_(s32) = COPY $vgpr1
|
||||||
|
; CHECK: [[UMULH:%[0-9]+]]:_(s32) = G_UMULH [[COPY]], [[COPY1]]
|
||||||
|
; CHECK: $vgpr0 = COPY [[UMULH]](s32)
|
||||||
|
%0:_(s32) = COPY $vgpr0
|
||||||
|
%1:_(s32) = COPY $vgpr1
|
||||||
|
%2:_(s32) = G_UMULH %0, %1
|
||||||
|
$vgpr0 = COPY %2
|
||||||
|
...
|
||||||
|
|
||||||
|
---
|
||||||
|
name: test_umulh_v2s32
|
||||||
|
body: |
|
||||||
|
bb.0:
|
||||||
|
liveins: $vgpr0_vgpr1, $vgpr2_vgpr3
|
||||||
|
|
||||||
|
; CHECK-LABEL: name: test_umulh_v2s32
|
||||||
|
; CHECK: [[COPY:%[0-9]+]]:_(<2 x s32>) = COPY $vgpr0_vgpr1
|
||||||
|
; CHECK: [[COPY1:%[0-9]+]]:_(<2 x s32>) = COPY $vgpr2_vgpr3
|
||||||
|
; CHECK: [[UV:%[0-9]+]]:_(s32), [[UV1:%[0-9]+]]:_(s32) = G_UNMERGE_VALUES [[COPY]](<2 x s32>)
|
||||||
|
; CHECK: [[UV2:%[0-9]+]]:_(s32), [[UV3:%[0-9]+]]:_(s32) = G_UNMERGE_VALUES [[COPY1]](<2 x s32>)
|
||||||
|
; CHECK: [[UMULH:%[0-9]+]]:_(s32) = G_UMULH [[UV]], [[UV2]]
|
||||||
|
; CHECK: [[UMULH1:%[0-9]+]]:_(s32) = G_UMULH [[UV1]], [[UV3]]
|
||||||
|
; CHECK: [[BUILD_VECTOR:%[0-9]+]]:_(<2 x s32>) = G_BUILD_VECTOR [[UMULH]](s32), [[UMULH1]](s32)
|
||||||
|
; CHECK: $vgpr0_vgpr1 = COPY [[BUILD_VECTOR]](<2 x s32>)
|
||||||
|
%0:_(<2 x s32>) = COPY $vgpr0_vgpr1
|
||||||
|
%1:_(<2 x s32>) = COPY $vgpr2_vgpr3
|
||||||
|
%2:_(<2 x s32>) = G_UMULH %0, %1
|
||||||
|
$vgpr0_vgpr1 = COPY %2
|
||||||
|
...
|
67
test/CodeGen/AMDGPU/GlobalISel/regbankselect-smulh.mir
Normal file
67
test/CodeGen/AMDGPU/GlobalISel/regbankselect-smulh.mir
Normal file
@ -0,0 +1,67 @@
|
|||||||
|
# NOTE: Assertions have been autogenerated by utils/update_mir_test_checks.py
|
||||||
|
# RUN: llc -march=amdgcn -mcpu=fiji -run-pass=regbankselect %s -verify-machineinstrs -o - -regbankselect-fast | FileCheck %s
|
||||||
|
|
||||||
|
---
|
||||||
|
name: smulh_s32_ss
|
||||||
|
legalized: true
|
||||||
|
|
||||||
|
body: |
|
||||||
|
bb.0:
|
||||||
|
liveins: $sgpr0, $sgpr1
|
||||||
|
; CHECK-LABEL: name: smulh_s32_ss
|
||||||
|
; CHECK: [[COPY:%[0-9]+]]:sgpr(s32) = COPY $sgpr0
|
||||||
|
; CHECK: [[COPY1:%[0-9]+]]:sgpr(s32) = COPY $sgpr1
|
||||||
|
; CHECK: [[SMULH:%[0-9]+]]:sgpr(s32) = G_SMULH [[COPY]], [[COPY1]]
|
||||||
|
%0:_(s32) = COPY $sgpr0
|
||||||
|
%1:_(s32) = COPY $sgpr1
|
||||||
|
%2:_(s32) = G_SMULH %0, %1
|
||||||
|
...
|
||||||
|
|
||||||
|
---
|
||||||
|
name: smulh_s32_sv
|
||||||
|
legalized: true
|
||||||
|
|
||||||
|
body: |
|
||||||
|
bb.0:
|
||||||
|
liveins: $sgpr0, $vgpr0
|
||||||
|
; CHECK-LABEL: name: smulh_s32_sv
|
||||||
|
; CHECK: [[COPY:%[0-9]+]]:sgpr(s32) = COPY $sgpr0
|
||||||
|
; CHECK: [[COPY1:%[0-9]+]]:vgpr(s32) = COPY $vgpr0
|
||||||
|
; CHECK: [[SMULH:%[0-9]+]]:vgpr(s32) = G_SMULH [[COPY]], [[COPY1]]
|
||||||
|
%0:_(s32) = COPY $sgpr0
|
||||||
|
%1:_(s32) = COPY $vgpr0
|
||||||
|
%2:_(s32) = G_SMULH %0, %1
|
||||||
|
...
|
||||||
|
|
||||||
|
---
|
||||||
|
name: smulh_s32_vs
|
||||||
|
legalized: true
|
||||||
|
|
||||||
|
body: |
|
||||||
|
bb.0:
|
||||||
|
liveins: $sgpr0, $vgpr0
|
||||||
|
; CHECK-LABEL: name: smulh_s32_vs
|
||||||
|
; CHECK: [[COPY:%[0-9]+]]:vgpr(s32) = COPY $vgpr0
|
||||||
|
; CHECK: [[COPY1:%[0-9]+]]:sgpr(s32) = COPY $sgpr0
|
||||||
|
; CHECK: [[COPY2:%[0-9]+]]:vgpr(s32) = COPY [[COPY1]](s32)
|
||||||
|
; CHECK: [[SMULH:%[0-9]+]]:vgpr(s32) = G_SMULH [[COPY]], [[COPY2]]
|
||||||
|
%0:_(s32) = COPY $vgpr0
|
||||||
|
%1:_(s32) = COPY $sgpr0
|
||||||
|
%2:_(s32) = G_SMULH %0, %1
|
||||||
|
...
|
||||||
|
|
||||||
|
---
|
||||||
|
name: smulh_s32_vv
|
||||||
|
legalized: true
|
||||||
|
|
||||||
|
body: |
|
||||||
|
bb.0:
|
||||||
|
liveins: $vgpr0, $vgpr1
|
||||||
|
; CHECK-LABEL: name: smulh_s32_vv
|
||||||
|
; CHECK: [[COPY:%[0-9]+]]:vgpr(s32) = COPY $vgpr0
|
||||||
|
; CHECK: [[COPY1:%[0-9]+]]:vgpr(s32) = COPY $vgpr1
|
||||||
|
; CHECK: [[SMULH:%[0-9]+]]:vgpr(s32) = G_SMULH [[COPY]], [[COPY1]]
|
||||||
|
%0:_(s32) = COPY $vgpr0
|
||||||
|
%1:_(s32) = COPY $vgpr1
|
||||||
|
%2:_(s32) = G_SMULH %0, %1
|
||||||
|
...
|
67
test/CodeGen/AMDGPU/GlobalISel/regbankselect-umulh.mir
Normal file
67
test/CodeGen/AMDGPU/GlobalISel/regbankselect-umulh.mir
Normal file
@ -0,0 +1,67 @@
|
|||||||
|
# NOTE: Assertions have been autogenerated by utils/update_mir_test_checks.py
|
||||||
|
# RUN: llc -march=amdgcn -mcpu=fiji -run-pass=regbankselect %s -verify-machineinstrs -o - -regbankselect-fast | FileCheck %s
|
||||||
|
|
||||||
|
---
|
||||||
|
name: umulh_s32_ss
|
||||||
|
legalized: true
|
||||||
|
|
||||||
|
body: |
|
||||||
|
bb.0:
|
||||||
|
liveins: $sgpr0, $sgpr1
|
||||||
|
; CHECK-LABEL: name: umulh_s32_ss
|
||||||
|
; CHECK: [[COPY:%[0-9]+]]:sgpr(s32) = COPY $sgpr0
|
||||||
|
; CHECK: [[COPY1:%[0-9]+]]:sgpr(s32) = COPY $sgpr1
|
||||||
|
; CHECK: [[UMULH:%[0-9]+]]:sgpr(s32) = G_UMULH [[COPY]], [[COPY1]]
|
||||||
|
%0:_(s32) = COPY $sgpr0
|
||||||
|
%1:_(s32) = COPY $sgpr1
|
||||||
|
%2:_(s32) = G_UMULH %0, %1
|
||||||
|
...
|
||||||
|
|
||||||
|
---
|
||||||
|
name: umulh_s32_sv
|
||||||
|
legalized: true
|
||||||
|
|
||||||
|
body: |
|
||||||
|
bb.0:
|
||||||
|
liveins: $sgpr0, $vgpr0
|
||||||
|
; CHECK-LABEL: name: umulh_s32_sv
|
||||||
|
; CHECK: [[COPY:%[0-9]+]]:sgpr(s32) = COPY $sgpr0
|
||||||
|
; CHECK: [[COPY1:%[0-9]+]]:vgpr(s32) = COPY $vgpr0
|
||||||
|
; CHECK: [[UMULH:%[0-9]+]]:vgpr(s32) = G_UMULH [[COPY]], [[COPY1]]
|
||||||
|
%0:_(s32) = COPY $sgpr0
|
||||||
|
%1:_(s32) = COPY $vgpr0
|
||||||
|
%2:_(s32) = G_UMULH %0, %1
|
||||||
|
...
|
||||||
|
|
||||||
|
---
|
||||||
|
name: umulh_s32_vs
|
||||||
|
legalized: true
|
||||||
|
|
||||||
|
body: |
|
||||||
|
bb.0:
|
||||||
|
liveins: $sgpr0, $vgpr0
|
||||||
|
; CHECK-LABEL: name: umulh_s32_vs
|
||||||
|
; CHECK: [[COPY:%[0-9]+]]:vgpr(s32) = COPY $vgpr0
|
||||||
|
; CHECK: [[COPY1:%[0-9]+]]:sgpr(s32) = COPY $sgpr0
|
||||||
|
; CHECK: [[COPY2:%[0-9]+]]:vgpr(s32) = COPY [[COPY1]](s32)
|
||||||
|
; CHECK: [[UMULH:%[0-9]+]]:vgpr(s32) = G_UMULH [[COPY]], [[COPY2]]
|
||||||
|
%0:_(s32) = COPY $vgpr0
|
||||||
|
%1:_(s32) = COPY $sgpr0
|
||||||
|
%2:_(s32) = G_UMULH %0, %1
|
||||||
|
...
|
||||||
|
|
||||||
|
---
|
||||||
|
name: umulh_s32_vv
|
||||||
|
legalized: true
|
||||||
|
|
||||||
|
body: |
|
||||||
|
bb.0:
|
||||||
|
liveins: $vgpr0, $vgpr1
|
||||||
|
; CHECK-LABEL: name: umulh_s32_vv
|
||||||
|
; CHECK: [[COPY:%[0-9]+]]:vgpr(s32) = COPY $vgpr0
|
||||||
|
; CHECK: [[COPY1:%[0-9]+]]:vgpr(s32) = COPY $vgpr1
|
||||||
|
; CHECK: [[UMULH:%[0-9]+]]:vgpr(s32) = G_UMULH [[COPY]], [[COPY1]]
|
||||||
|
%0:_(s32) = COPY $vgpr0
|
||||||
|
%1:_(s32) = COPY $vgpr1
|
||||||
|
%2:_(s32) = G_UMULH %0, %1
|
||||||
|
...
|
Loading…
Reference in New Issue
Block a user