mirror of
https://github.com/microsoft/mscclpp.git
synced 2026-05-12 17:26:04 +00:00
88d28e07a7
The way to run nccl-test over mscclpp: mpirun -np 8 --bind-to numa --allow-run-as-root -x LD_PRELOAD=$(pwd)/build/apps/nccl/libmscclpp_nccl.so -x NCCL_DEBUG=WARN -x MSCCLPP_EXECUTION_PLAN_DIR=/execution-files /root/nccl-tests/build/all_reduce_perf -b 1K -e 1G -f 2 -d half -G 20 -w 10 -n 20
181 lines
3.7 KiB
JSON
181 lines
3.7 KiB
JSON
{
|
|
"name": "send_recv",
|
|
"collective": "sendrecv",
|
|
"protocol": "LL",
|
|
"inplace": false,
|
|
"gpus": [
|
|
{
|
|
"id": 0,
|
|
"inputChunks": 1,
|
|
"outputChunks": 1,
|
|
"scratchChunks": 2,
|
|
"chunkGroups": 1,
|
|
"threadblocks": [
|
|
{
|
|
"id": 0,
|
|
"ops": [
|
|
{
|
|
"name": "tpkt",
|
|
"src": 0,
|
|
"srcbuff": "i",
|
|
"srcoff": 0,
|
|
"dst": 0,
|
|
"dstbuff": "s",
|
|
"dstoff": 0,
|
|
"ctype": "none",
|
|
"cnt": 1
|
|
},
|
|
{
|
|
"name": "nop",
|
|
"deps": [
|
|
{
|
|
"tb": 0,
|
|
"step": 0
|
|
}
|
|
]
|
|
},
|
|
{
|
|
"name": "ppkt",
|
|
"o_buff": {
|
|
"src": "s",
|
|
"dst": "s"
|
|
},
|
|
"o_cids": [
|
|
{
|
|
"id": 0,
|
|
"off": 1
|
|
}
|
|
],
|
|
"srcs": [
|
|
{
|
|
"buff": "s",
|
|
"off": 0
|
|
}
|
|
],
|
|
"ctype": "proxy",
|
|
"cnt": 1
|
|
},
|
|
{
|
|
"name": "cpkt",
|
|
"src": 0,
|
|
"srcbuff": "s",
|
|
"srcoff": 1,
|
|
"dst": 0,
|
|
"dstbuff": "o",
|
|
"dstoff": 0,
|
|
"ctype": "none",
|
|
"cnt": 1
|
|
}
|
|
],
|
|
"channels": [
|
|
{
|
|
"src": "s",
|
|
"dst": "s",
|
|
"ctype": "proxy",
|
|
"cids": [
|
|
0
|
|
]
|
|
}
|
|
]
|
|
}
|
|
],
|
|
"channels": [
|
|
{
|
|
"srcbuff": "s",
|
|
"dstbuff": "s",
|
|
"type": "proxy",
|
|
"connectedTo": [
|
|
1
|
|
]
|
|
}
|
|
]
|
|
},
|
|
{
|
|
"id": 1,
|
|
"inputChunks": 1,
|
|
"outputChunks": 1,
|
|
"scratchChunks": 2,
|
|
"chunkGroups": 1,
|
|
"threadblocks": [
|
|
{
|
|
"id": 0,
|
|
"ops": [
|
|
{
|
|
"name": "tpkt",
|
|
"src": 1,
|
|
"srcbuff": "i",
|
|
"srcoff": 0,
|
|
"dst": 1,
|
|
"dstbuff": "s",
|
|
"dstoff": 0,
|
|
"ctype": "none",
|
|
"cnt": 1
|
|
},
|
|
{
|
|
"name": "nop",
|
|
"deps": [
|
|
{
|
|
"tb": 0,
|
|
"step": 0
|
|
}
|
|
]
|
|
},
|
|
{
|
|
"name": "ppkt",
|
|
"o_buff": {
|
|
"src": "s",
|
|
"dst": "s"
|
|
},
|
|
"o_cids": [
|
|
{
|
|
"id": 0,
|
|
"off": 1
|
|
}
|
|
],
|
|
"srcs": [
|
|
{
|
|
"buff": "s",
|
|
"off": 0
|
|
}
|
|
],
|
|
"ctype": "proxy",
|
|
"cnt": 1
|
|
},
|
|
{
|
|
"name": "cpkt",
|
|
"src": 1,
|
|
"srcbuff": "s",
|
|
"srcoff": 1,
|
|
"dst": 1,
|
|
"dstbuff": "o",
|
|
"dstoff": 0,
|
|
"ctype": "none",
|
|
"cnt": 1
|
|
}
|
|
],
|
|
"channels": [
|
|
{
|
|
"src": "s",
|
|
"dst": "s",
|
|
"ctype": "proxy",
|
|
"cids": [
|
|
0
|
|
]
|
|
}
|
|
]
|
|
}
|
|
],
|
|
"channels": [
|
|
{
|
|
"srcbuff": "s",
|
|
"dstbuff": "s",
|
|
"type": "proxy",
|
|
"connectedTo": [
|
|
0
|
|
]
|
|
}
|
|
]
|
|
}
|
|
]
|
|
}
|