START TIME: Thu Nov 9 17:30:38 CST 2023 f14r1n19 LRANK===============================0 WORLD_SIZE*************96 LRANK===============================1 WORLD_SIZE*************96 LRANK===============================2 WORLD_SIZE*************96 LRANK===============================1 WORLD_SIZE*************96 LRANK===============================0 WORLD_SIZE*************96 LRANK===============================1 WORLD_SIZE*************96 LRANK===============================0 WORLD_SIZE*************96 LRANK===============================0 WORLD_SIZE*************96 LRANK===============================1 WORLD_SIZE*************96 LRANK===============================0 WORLD_SIZE*************96 LRANK===============================1 WORLD_SIZE*************96 LRANK===============================2 WORLD_SIZE*************96 LRANK===============================2 WORLD_SIZE*************96 LRANK===============================0 WORLD_SIZE*************96 LRANK===============================1 WORLD_SIZE*************96 LRANK===============================1 WORLD_SIZE*************96 LRANK===============================2 LRANK===============================0 WORLD_SIZE*************96 WORLD_SIZE*************96 LRANK===============================1 WORLD_SIZE*************96 LRANK===============================0 WORLD_SIZE*************96 LRANK===============================2 LRANK===============================1 WORLD_SIZE*************96 WORLD_SIZE*************96 LRANK===============================0 WORLD_SIZE*************96 LRANK===============================0 WORLD_SIZE*************96 LRANK===============================3 WORLD_SIZE*************96 LRANK===============================1 WORLD_SIZE*************96 LRANK===============================2 LRANK===============================0 WORLD_SIZE*************96 WORLD_SIZE*************96 LRANK===============================1 WORLD_SIZE*************96 LRANK===============================1 WORLD_SIZE*************96 LRANK===============================0 WORLD_SIZE*************96 LRANK===============================1 WORLD_SIZE*************96 LRANK===============================0 LRANK===============================0 LRANK===============================1 WORLD_SIZE*************96 LRANK===============================0 WORLD_SIZE*************96 WORLD_SIZE*************96 LRANK===============================2 WORLD_SIZE*************96 LRANK===============================0 WORLD_SIZE*************96 LRANK===============================1 WORLD_SIZE*************96 LRANK===============================0 WORLD_SIZE*************96 LRANK===============================2 LRANK===============================1 WORLD_SIZE*************96 LRANK===============================2 WORLD_SIZE*************96 LRANK===============================2 LRANK===============================1 WORLD_SIZE*************96 WORLD_SIZE*************96 LRANK===============================0 WORLD_SIZE*************96 WORLD_SIZE*************96 LRANK===============================2 LRANK===============================2 LRANK===============================0 WORLD_SIZE*************96 LRANK===============================0 WORLD_SIZE*************96 LRANK===============================0 WORLD_SIZE*************96 LRANK===============================1 WORLD_SIZE*************96 LRANK===============================2 WORLD_SIZE*************96 WORLD_SIZE*************96 LRANK===============================1 WORLD_SIZE*************96 LRANK===============================1 WORLD_SIZE*************96 LRANK===============================1 WORLD_SIZE*************96 LRANK===============================0 LRANK===============================1 WORLD_SIZE*************96 LRANK===============================2 WORLD_SIZE*************96 WORLD_SIZE*************96 LRANK===============================2 LRANK===============================2 LRANK===============================1 LRANK===============================0 WORLD_SIZE*************96 WORLD_SIZE*************96 LRANK===============================2 LRANK===============================0 WORLD_SIZE*************96 WORLD_SIZE*************96 LRANK===============================2 LRANK===============================2 WORLD_SIZE*************96 WORLD_SIZE*************96 LRANK===============================1 WORLD_SIZE*************96 LRANK===============================2 LRANK===============================3 LRANK===============================2 WORLD_SIZE*************96 WORLD_SIZE*************96 WORLD_SIZE*************96 WORLD_SIZE*************96 LRANK===============================2 WORLD_SIZE*************96 WORLD_SIZE*************96 WORLD_SIZE*************96 LRANK===============================3 LRANK===============================2 WORLD_SIZE*************96 WORLD_SIZE*************96 LRANK===============================2 WORLD_SIZE*************96 WORLD_SIZE*************96 LRANK===============================3 WORLD_SIZE*************96 LRANK===============================3 LRANK===============================3 WORLD_SIZE*************96 WORLD_SIZE*************96 LRANK===============================3 WORLD_SIZE*************96 LRANK===============================3 LRANK===============================3 WORLD_SIZE*************96 WORLD_SIZE*************96 LRANK===============================3 LRANK===============================3 WORLD_SIZE*************96 WORLD_SIZE*************96 LRANK===============================3 LRANK===============================3 LRANK===============================3 WORLD_SIZE*************96 WORLD_SIZE*************96 WORLD_SIZE*************96 LRANK===============================3 WORLD_SIZE*************96 LRANK===============================3 LRANK===============================3 WORLD_SIZE*************96 WORLD_SIZE*************96 LRANK===============================3 WORLD_SIZE*************96 LRANK===============================3 WORLD_SIZE*************96 LRANK===============================3 WORLD_SIZE*************96 LRANK===============================3 WORLD_SIZE*************96 LRANK===============================3 LRANK===============================3 WORLD_SIZE*************96 WORLD_SIZE*************96 LRANK===============================3 WORLD_SIZE*************96 [2023-11-09 17:32:07,964] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,964] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,963] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,956] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,956] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,965] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,957] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,960] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,958] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,964] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,959] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,965] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,961] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,966] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,964] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,962] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,958] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,962] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,963] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,965] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,959] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,964] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,965] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,960] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,965] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,960] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,958] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,963] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,960] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,963] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,966] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,962] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,962] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,967] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,961] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,959] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,961] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,961] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,962] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,967] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,964] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,967] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,964] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,960] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,961] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,961] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,959] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,967] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,961] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,962] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,961] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,964] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,961] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,964] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,967] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,961] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,962] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,963] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,962] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,963] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,967] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,960] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,968] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,968] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,967] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,962] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,964] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,963] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,961] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,967] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,967] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,963] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,968] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,968] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,962] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,968] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,963] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,963] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,965] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,968] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,963] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,968] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,968] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,964] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,968] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,964] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,962] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,960] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,964] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,968] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,968] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,968] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,966] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,966] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,969] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:07,969] [INFO] [comm.py:606:init_distributed] Not using the DeepSpeed or dist launchers, attempting to detect MPI environment... [2023-11-09 17:32:08,312] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=0, local_rank=0, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,312] [INFO] [comm.py:622:init_distributed] Initializing TorchBackend in DeepSpeed with backend nccl [2023-11-09 17:32:08,312] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=1, local_rank=1, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,318] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=24, local_rank=0, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,314] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=36, local_rank=0, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,310] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=4, local_rank=0, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,312] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=52, local_rank=0, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,318] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=12, local_rank=0, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,311] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=88, local_rank=0, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,310] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=76, local_rank=0, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,315] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=16, local_rank=0, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,318] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=60, local_rank=0, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,313] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=72, local_rank=0, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,318] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=44, local_rank=0, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,318] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=48, local_rank=0, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,317] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=40, local_rank=0, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,313] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=64, local_rank=0, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,314] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=32, local_rank=0, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,315] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=80, local_rank=0, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,312] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=68, local_rank=0, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,319] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=25, local_rank=1, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,314] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=37, local_rank=1, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,312] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=53, local_rank=1, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,318] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=13, local_rank=1, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,311] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=89, local_rank=1, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,310] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=77, local_rank=1, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,315] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=17, local_rank=1, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,318] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=61, local_rank=1, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,313] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=73, local_rank=1, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,319] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=45, local_rank=1, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,318] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=49, local_rank=1, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,317] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=41, local_rank=1, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,313] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=65, local_rank=1, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,314] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=33, local_rank=1, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,315] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=81, local_rank=1, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,313] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=69, local_rank=1, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,315] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=8, local_rank=0, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,317] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=56, local_rank=0, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,318] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=20, local_rank=0, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,318] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=28, local_rank=0, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,314] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=92, local_rank=0, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,312] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=84, local_rank=0, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,315] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=9, local_rank=1, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,317] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=57, local_rank=1, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,318] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=21, local_rank=1, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,318] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=29, local_rank=1, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,314] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=93, local_rank=1, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,312] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=85, local_rank=1, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,310] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=5, local_rank=1, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,314] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=2, local_rank=2, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,314] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=3, local_rank=3, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,312] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=7, local_rank=3, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,320] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=47, local_rank=3, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,314] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=87, local_rank=3, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,320] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=15, local_rank=3, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,315] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=39, local_rank=3, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,319] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=51, local_rank=3, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,312] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=6, local_rank=2, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,320] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=46, local_rank=2, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,314] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=86, local_rank=2, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,320] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=14, local_rank=2, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,316] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=38, local_rank=2, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,319] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=50, local_rank=2, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,313] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=55, local_rank=3, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,314] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=71, local_rank=3, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,320] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=31, local_rank=3, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,319] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=63, local_rank=3, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,316] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=19, local_rank=3, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,314] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=75, local_rank=3, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,320] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=23, local_rank=3, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,315] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=95, local_rank=3, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,318] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=43, local_rank=3, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,315] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=67, local_rank=3, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,316] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=35, local_rank=3, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,320] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=27, local_rank=3, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,312] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=91, local_rank=3, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,317] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=10, local_rank=2, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,319] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=59, local_rank=3, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,317] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=83, local_rank=3, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,313] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=54, local_rank=2, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,314] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=70, local_rank=2, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,320] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=30, local_rank=2, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,319] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=62, local_rank=2, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,316] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=18, local_rank=2, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,314] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=74, local_rank=2, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,320] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=22, local_rank=2, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,315] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=94, local_rank=2, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,318] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=42, local_rank=2, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,315] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=66, local_rank=2, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,316] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=34, local_rank=2, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,320] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=26, local_rank=2, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,313] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=90, local_rank=2, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,317] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=11, local_rank=3, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,319] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=58, local_rank=2, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,317] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=82, local_rank=2, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,312] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=79, local_rank=3, world_size=96, master_addr=10.6.14.20, master_port=29500 [2023-11-09 17:32:08,312] [INFO] [comm.py:659:mpi_discovery] Discovered MPI settings of world_rank=78, local_rank=2, world_size=96, master_addr=10.6.14.20, master_port=29500 f14r1n19:18664:18664 [0] NCCL INFO Bootstrap : Using ib0:11.6.14.20<0> f14r1n19:18664:18664 [0] NCCL INFO Plugin name set by env to librccl-net-none.so f14r1n19:18664:18664 [0] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation RCCL version 2.13.4+hip5.4 HEAD:82f11f7 f14r1n19:18664:20445 [0] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.20<0> f14r1n19:18664:20445 [0] NCCL INFO Using network IB f14r1n19:18663:18663 [1] NCCL INFO Bootstrap : Using ib0:11.6.14.20<0> f14r1n19:18663:18663 [1] NCCL INFO Plugin name set by env to librccl-net-none.so f14r1n19:18663:18663 [1] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r1n19:18666:18666 [3] NCCL INFO Bootstrap : Using ib0:11.6.14.20<0> f14r1n19:18666:18666 [3] NCCL INFO Plugin name set by env to librccl-net-none.so f14r1n19:18665:18665 [2] NCCL INFO Bootstrap : Using ib0:11.6.14.20<0> f14r1n19:18665:18665 [2] NCCL INFO Plugin name set by env to librccl-net-none.so f14r1n19:18666:18666 [3] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r1n19:18665:18665 [2] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n15:32396:32396 [0] NCCL INFO Bootstrap : Using ib0:11.6.14.36<0> f14r2n15:32396:32396 [0] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n15:32398:32398 [1] NCCL INFO Bootstrap : Using ib0:11.6.14.36<0> f14r2n15:32398:32398 [1] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n15:32395:32395 [2] NCCL INFO Bootstrap : Using ib0:11.6.14.36<0> f14r2n15:32395:32395 [2] NCCL INFO Plugin name set by env to librccl-net-none.so f14r3n00:20870:20870 [0] NCCL INFO Bootstrap : Using ib0:11.6.14.41<0> f14r3n00:20870:20870 [0] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n15:32397:32397 [3] NCCL INFO Bootstrap : Using ib0:11.6.14.36<0> f14r2n15:32397:32397 [3] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n15:32396:32396 [0] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n15:32398:32398 [1] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n15:32397:32397 [3] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n15:32395:32395 [2] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r3n00:20873:20873 [1] NCCL INFO Bootstrap : Using ib0:11.6.14.41<0> f14r3n00:20873:20873 [1] NCCL INFO Plugin name set by env to librccl-net-none.so f14r3n00:20871:20871 [3] NCCL INFO Bootstrap : Using ib0:11.6.14.41<0> f14r3n00:20871:20871 [3] NCCL INFO Plugin name set by env to librccl-net-none.so f14r3n00:20872:20872 [2] NCCL INFO Bootstrap : Using ib0:11.6.14.41<0> f14r3n00:20872:20872 [2] NCCL INFO Plugin name set by env to librccl-net-none.so f14r3n00:20870:20870 [0] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r3n00:20873:20873 [1] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r3n00:20872:20872 [2] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r3n00:20871:20871 [3] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r3n02:32370:32370 [0] NCCL INFO Bootstrap : Using ib0:11.6.14.43<0> f14r3n02:32370:32370 [0] NCCL INFO Plugin name set by env to librccl-net-none.so f14r3n02:32369:32369 [1] NCCL INFO Bootstrap : Using ib0:11.6.14.43<0> f14r3n02:32369:32369 [1] NCCL INFO Plugin name set by env to librccl-net-none.so f14r3n02:32368:32368 [3] NCCL INFO Bootstrap : Using ib0:11.6.14.43<0> f14r3n02:32367:32367 [2] NCCL INFO Bootstrap : Using ib0:11.6.14.43<0> f14r3n02:32368:32368 [3] NCCL INFO Plugin name set by env to librccl-net-none.so f14r3n02:32367:32367 [2] NCCL INFO Plugin name set by env to librccl-net-none.so f14r1n19:18663:20642 [1] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.20<0> f14r1n19:18663:20642 [1] NCCL INFO Using network IB f14r1n19:18666:20640 [3] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.20<0> f14r1n19:18666:20640 [3] NCCL INFO Using network IB f14r1n19:18665:20644 [2] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.20<0> f14r1n19:18665:20644 [2] NCCL INFO Using network IB f14r3n02:32369:32369 [1] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r3n02:32370:32370 [0] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r3n02:32368:32368 [3] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r3n02:32367:32367 [2] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n15:32396:1585 [0] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.36<0> f14r2n15:32396:1585 [0] NCCL INFO Using network IB f14r2n15:32398:1588 [1] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.36<0> f14r2n15:32398:1588 [1] NCCL INFO Using network IB f14r2n15:32395:1589 [2] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.36<0> f14r2n15:32395:1589 [2] NCCL INFO Using network IB f14r2n15:32397:1586 [3] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.36<0> f14r2n15:32397:1586 [3] NCCL INFO Using network IB f14r3n00:20873:22235 [1] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.41<0> f14r3n00:20873:22235 [1] NCCL INFO Using network IB f14r3n00:20871:22238 [3] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.41<0> f14r3n00:20871:22238 [3] NCCL INFO Using network IB f14r3n00:20870:22237 [0] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.41<0> f14r3n00:20870:22237 [0] NCCL INFO Using network IB f14r3n00:20872:22240 [2] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.41<0> f14r3n00:20872:22240 [2] NCCL INFO Using network IB f14r3n02:32369:1493 [1] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.43<0> f14r3n02:32369:1493 [1] NCCL INFO Using network IB f14r3n02:32367:1497 [2] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.43<0> f14r3n02:32367:1497 [2] NCCL INFO Using network IB f14r3n02:32370:1495 [0] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.43<0> f14r3n02:32370:1495 [0] NCCL INFO Using network IB f14r3n02:32368:1492 [3] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.43<0> f14r3n02:32368:1492 [3] NCCL INFO Using network IB f14r2n03:27606:27606 [0] NCCL INFO Bootstrap : Using ib0:11.6.14.24<0> f14r2n03:27606:27606 [0] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n03:27607:27607 [3] NCCL INFO Bootstrap : Using ib0:11.6.14.24<0> f14r2n03:27607:27607 [3] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n03:27606:27606 [0] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n03:27605:27605 [1] NCCL INFO Bootstrap : Using ib0:11.6.14.24<0> f14r2n03:27605:27605 [1] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n03:27607:27607 [3] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n03:27605:27605 [1] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n03:27608:27608 [2] NCCL INFO Bootstrap : Using ib0:11.6.14.24<0> f14r2n03:27608:27608 [2] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n03:27608:27608 [2] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n04:3629:3629 [1] NCCL INFO Bootstrap : Using ib0:11.6.14.25<0> f14r2n04:3629:3629 [1] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n04:3627:3627 [3] NCCL INFO Bootstrap : Using ib0:11.6.14.25<0> f14r2n04:3627:3627 [3] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n04:3629:3629 [1] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n04:3627:3627 [3] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n04:3628:3628 [0] NCCL INFO Bootstrap : Using ib0:11.6.14.25<0> f14r2n04:3628:3628 [0] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n04:3630:3630 [2] NCCL INFO Bootstrap : Using ib0:11.6.14.25<0> f14r2n04:3630:3630 [2] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n04:3628:3628 [0] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n04:3630:3630 [2] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n19:10613:10613 [0] NCCL INFO Bootstrap : Using ib0:11.6.14.40<0> f14r2n19:10613:10613 [0] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n19:10614:10614 [1] NCCL INFO Bootstrap : Using ib0:11.6.14.40<0> f14r2n19:10614:10614 [1] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n01:16211:16211 [0] NCCL INFO Bootstrap : Using ib0:11.6.14.22<0> f14r2n01:16211:16211 [0] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n19:10612:10612 [3] NCCL INFO Bootstrap : Using ib0:11.6.14.40<0> f14r2n19:10612:10612 [3] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n08:27953:27953 [0] NCCL INFO Bootstrap : Using ib0:11.6.14.29<0> f14r2n08:27953:27953 [0] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n01:16208:16208 [1] NCCL INFO Bootstrap : Using ib0:11.6.14.22<0> f14r2n01:16208:16208 [1] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n19:10615:10615 [2] NCCL INFO Bootstrap : Using ib0:11.6.14.40<0> f14r2n19:10615:10615 [2] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n01:16209:16209 [2] NCCL INFO Bootstrap : Using ib0:11.6.14.22<0> f14r2n01:16209:16209 [2] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n08:27952:27952 [1] NCCL INFO Bootstrap : Using ib0:11.6.14.29<0> f14r2n01:16210:16210 [3] NCCL INFO Bootstrap : Using ib0:11.6.14.22<0> f14r2n08:27952:27952 [1] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n01:16210:16210 [3] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n07:7788:7788 [3] NCCL INFO Bootstrap : Using ib0:11.6.14.28<0> f14r2n07:7788:7788 [3] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n08:27954:27954 [2] NCCL INFO Bootstrap : Using ib0:11.6.14.29<0> f14r2n08:27955:27955 [3] NCCL INFO Bootstrap : Using ib0:11.6.14.29<0> f14r2n08:27954:27954 [2] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n08:27955:27955 [3] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n07:7789:7789 [2] NCCL INFO Bootstrap : Using ib0:11.6.14.28<0> f14r2n07:7789:7789 [2] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n07:7791:7791 [0] NCCL INFO Bootstrap : Using ib0:11.6.14.28<0> f14r2n07:7791:7791 [0] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n07:7790:7790 [1] NCCL INFO Bootstrap : Using ib0:11.6.14.28<0> f14r2n07:7790:7790 [1] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n07:7790:7790 [1] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n07:7788:7788 [3] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n07:7789:7789 [2] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n07:7791:7791 [0] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n16:27453:27453 [0] NCCL INFO Bootstrap : Using ib0:11.6.14.37<0> f14r2n16:27453:27453 [0] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n16:27452:27452 [3] NCCL INFO Bootstrap : Using ib0:11.6.14.37<0> f14r2n16:27452:27452 [3] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n10:499:499 [0] NCCL INFO Bootstrap : Using ib0:11.6.14.31<0> f14r2n10:499:499 [0] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n16:27455:27455 [1] NCCL INFO Bootstrap : Using ib0:11.6.14.37<0> f14r2n16:27455:27455 [1] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n10:500:500 [1] NCCL INFO Bootstrap : Using ib0:11.6.14.31<0> f14r2n10:500:500 [1] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n16:27454:27454 [2] NCCL INFO Bootstrap : Using ib0:11.6.14.37<0> f14r2n16:27454:27454 [2] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n10:498:498 [2] NCCL INFO Bootstrap : Using ib0:11.6.14.31<0> f14r2n10:498:498 [2] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n10:502:502 [3] NCCL INFO Bootstrap : Using ib0:11.6.14.31<0> f14r2n10:502:502 [3] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n00:27304:27304 [0] NCCL INFO Bootstrap : Using ib0:11.6.14.21<0> f14r2n00:27304:27304 [0] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n00:27303:27303 [1] NCCL INFO Bootstrap : Using ib0:11.6.14.21<0> f14r2n00:27303:27303 [1] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n00:27305:27305 [3] NCCL INFO Bootstrap : Using ib0:11.6.14.21<0> f14r2n00:27305:27305 [3] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n00:27302:27302 [2] NCCL INFO Bootstrap : Using ib0:11.6.14.21<0> f14r2n00:27302:27302 [2] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n10:500:500 [1] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n10:498:498 [2] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n10:499:499 [0] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n10:502:502 [3] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n14:4184:4184 [0] NCCL INFO Bootstrap : Using ib0:11.6.14.35<0> f14r2n14:4184:4184 [0] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n16:27455:27455 [1] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n16:27452:27452 [3] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n16:27453:27453 [0] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n08:27952:27952 [1] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n16:27454:27454 [2] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n08:27953:27953 [0] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n19:10613:10613 [0] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n08:27955:27955 [3] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n19:10614:10614 [1] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n08:27954:27954 [2] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n19:10615:10615 [2] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n19:10612:10612 [3] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n01:16209:16209 [2] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n01:16211:16211 [0] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n01:16210:16210 [3] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n01:16208:16208 [1] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n14:4183:4183 [3] NCCL INFO Bootstrap : Using ib0:11.6.14.35<0> f14r2n14:4183:4183 [3] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n09:2438:2438 [0] NCCL INFO Bootstrap : Using ib0:11.6.14.30<0> f14r2n09:2438:2438 [0] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n09:2437:2437 [1] NCCL INFO Bootstrap : Using ib0:11.6.14.30<0> f14r2n09:2437:2437 [1] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n03:27607:29258 [3] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.24<0> f14r2n03:27607:29258 [3] NCCL INFO Using network IB f14r2n00:27302:27302 [2] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n00:27304:27304 [0] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n00:27303:27303 [1] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n03:27606:29257 [0] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.24<0> f14r2n03:27606:29257 [0] NCCL INFO Using network IB f14r2n00:27305:27305 [3] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n03:27608:29263 [2] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.24<0> f14r2n03:27608:29263 [2] NCCL INFO Using network IB f14r2n03:27605:29259 [1] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.24<0> f14r2n03:27605:29259 [1] NCCL INFO Using network IB f14r2n14:4186:4186 [1] NCCL INFO Bootstrap : Using ib0:11.6.14.35<0> f14r2n14:4186:4186 [1] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n09:2440:2440 [3] NCCL INFO Bootstrap : Using ib0:11.6.14.30<0> f14r2n09:2439:2439 [2] NCCL INFO Bootstrap : Using ib0:11.6.14.30<0> f14r2n09:2439:2439 [2] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n05:26238:26238 [0] NCCL INFO Bootstrap : Using ib0:11.6.14.26<0> f14r2n05:26238:26238 [0] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n09:2440:2440 [3] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n05:26239:26239 [1] NCCL INFO Bootstrap : Using ib0:11.6.14.26<0> f14r2n05:26239:26239 [1] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n14:4185:4185 [2] NCCL INFO Bootstrap : Using ib0:11.6.14.35<0> f14r2n14:4185:4185 [2] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n02:18587:18587 [0] NCCL INFO Bootstrap : Using ib0:11.6.14.23<0> f14r2n02:18587:18587 [0] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n05:26237:26237 [2] NCCL INFO Bootstrap : Using ib0:11.6.14.26<0> f14r2n05:26240:26240 [3] NCCL INFO Bootstrap : Using ib0:11.6.14.26<0> f14r2n05:26237:26237 [2] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n05:26240:26240 [3] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n02:18589:18589 [3] NCCL INFO Bootstrap : Using ib0:11.6.14.23<0> f14r2n02:18589:18589 [3] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n09:2440:2440 [3] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n09:2439:2439 [2] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n09:2437:2437 [1] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n09:2438:2438 [0] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n13:20108:20108 [0] NCCL INFO Bootstrap : Using ib0:11.6.14.34<0> f14r2n13:20108:20108 [0] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n02:18588:18588 [1] NCCL INFO Bootstrap : Using ib0:11.6.14.23<0> f14r2n02:18588:18588 [1] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n02:18586:18586 [2] NCCL INFO Bootstrap : Using ib0:11.6.14.23<0> f14r2n02:18586:18586 [2] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n13:20110:20110 [1] NCCL INFO Bootstrap : Using ib0:11.6.14.34<0> f14r2n14:4183:4183 [3] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n13:20110:20110 [1] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n14:4185:4185 [2] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n14:4186:4186 [1] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n17:14568:14568 [0] NCCL INFO Bootstrap : Using ib0:11.6.14.38<0> f14r2n17:14568:14568 [0] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n14:4184:4184 [0] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n05:26240:26240 [3] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n05:26237:26237 [2] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n05:26238:26238 [0] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n05:26239:26239 [1] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n02:18587:18587 [0] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n02:18589:18589 [3] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n13:20107:20107 [2] NCCL INFO Bootstrap : Using ib0:11.6.14.34<0> f14r2n13:20107:20107 [2] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n02:18588:18588 [1] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n04:3628:5488 [0] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.25<0> f14r2n04:3628:5488 [0] NCCL INFO Using network IB f14r2n02:18586:18586 [2] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n04:3629:5484 [1] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.25<0> f14r2n04:3629:5484 [1] NCCL INFO Using network IB f14r2n13:20109:20109 [3] NCCL INFO Bootstrap : Using ib0:11.6.14.34<0> f14r2n13:20109:20109 [3] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n04:3627:5487 [3] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.25<0> f14r2n04:3627:5487 [3] NCCL INFO Using network IB f14r2n04:3630:5491 [2] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.25<0> f14r2n04:3630:5491 [2] NCCL INFO Using network IB f14r2n17:14570:14570 [3] NCCL INFO Bootstrap : Using ib0:11.6.14.38<0> f14r2n17:14570:14570 [3] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n11:16952:16952 [0] NCCL INFO Bootstrap : Using ib0:11.6.14.32<0> f14r2n11:16952:16952 [0] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n17:14567:14567 [1] NCCL INFO Bootstrap : Using ib0:11.6.14.38<0> f14r2n17:14567:14567 [1] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n17:14569:14569 [2] NCCL INFO Bootstrap : Using ib0:11.6.14.38<0> f14r2n17:14569:14569 [2] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n11:16954:16954 [1] NCCL INFO Bootstrap : Using ib0:11.6.14.32<0> f14r2n11:16954:16954 [1] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n13:20107:20107 [2] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n13:20108:20108 [0] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n13:20109:20109 [3] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n06:8125:8125 [0] NCCL INFO Bootstrap : Using ib0:11.6.14.27<0> f14r2n06:8125:8125 [0] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n13:20110:20110 [1] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n06:8126:8126 [1] NCCL INFO Bootstrap : Using ib0:11.6.14.27<0> f14r2n06:8126:8126 [1] NCCL INFO Plugin name set by env to librccl-net-none.so f14r3n01:7395:7395 [1] NCCL INFO Bootstrap : Using ib0:11.6.14.42<0> f14r3n01:7395:7395 [1] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n06:8123:8123 [3] NCCL INFO Bootstrap : Using ib0:11.6.14.27<0> f14r2n06:8123:8123 [3] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n06:8124:8124 [2] NCCL INFO Bootstrap : Using ib0:11.6.14.27<0> f14r2n06:8124:8124 [2] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n18:11304:11304 [0] NCCL INFO Bootstrap : Using ib0:11.6.14.39<0> f14r2n18:11304:11304 [0] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n11:16951:16951 [2] NCCL INFO Bootstrap : Using ib0:11.6.14.32<0> f14r2n11:16953:16953 [3] NCCL INFO Bootstrap : Using ib0:11.6.14.32<0> f14r2n11:16951:16951 [2] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n11:16953:16953 [3] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n18:11306:11306 [1] NCCL INFO Bootstrap : Using ib0:11.6.14.39<0> f14r2n18:11306:11306 [1] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n18:11305:11305 [3] NCCL INFO Bootstrap : Using ib0:11.6.14.39<0> f14r2n18:11305:11305 [3] NCCL INFO Plugin name set by env to librccl-net-none.so f14r3n01:7394:7394 [3] NCCL INFO Bootstrap : Using ib0:11.6.14.42<0> f14r3n01:7394:7394 [3] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n18:11303:11303 [2] NCCL INFO Bootstrap : Using ib0:11.6.14.39<0> f14r2n18:11303:11303 [2] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n17:14569:14569 [2] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n17:14567:14567 [1] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n17:14570:14570 [3] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n17:14568:14568 [0] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n06:8126:8126 [1] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n06:8125:8125 [0] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n06:8123:8123 [3] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n06:8124:8124 [2] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n11:16952:16952 [0] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n11:16953:16953 [3] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n12:7614:7614 [0] NCCL INFO Bootstrap : Using ib0:11.6.14.33<0> f14r2n12:7614:7614 [0] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n11:16954:16954 [1] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n11:16951:16951 [2] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n12:7612:7612 [1] NCCL INFO Bootstrap : Using ib0:11.6.14.33<0> f14r2n12:7612:7612 [1] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n12:7613:7613 [2] NCCL INFO Bootstrap : Using ib0:11.6.14.33<0> f14r2n12:7613:7613 [2] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n18:11306:11306 [1] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n18:11304:11304 [0] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n18:11305:11305 [3] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r3n01:7397:7397 [2] NCCL INFO Bootstrap : Using ib0:11.6.14.42<0> f14r3n01:7397:7397 [2] NCCL INFO Plugin name set by env to librccl-net-none.so f14r2n18:11303:11303 [2] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n12:7615:7615 [3] NCCL INFO Bootstrap : Using ib0:11.6.14.33<0> f14r2n12:7615:7615 [3] NCCL INFO Plugin name set by env to librccl-net-none.so f14r3n01:7396:7396 [0] NCCL INFO Bootstrap : Using ib0:11.6.14.42<0> f14r3n01:7396:7396 [0] NCCL INFO Plugin name set by env to librccl-net-none.so f14r3n01:7394:7394 [3] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r3n01:7397:7397 [2] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r3n01:7395:7395 [1] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r3n01:7396:7396 [0] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n12:7613:7613 [2] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n12:7612:7612 [1] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n12:7615:7615 [3] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n12:7614:7614 [0] NCCL INFO NET/Plugin : No plugin found (librccl-net-none.so), using internal implementation f14r2n07:7791:9166 [0] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.28<0> f14r2n07:7791:9166 [0] NCCL INFO Using network IB f14r2n07:7790:9167 [1] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.28<0> f14r2n07:7790:9167 [1] NCCL INFO Using network IB f14r2n07:7789:9165 [2] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.28<0> f14r2n07:7789:9165 [2] NCCL INFO Using network IB f14r2n07:7788:9164 [3] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.28<0> f14r2n07:7788:9164 [3] NCCL INFO Using network IB f14r2n10:499:2241 [0] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.31<0> f14r2n10:499:2241 [0] NCCL INFO Using network IB f14r2n10:502:2243 [3] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.31<0> f14r2n10:502:2243 [3] NCCL INFO Using network IB f14r2n10:498:2244 [2] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.31<0> f14r2n10:498:2244 [2] NCCL INFO Using network IB f14r2n10:500:2242 [1] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.31<0> f14r2n10:500:2242 [1] NCCL INFO Using network IB f14r2n16:27455:28812 [1] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.37<0> f14r2n16:27455:28812 [1] NCCL INFO Using network IB f14r2n16:27453:28814 [0] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.37<0> f14r2n16:27453:28814 [0] NCCL INFO Using network IB f14r2n16:27454:28816 [2] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.37<0> f14r2n16:27454:28816 [2] NCCL INFO Using network IB f14r2n08:27952:29673 [1] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.29<0> f14r2n08:27952:29673 [1] NCCL INFO Using network IB f14r2n16:27452:28811 [3] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.37<0> f14r2n16:27452:28811 [3] NCCL INFO Using network IB f14r2n08:27954:29674 [2] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.29<0> f14r2n08:27954:29674 [2] NCCL INFO Using network IB f14r2n08:27953:29675 [0] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.29<0> f14r2n08:27953:29675 [0] NCCL INFO Using network IB f14r2n08:27955:29670 [3] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.29<0> f14r2n08:27955:29670 [3] NCCL INFO Using network IB f14r2n19:10613:12007 [0] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.40<0> f14r2n19:10613:12007 [0] NCCL INFO Using network IB f14r2n19:10615:12010 [2] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.40<0> f14r2n19:10615:12010 [2] NCCL INFO Using network IB f14r2n19:10612:12008 [3] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.40<0> f14r2n19:10612:12008 [3] NCCL INFO Using network IB f14r2n19:10614:12006 [1] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.40<0> f14r2n19:10614:12006 [1] NCCL INFO Using network IB f14r2n01:16210:17861 [3] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.22<0> f14r2n01:16210:17861 [3] NCCL INFO Using network IB f14r2n01:16211:17860 [0] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.22<0> f14r2n01:16211:17860 [0] NCCL INFO Using network IB f14r2n01:16208:17863 [1] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.22<0> f14r2n01:16208:17863 [1] NCCL INFO Using network IB f14r2n01:16209:17862 [2] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.22<0> f14r2n01:16209:17862 [2] NCCL INFO Using network IB f14r2n00:27303:28695 [1] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.21<0> f14r2n00:27303:28695 [1] NCCL INFO Using network IB f14r2n00:27305:28694 [3] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.21<0> f14r2n00:27305:28694 [3] NCCL INFO Using network IB f14r2n00:27302:28696 [2] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.21<0> f14r2n00:27302:28696 [2] NCCL INFO Using network IB f14r2n00:27304:28693 [0] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.21<0> f14r2n00:27304:28693 [0] NCCL INFO Using network IB f14r2n09:2439:4384 [2] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.30<0> f14r2n09:2439:4384 [2] NCCL INFO Using network IB f14r2n09:2438:4383 [0] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.30<0> f14r2n09:2438:4383 [0] NCCL INFO Using network IB f14r2n09:2440:4376 [3] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.30<0> f14r2n09:2440:4376 [3] NCCL INFO Using network IB f14r2n09:2437:4379 [1] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.30<0> f14r2n09:2437:4379 [1] NCCL INFO Using network IB f14r2n02:18586:20296 [2] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.23<0> f14r2n02:18586:20296 [2] NCCL INFO Using network IB f14r2n02:18588:20295 [1] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.23<0> f14r2n02:18588:20295 [1] NCCL INFO Using network IB f14r2n02:18587:20293 [0] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.23<0> f14r2n02:18587:20293 [0] NCCL INFO Using network IB f14r2n02:18589:20291 [3] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.23<0> f14r2n02:18589:20291 [3] NCCL INFO Using network IB f14r2n14:4185:6069 [2] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.35<0> f14r2n14:4185:6069 [2] NCCL INFO Using network IB f14r2n14:4183:6068 [3] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.35<0> f14r2n14:4183:6068 [3] NCCL INFO Using network IB f14r2n14:4186:6070 [1] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.35<0> f14r2n14:4186:6070 [1] NCCL INFO Using network IB f14r2n14:4184:6067 [0] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.35<0> f14r2n14:4184:6067 [0] NCCL INFO Using network IB f14r2n05:26240:27871 [3] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.26<0> f14r2n05:26240:27871 [3] NCCL INFO Using network IB f14r2n05:26238:27869 [0] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.26<0> f14r2n05:26238:27869 [0] NCCL INFO Using network IB f14r2n05:26239:27868 [1] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.26<0> f14r2n05:26239:27868 [1] NCCL INFO Using network IB f14r2n05:26237:27873 [2] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.26<0> f14r2n05:26237:27873 [2] NCCL INFO Using network IB f14r2n13:20108:21749 [0] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.34<0> f14r2n13:20108:21749 [0] NCCL INFO Using network IB f14r2n13:20109:21750 [3] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.34<0> f14r2n13:20109:21750 [3] NCCL INFO Using network IB f14r2n13:20107:21747 [2] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.34<0> f14r2n13:20107:21747 [2] NCCL INFO Using network IB f14r2n13:20110:21752 [1] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.34<0> f14r2n13:20110:21752 [1] NCCL INFO Using network IB f14r2n17:14569:16422 [2] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.38<0> f14r2n17:14569:16422 [2] NCCL INFO Using network IB f14r2n06:8124:9505 [2] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.27<0> f14r2n06:8124:9505 [2] NCCL INFO Using network IB f14r2n17:14568:16418 [0] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.38<0> f14r2n17:14568:16418 [0] NCCL INFO Using network IB f14r2n17:14567:16420 [1] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.38<0> f14r2n17:14567:16420 [1] NCCL INFO Using network IB f14r2n17:14570:16419 [3] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.38<0> f14r2n17:14570:16419 [3] NCCL INFO Using network IB f14r2n11:16952:18673 [0] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.32<0> f14r2n11:16952:18673 [0] NCCL INFO Using network IB f14r2n06:8125:9503 [0] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.27<0> f14r2n06:8125:9503 [0] NCCL INFO Using network IB f14r2n06:8126:9504 [1] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.27<0> f14r2n06:8126:9504 [1] NCCL INFO Using network IB f14r2n06:8123:9506 [3] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.27<0> f14r2n06:8123:9506 [3] NCCL INFO Using network IB f14r2n11:16951:18676 [2] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.32<0> f14r2n11:16951:18676 [2] NCCL INFO Using network IB f14r2n11:16953:18671 [3] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.32<0> f14r2n11:16953:18671 [3] NCCL INFO Using network IB f14r2n11:16954:18675 [1] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.32<0> f14r2n11:16954:18675 [1] NCCL INFO Using network IB f14r2n18:11305:13053 [3] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.39<0> f14r2n18:11305:13053 [3] NCCL INFO Using network IB f14r2n18:11303:13058 [2] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.39<0> f14r2n18:11303:13058 [2] NCCL INFO Using network IB f14r2n18:11306:13056 [1] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.39<0> f14r2n18:11306:13056 [1] NCCL INFO Using network IB f14r2n18:11304:13055 [0] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.39<0> f14r2n18:11304:13055 [0] NCCL INFO Using network IB f14r3n01:7396:9069 [0] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.42<0> f14r3n01:7396:9069 [0] NCCL INFO Using network IB f14r3n01:7397:9074 [2] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.42<0> f14r3n01:7397:9074 [2] NCCL INFO Using network IB f14r3n01:7395:9073 [1] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.42<0> f14r3n01:7395:9073 [1] NCCL INFO Using network IB f14r3n01:7394:9068 [3] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.42<0> f14r3n01:7394:9068 [3] NCCL INFO Using network IB f14r2n12:7614:8984 [0] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.33<0> f14r2n12:7614:8984 [0] NCCL INFO Using network IB f14r2n12:7615:8980 [3] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.33<0> f14r2n12:7615:8980 [3] NCCL INFO Using network IB f14r2n12:7612:8983 [1] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.33<0> f14r2n12:7612:8983 [1] NCCL INFO Using network IB f14r2n12:7613:8982 [2] NCCL INFO NET/IB : Using [0]mlx5_0:1/IB [RO]; OOB ib0:11.6.14.33<0> f14r2n12:7613:8982 [2] NCCL INFO Using network IB f14r2n07:7790:9167 [1] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n12:7612:8983 [1] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n18:11306:13056 [1] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n08:27955:29670 [3] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n08:27953:29675 [0] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n12:7614:8984 [0] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n19:10613:12007 [0] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n13:20109:21750 [3] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n13:20108:21749 [0] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n07:7788:9164 [3] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n08:27952:29673 [1] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n07:7789:9165 [2] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n14:4186:6070 [1] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n08:27954:29674 [2] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n10:502:2243 [3] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r3n02:32370:1495 [0] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n10:498:2244 [2] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r3n02:32369:1493 [1] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n19:10612:12008 [3] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n10:499:2241 [0] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n12:7613:8982 [2] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n02:18588:20295 [1] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n12:7615:8980 [3] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n07:7791:9166 [0] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n09:2437:4379 [1] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n17:14570:16419 [3] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r3n01:7394:9068 [3] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n17:14567:16420 [1] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r3n01:7395:9073 [1] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n11:16952:18673 [0] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n05:26239:27868 [1] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n10:500:2242 [1] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n15:32396:1585 [0] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r3n01:7397:9074 [2] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n15:32398:1588 [1] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r3n01:7396:9069 [0] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n14:4183:6068 [3] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n19:10615:12010 [2] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n19:10614:12006 [1] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n03:27607:29258 [3] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r3n02:32367:1497 [2] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n18:11305:13053 [3] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n18:11303:13058 [2] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n11:16954:18675 [1] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n09:2439:4384 [2] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n18:11304:13055 [0] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n14:4185:6069 [2] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n03:27608:29263 [2] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n13:20110:21752 [1] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n14:4184:6067 [0] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n13:20107:21747 [2] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n15:32397:1586 [3] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n15:32395:1589 [2] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n09:2440:4376 [3] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n05:26238:27869 [0] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r3n02:32368:1492 [3] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n09:2438:4383 [0] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n02:18587:20293 [0] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n02:18586:20296 [2] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n11:16953:18671 [3] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n02:18589:20291 [3] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n11:16951:18676 [2] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n07:7790:9167 [1] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n17:14569:16422 [2] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n00:27303:28695 [1] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n17:14568:16418 [0] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r3n00:20872:22240 [2] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r3n00:20871:22238 [3] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r3n00:20870:22237 [0] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r3n00:20873:22235 [1] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n05:26237:27873 [2] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n05:26240:27871 [3] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n03:27605:29259 [1] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n03:27606:29257 [0] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n07:7790:9167 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n08:27955:29670 [3] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n00:27302:28696 [2] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n08:27953:29675 [0] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n00:27305:28694 [3] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n18:11306:13056 [1] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n07:7788:9164 [3] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n00:27304:28693 [0] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n19:10613:12007 [0] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n07:7789:9165 [2] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n08:27955:29670 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n01:16210:17861 [3] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n01:16211:17860 [0] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n01:16208:17863 [1] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n08:27952:29673 [1] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r1n19:18663:20642 [1] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n01:16209:17862 [2] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n07:7791:9166 [0] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r1n19:18666:20640 [3] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n14:4186:6070 [1] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n08:27954:29674 [2] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r1n19:18664:20445 [0] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n08:27953:29675 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r3n02:32370:1495 [0] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n07:7788:9164 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n10:502:2243 [3] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n18:11306:13056 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n13:20109:21750 [3] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r1n19:18665:20644 [2] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n10:498:2244 [2] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n13:20108:21749 [0] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n02:18588:20295 [1] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n19:10613:12007 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n07:7789:9165 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n19:10612:12008 [3] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n07:7791:9166 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r3n02:32369:1493 [1] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n08:27952:29673 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n08:27954:29674 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n10:499:2241 [0] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r3n01:7394:9068 [3] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n14:4186:6070 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n09:2437:4379 [1] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r3n02:32370:1495 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n13:20109:21750 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n19:10615:12010 [2] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r3n02:32367:1497 [2] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n13:20108:21749 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n10:502:2243 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n05:26239:27868 [1] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r3n02:32369:1493 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n10:500:2242 [1] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n18:11305:13053 [3] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n02:18588:20295 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n19:10614:12006 [1] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r3n02:32368:1492 [3] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n10:498:2244 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n19:10612:12008 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r3n01:7395:9073 [1] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n14:4183:6068 [3] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n10:499:2241 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r3n01:7394:9068 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n09:2437:4379 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n13:20110:21752 [1] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n17:14570:16419 [3] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n18:11304:13055 [0] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n10:500:2242 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r3n01:7397:9074 [2] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n09:2439:4384 [2] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n13:20107:21747 [2] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n17:14567:16420 [1] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n18:11303:13058 [2] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n19:10615:12010 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n03:27607:29258 [3] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n14:4185:6069 [2] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r3n02:32367:1497 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n05:26238:27869 [0] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n02:18587:20293 [0] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r3n01:7396:9069 [0] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n09:2438:4383 [0] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n18:11305:13053 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n19:10614:12006 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n03:27608:29263 [2] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n14:4184:6067 [0] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r3n02:32368:1492 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n05:26239:27868 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r3n01:7395:9073 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n09:2440:4376 [3] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n18:11304:13055 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n03:27607:29258 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n14:4183:6068 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n05:26237:27873 [2] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n00:27303:28695 [1] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n17:14570:16419 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n13:20110:21752 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n02:18589:20291 [3] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n11:16954:18675 [1] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r3n00:20872:22240 [2] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n15:32398:1588 [1] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r3n01:7397:9074 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n09:2439:4384 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n18:11303:13058 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n03:27605:29259 [1] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n14:4185:6069 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n05:26238:27869 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n17:14567:16420 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n13:20107:21747 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n02:18586:20296 [2] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n11:16953:18671 [3] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n15:32397:1586 [3] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r3n01:7396:9069 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n09:2438:4383 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n03:27608:29263 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n14:4184:6067 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n05:26240:27871 [3] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n17:14568:16418 [0] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n02:18587:20293 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n11:16951:18676 [2] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n15:32395:1589 [2] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n00:27303:28695 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n12:7614:8984 [0] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r3n00:20872:22240 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n09:2440:4376 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n03:27606:29257 [0] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n05:26237:27873 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n17:14569:16422 [2] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n02:18589:20291 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n11:16952:18673 [0] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n15:32396:1585 [0] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n00:27302:28696 [2] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n12:7613:8982 [2] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r3n00:20871:22238 [3] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n03:27605:29259 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n05:26240:27871 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n17:14568:16418 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n02:18586:20296 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n00:27305:28694 [3] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n12:7612:8983 [1] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r3n00:20870:22237 [0] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n03:27606:29257 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n17:14569:16422 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n00:27304:28693 [0] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n12:7615:8980 [3] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r3n00:20873:22235 [1] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n01:16210:17861 [3] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n11:16953:18671 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n00:27302:28696 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n12:7614:8984 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r3n00:20871:22238 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n01:16211:17860 [0] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n11:16951:18676 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n15:32397:1586 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n00:27305:28694 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n12:7613:8982 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r3n00:20870:22237 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n11:16952:18673 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n15:32395:1589 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n00:27304:28693 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n12:7612:8983 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r3n00:20873:22235 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n11:16954:18675 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n15:32396:1585 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n01:16210:17861 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n12:7615:8980 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n15:32398:1588 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n01:16208:17863 [1] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n01:16209:17862 [2] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n01:16211:17860 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r1n19:18666:20640 [3] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r1n19:18664:20445 [0] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r1n19:18665:20644 [2] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r1n19:18663:20642 [1] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n01:16208:17863 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n01:16209:17862 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r1n19:18664:20445 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r1n19:18665:20644 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r1n19:18663:20642 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r1n19:18666:20640 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n04:3630:5491 [2] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n04:3627:5487 [3] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n04:3629:5484 [1] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n04:3628:5488 [0] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n16:27454:28816 [2] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n16:27455:28812 [1] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n16:27452:28811 [3] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n16:27453:28814 [0] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n06:8123:9506 [3] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n06:8124:9505 [2] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n06:8126:9504 [1] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n06:8125:9503 [0] NCCL INFO rocm_smi_lib: version 2.8.0.0 f14r2n04:3630:5491 [2] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n04:3627:5487 [3] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n04:3629:5484 [1] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n04:3628:5488 [0] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n04:3630:5491 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n04:3627:5487 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n04:3629:5484 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n04:3628:5488 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n06:8123:9506 [3] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n16:27453:28814 [0] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n16:27454:28816 [2] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n16:27455:28812 [1] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n06:8124:9505 [2] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n16:27452:28811 [3] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n06:8125:9503 [0] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n06:8126:9504 [1] NCCL INFO NCCL_P2P_LEVEL set by environment to SYS f14r2n16:27453:28814 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n06:8123:9506 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n16:27454:28816 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n06:8124:9505 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n16:27455:28812 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n16:27452:28811 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n06:8125:9503 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n06:8126:9504 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n16:27453:28814 [0] NCCL INFO Trees [0] 69/-1/-1->68->73 [1] 69/64/-1->68->76 comm 0x2ba180000ab0 nRanks 96 busId 4000 f14r2n17:14568:16418 [0] NCCL INFO Trees [0] 73/76/-1->72->81 [1] 73/-1/-1->72->69 comm 0x2acb44000ab0 nRanks 96 busId 4000 f14r2n17:14567:16420 [1] NCCL INFO Trees [0] 74/68/-1->73->72 [1] 74/-1/-1->73->72 comm 0x2b0cc8000ab0 nRanks 96 busId 26000 f14r2n16:27455:28812 [1] NCCL INFO Trees [0] 70/-1/-1->69->68 [1] 70/72/-1->69->68 comm 0x2b79a4000ab0 nRanks 96 busId 26000 f14r2n17:14569:16422 [2] NCCL INFO Trees [0] 75/-1/-1->74->73 [1] 75/-1/-1->74->73 comm 0x2b92f8000ab0 nRanks 96 busId 43000 f14r2n16:27454:28816 [2] NCCL INFO Trees [0] 71/-1/-1->70->69 [1] 71/-1/-1->70->69 comm 0x2b35e4000ab0 nRanks 96 busId 43000 f14r3n00:20873:22235 [1] NCCL INFO Trees [0] 86/-1/-1->85->84 [1] 86/88/-1->85->84 comm 0x2afed4000ab0 nRanks 96 busId 26000 f14r2n18:11303:13058 [2] NCCL INFO Trees [0] 79/-1/-1->78->77 [1] 79/-1/-1->78->77 comm 0x2b699c000ab0 nRanks 96 busId 43000 f14r2n19:10615:12010 [2] NCCL INFO Trees [0] 83/-1/-1->82->81 [1] 83/-1/-1->82->81 comm 0x2b1730000ab0 nRanks 96 busId 43000 f14r2n17:14570:16419 [3] NCCL INFO Trees [0] -1/-1/-1->75->74 [1] -1/-1/-1->75->74 comm 0x2bacc8000ab0 nRanks 96 busId 63000 f14r2n16:27452:28811 [3] NCCL INFO Trees [0] -1/-1/-1->71->70 [1] -1/-1/-1->71->70 comm 0x2b6498000ab0 nRanks 96 busId 63000 f14r3n00:20872:22240 [2] NCCL INFO Trees [0] 87/-1/-1->86->85 [1] 87/-1/-1->86->85 comm 0x2b3570000ab0 nRanks 96 busId 43000 f14r2n18:11305:13053 [3] NCCL INFO Trees [0] -1/-1/-1->79->78 [1] -1/-1/-1->79->78 comm 0x2b82a8000ab0 nRanks 96 busId 63000 f14r2n19:10613:12007 [0] NCCL INFO Trees [0] 81/88/-1->80->64 [1] 81/-1/-1->80->84 comm 0x2b8fb4000ab0 nRanks 96 busId 4000 f14r3n01:7394:9068 [3] NCCL INFO Trees [0] -1/-1/-1->91->90 [1] -1/-1/-1->91->90 comm 0x2aee1c000ab0 nRanks 96 busId 63000 f14r3n00:20871:22238 [3] NCCL INFO Trees [0] -1/-1/-1->87->86 [1] -1/-1/-1->87->86 comm 0x2b450c000ab0 nRanks 96 busId 63000 f14r2n18:11306:13056 [1] NCCL INFO Trees [0] 78/-1/-1->77->76 [1] 78/84/-1->77->76 comm 0x2b1224000ab0 nRanks 96 busId 26000 f14r2n19:10614:12006 [1] NCCL INFO Trees [0] 82/72/-1->81->80 [1] 82/-1/-1->81->80 comm 0x2b3b88000ab0 nRanks 96 busId 26000 f14r3n01:7396:9069 [0] NCCL INFO Trees [0] 89/92/-1->88->80 [1] 89/-1/-1->88->85 comm 0x2b16ec000ab0 nRanks 96 busId 4000 f14r3n00:20870:22237 [0] NCCL INFO Trees [0] 85/-1/-1->84->89 [1] 85/80/-1->84->77 comm 0x2b4cdc000ab0 nRanks 96 busId 4000 f14r2n18:11304:13055 [0] NCCL INFO Trees [0] 77/-1/-1->76->72 [1] 77/68/-1->76->61 comm 0x2ab840000ab0 nRanks 96 busId 4000 f14r2n19:10612:12008 [3] NCCL INFO Trees [0] -1/-1/-1->83->82 [1] -1/-1/-1->83->82 comm 0x2b30d8000ab0 nRanks 96 busId 63000 f14r3n01:7397:9074 [2] NCCL INFO Trees [0] 91/-1/-1->90->89 [1] 91/-1/-1->90->89 comm 0x2ac180000ab0 nRanks 96 busId 43000 f14r3n01:7395:9073 [1] NCCL INFO Trees [0] 90/84/-1->89->88 [1] 90/-1/-1->89->88 comm 0x2b5940000ab0 nRanks 96 busId 26000 f14r3n02:32370:1495 [0] NCCL INFO Trees [0] 93/-1/-1->92->88 [1] 93/28/-1->92->-1 comm 0x2b0fcc000ab0 nRanks 96 busId 4000 f14r3n02:32369:1493 [1] NCCL INFO Trees [0] 94/-1/-1->93->92 [1] 94/-1/-1->93->92 comm 0x2ac184000ab0 nRanks 96 busId 26000 f14r3n02:32367:1497 [2] NCCL INFO Trees [0] 95/-1/-1->94->93 [1] 95/-1/-1->94->93 comm 0x2ac760000ab0 nRanks 96 busId 43000 f14r3n02:32368:1492 [3] NCCL INFO Trees [0] -1/-1/-1->95->94 [1] -1/-1/-1->95->94 comm 0x2ac104000ab0 nRanks 96 busId 63000 f14r1n19:18664:20445 [0] NCCL INFO Channel 00/02 : 0 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 f14r1n19:18664:20445 [0] NCCL INFO Channel 01/02 : 0 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 f14r1n19:18666:20640 [3] NCCL INFO Trees [0] -1/-1/-1->3->2 [1] -1/-1/-1->3->2 comm 0x2b3468000ab0 nRanks 96 busId 63000 f14r1n19:18664:20445 [0] NCCL INFO Trees [0] 1/64/-1->0->-1 [1] 1/-1/-1->0->4 comm 0x2b093c000ab0 nRanks 96 busId 4000 f14r1n19:18663:20642 [1] NCCL INFO Trees [0] 2/-1/-1->1->0 [1] 2/-1/-1->1->0 comm 0x2b6d1c000ab0 nRanks 96 busId 26000 f14r1n19:18665:20644 [2] NCCL INFO Trees [0] 3/-1/-1->2->1 [1] 3/-1/-1->2->1 comm 0x2aeb10000ab0 nRanks 96 busId 43000 f14r2n01:16211:17860 [0] NCCL INFO Trees [0] 9/12/-1->8->17 [1] 9/-1/-1->8->5 comm 0x2afec8000ab0 nRanks 96 busId 4000 f14r2n00:27304:28693 [0] NCCL INFO Trees [0] 5/-1/-1->4->9 [1] 5/0/-1->4->12 comm 0x2ba3ec000ab0 nRanks 96 busId 4000 f14r2n00:27303:28695 [1] NCCL INFO Trees [0] 6/-1/-1->5->4 [1] 6/8/-1->5->4 comm 0x2b52d4000ab0 nRanks 96 busId 26000 f14r2n01:16208:17863 [1] NCCL INFO Trees [0] 10/4/-1->9->8 [1] 10/-1/-1->9->8 comm 0x2b557c000ab0 nRanks 96 busId 26000 f14r2n01:16209:17862 [2] NCCL INFO Trees [0] 11/-1/-1->10->9 [1] 11/-1/-1->10->9 comm 0x2b4998000ab0 nRanks 96 busId 43000 f14r2n00:27305:28694 [3] NCCL INFO Trees [0] -1/-1/-1->7->6 [1] -1/-1/-1->7->6 comm 0x2b0858000ab0 nRanks 96 busId 63000 f14r2n01:16210:17861 [3] NCCL INFO Trees [0] -1/-1/-1->11->10 [1] -1/-1/-1->11->10 comm 0x2b37a8000ab0 nRanks 96 busId 63000 f14r2n00:27302:28696 [2] NCCL INFO Trees [0] 7/-1/-1->6->5 [1] 7/-1/-1->6->5 comm 0x2ba338000ab0 nRanks 96 busId 43000 f14r2n02:18587:20293 [0] NCCL INFO Trees [0] 13/-1/-1->12->8 [1] 13/4/-1->12->28 comm 0x2b5228000ab0 nRanks 96 busId 4000 f14r2n02:18588:20295 [1] NCCL INFO Trees [0] 14/-1/-1->13->12 [1] 14/20/-1->13->12 comm 0x2b488c000ab0 nRanks 96 busId 26000 f14r2n02:18586:20296 [2] NCCL INFO Trees [0] 15/-1/-1->14->13 [1] 15/-1/-1->14->13 comm 0x2b47a8000ab0 nRanks 96 busId 43000 f14r2n02:18589:20291 [3] NCCL INFO Trees [0] -1/-1/-1->15->14 [1] -1/-1/-1->15->14 comm 0x2b65e0000ab0 nRanks 96 busId 63000 f14r2n03:27605:29259 [1] NCCL INFO Trees [0] 18/8/-1->17->16 [1] 18/-1/-1->17->16 comm 0x2bad5c000ab0 nRanks 96 busId 26000 f14r2n03:27606:29257 [0] NCCL INFO Trees [0] 17/24/-1->16->33 [1] 17/-1/-1->16->20 comm 0x2ae958000ab0 nRanks 96 busId 4000 f14r2n03:27607:29258 [3] NCCL INFO Trees [0] -1/-1/-1->19->18 [1] -1/-1/-1->19->18 comm 0x2ac3f0000ab0 nRanks 96 busId 63000 f14r2n03:27608:29263 [2] NCCL INFO Trees [0] 19/-1/-1->18->17 [1] 19/-1/-1->18->17 comm 0x2ac780000ab0 nRanks 96 busId 43000 f14r2n04:3628:5488 [0] NCCL INFO Trees [0] 21/-1/-1->20->25 [1] 21/16/-1->20->13 comm 0x2ac12c000ab0 nRanks 96 busId 4000 f14r2n04:3629:5484 [1] NCCL INFO Trees [0] 22/-1/-1->21->20 [1] 22/24/-1->21->20 comm 0x2ae624000ab0 nRanks 96 busId 26000 f14r2n04:3630:5491 [2] NCCL INFO Trees [0] 23/-1/-1->22->21 [1] 23/-1/-1->22->21 comm 0x2b0cec000ab0 nRanks 96 busId 43000 f14r2n04:3627:5487 [3] NCCL INFO Trees [0] -1/-1/-1->23->22 [1] -1/-1/-1->23->22 comm 0x2afa70000ab0 nRanks 96 busId 63000 f14r2n16:27453:28814 [0] NCCL INFO Channel 00/0 : 67[63000] -> 68[4000] [receive] via NET/IB/0 comm 0x2ba180000ab0 nRanks 96 f14r2n19:10613:12007 [0] NCCL INFO Channel 00/0 : 79[63000] -> 80[4000] [receive] via NET/IB/0 comm 0x2b8fb4000ab0 nRanks 96 f14r2n05:26238:27869 [0] NCCL INFO Trees [0] 25/28/-1->24->16 [1] 25/-1/-1->24->21 comm 0x2b5734000ab0 nRanks 96 busId 4000 f14r2n05:26239:27868 [1] NCCL INFO Trees [0] 26/20/-1->25->24 [1] 26/-1/-1->25->24 comm 0x2b481c000ab0 nRanks 96 busId 26000 f14r2n05:26237:27873 [2] NCCL INFO Trees [0] 27/-1/-1->26->25 [1] 27/-1/-1->26->25 comm 0x2b3388000ab0 nRanks 96 busId 43000 f14r2n17:14569:16422 [2] NCCL INFO Channel 00 : 74[43000] -> 75[63000] via P2P/IPC comm 0x2b92f8000ab0 nRanks 96 f14r3n00:20870:22237 [0] NCCL INFO Channel 00/0 : 83[63000] -> 84[4000] [receive] via NET/IB/0 comm 0x2b4cdc000ab0 nRanks 96 f14r2n17:14568:16418 [0] NCCL INFO Channel 00/0 : 71[63000] -> 72[4000] [receive] via NET/IB/0 comm 0x2acb44000ab0 nRanks 96 f14r3n00:20873:22235 [1] NCCL INFO Channel 00 : 85[26000] -> 86[43000] via P2P/IPC comm 0x2afed4000ab0 nRanks 96 f14r2n05:26240:27871 [3] NCCL INFO Trees [0] -1/-1/-1->27->26 [1] -1/-1/-1->27->26 comm 0x2b4558000ab0 nRanks 96 busId 63000 f14r3n00:20872:22240 [2] NCCL INFO Channel 00 : 86[43000] -> 87[63000] via P2P/IPC comm 0x2b3570000ab0 nRanks 96 f14r2n18:11304:13055 [0] NCCL INFO Channel 00/0 : 75[63000] -> 76[4000] [receive] via NET/IB/0 comm 0x2ab840000ab0 nRanks 96 f14r3n01:7396:9069 [0] NCCL INFO Channel 00/0 : 87[63000] -> 88[4000] [receive] via NET/IB/0 comm 0x2b16ec000ab0 nRanks 96 f14r2n15:32398:1588 [1] NCCL INFO Trees [0] 66/32/-1->65->64 [1] 66/-1/-1->65->64 comm 0x2b23cc000ab0 nRanks 96 busId 26000 f14r2n14:4183:6068 [3] NCCL INFO Trees [0] -1/-1/-1->63->62 [1] -1/-1/-1->63->62 comm 0x2b2e20000ab0 nRanks 96 busId 63000 f14r2n16:27455:28812 [1] NCCL INFO Channel 00 : 69[26000] -> 70[43000] via P2P/IPC comm 0x2b79a4000ab0 nRanks 96 f14r2n18:11303:13058 [2] NCCL INFO Channel 00 : 78[43000] -> 79[63000] via P2P/IPC comm 0x2b699c000ab0 nRanks 96 f14r2n15:32395:1589 [2] NCCL INFO Trees [0] 67/-1/-1->66->65 [1] 67/-1/-1->66->65 comm 0x2b99d0000ab0 nRanks 96 busId 43000 f14r2n06:8125:9503 [0] NCCL INFO Trees [0] 29/-1/-1->28->24 [1] 29/12/-1->28->92 comm 0x2b7ed8000ab0 nRanks 96 busId 4000 f14r2n08:27952:29673 [1] NCCL INFO Trees [0] 38/-1/-1->37->36 [1] 38/40/-1->37->36 comm 0x2b1ef4000ab0 nRanks 96 busId 26000 f14r2n19:10615:12010 [2] NCCL INFO Channel 00 : 82[43000] -> 83[63000] via P2P/IPC comm 0x2b1730000ab0 nRanks 96 f14r2n07:7790:9167 [1] NCCL INFO Trees [0] 34/16/-1->33->32 [1] 34/-1/-1->33->32 comm 0x2b0138000ab0 nRanks 96 busId 26000 f14r2n17:14567:16420 [1] NCCL INFO Channel 00 : 73[26000] -> 74[43000] via P2P/IPC comm 0x2b0cc8000ab0 nRanks 96 f14r3n02:32370:1495 [0] NCCL INFO Channel 00/0 : 91[63000] -> 92[4000] [receive] via NET/IB/0 comm 0x2b0fcc000ab0 nRanks 96 f14r2n18:11306:13056 [1] NCCL INFO Channel 00 : 77[26000] -> 78[43000] via P2P/IPC comm 0x2b1224000ab0 nRanks 96 f14r2n15:32397:1586 [3] NCCL INFO Trees [0] -1/-1/-1->67->66 [1] -1/-1/-1->67->66 comm 0x2b0aa0000ab0 nRanks 96 busId 63000 f14r2n06:8126:9504 [1] NCCL INFO Trees [0] 30/-1/-1->29->28 [1] 30/60/-1->29->28 comm 0x2b486c000ab0 nRanks 96 busId 26000 f14r2n08:27953:29675 [0] NCCL INFO Trees [0] 37/-1/-1->36->41 [1] 37/32/-1->36->44 comm 0x2b64a8000ab0 nRanks 96 busId 4000 f14r2n19:10614:12006 [1] NCCL INFO Channel 00 : 81[26000] -> 82[43000] via P2P/IPC comm 0x2b3b88000ab0 nRanks 96 f14r2n07:7791:9166 [0] NCCL INFO Trees [0] 33/48/-1->32->65 [1] 33/-1/-1->32->36 comm 0x2bab08000ab0 nRanks 96 busId 4000 f14r2n17:14569:16422 [2] NCCL INFO Channel 01 : 74[43000] -> 75[63000] via P2P/IPC comm 0x2b92f8000ab0 nRanks 96 f14r2n10:502:2243 [3] NCCL INFO Trees [0] -1/-1/-1->47->46 [1] -1/-1/-1->47->46 comm 0x2af01c000ab0 nRanks 96 busId 63000 f14r2n16:27454:28816 [2] NCCL INFO Channel 00 : 70[43000] -> 71[63000] via P2P/IPC comm 0x2b35e4000ab0 nRanks 96 f14r3n00:20873:22235 [1] NCCL INFO Channel 01 : 85[26000] -> 86[43000] via P2P/IPC comm 0x2afed4000ab0 nRanks 96 f14r2n09:2440:4376 [3] NCCL INFO Trees [0] -1/-1/-1->43->42 [1] -1/-1/-1->43->42 comm 0x2b9c58000ab0 nRanks 96 busId 63000 f14r3n01:7395:9073 [1] NCCL INFO Channel 00 : 89[26000] -> 90[43000] via P2P/IPC comm 0x2b5940000ab0 nRanks 96 f14r2n18:11303:13058 [2] NCCL INFO Channel 01 : 78[43000] -> 79[63000] via P2P/IPC comm 0x2b699c000ab0 nRanks 96 f14r2n15:32396:1585 [0] NCCL INFO Trees [0] 65/80/-1->64->0 [1] 65/-1/-1->64->68 comm 0x2afd04000ab0 nRanks 96 busId 4000 f14r2n06:8124:9505 [2] NCCL INFO Trees [0] 31/-1/-1->30->29 [1] 31/-1/-1->30->29 comm 0x2b164c000ab0 nRanks 96 busId 43000 f14r2n08:27954:29674 [2] NCCL INFO Trees [0] 39/-1/-1->38->37 [1] 39/-1/-1->38->37 comm 0x2ae614000ab0 nRanks 96 busId 43000 f14r2n19:10615:12010 [2] NCCL INFO Channel 01 : 82[43000] -> 83[63000] via P2P/IPC comm 0x2b1730000ab0 nRanks 96 f14r2n07:7789:9165 [2] NCCL INFO Trees [0] 35/-1/-1->34->33 [1] 35/-1/-1->34->33 comm 0x2b51e4000ab0 nRanks 96 busId 43000 f14r2n17:14567:16420 [1] NCCL INFO Channel 01 : 73[26000] -> 74[43000] via P2P/IPC comm 0x2b0cc8000ab0 nRanks 96 f14r2n10:498:2244 [2] NCCL INFO Trees [0] 47/-1/-1->46->45 [1] 47/-1/-1->46->45 comm 0x2add2c000ab0 nRanks 96 busId 43000 f14r2n16:27455:28812 [1] NCCL INFO Channel 01 : 69[26000] -> 70[43000] via P2P/IPC comm 0x2b79a4000ab0 nRanks 96 f14r3n00:20872:22240 [2] NCCL INFO Channel 01 : 86[43000] -> 87[63000] via P2P/IPC comm 0x2b3570000ab0 nRanks 96 f14r2n09:2439:4384 [2] NCCL INFO Trees [0] 43/-1/-1->42->41 [1] 43/-1/-1->42->41 comm 0x2b6790000ab0 nRanks 96 busId 43000 f14r3n01:7397:9074 [2] NCCL INFO Channel 00 : 90[43000] -> 91[63000] via P2P/IPC comm 0x2ac180000ab0 nRanks 96 f14r2n11:16952:18673 [0] NCCL INFO Trees [0] 49/56/-1->48->32 [1] 49/-1/-1->48->52 comm 0x2b71fc000ab0 nRanks 96 busId 4000 f14r3n02:32369:1493 [1] NCCL INFO Channel 00 : 93[26000] -> 94[43000] via P2P/IPC comm 0x2ac184000ab0 nRanks 96 f14r2n14:4185:6069 [2] NCCL INFO Trees [0] 63/-1/-1->62->61 [1] 63/-1/-1->62->61 comm 0x2b2ac0000ab0 nRanks 96 busId 43000 f14r1n19:18664:20445 [0] NCCL INFO Channel 00/0 : 95[63000] -> 0[4000] [receive] via NET/IB/0 comm 0x2b093c000ab0 nRanks 96 f14r1n19:18663:20642 [1] NCCL INFO Channel 00 : 1[26000] -> 2[43000] via P2P/IPC comm 0x2b6d1c000ab0 nRanks 96 f14r1n19:18665:20644 [2] NCCL INFO Channel 00 : 2[43000] -> 3[63000] via P2P/IPC comm 0x2aeb10000ab0 nRanks 96 f14r2n18:11306:13056 [1] NCCL INFO Channel 01 : 77[26000] -> 78[43000] via P2P/IPC comm 0x2b1224000ab0 nRanks 96 f14r2n06:8123:9506 [3] NCCL INFO Trees [0] -1/-1/-1->31->30 [1] -1/-1/-1->31->30 comm 0x2af544000ab0 nRanks 96 busId 63000 f14r2n08:27955:29670 [3] NCCL INFO Trees [0] -1/-1/-1->39->38 [1] -1/-1/-1->39->38 comm 0x2b2994000ab0 nRanks 96 busId 63000 f14r2n19:10614:12006 [1] NCCL INFO Channel 01 : 81[26000] -> 82[43000] via P2P/IPC comm 0x2b3b88000ab0 nRanks 96 f14r2n07:7788:9164 [3] NCCL INFO Trees [0] -1/-1/-1->35->34 [1] -1/-1/-1->35->34 comm 0x2afc5c000ab0 nRanks 96 busId 63000 f14r2n10:500:2242 [1] NCCL INFO Trees [0] 46/-1/-1->45->44 [1] 46/52/-1->45->44 comm 0x2b0d5c000ab0 nRanks 96 busId 26000 f14r2n16:27454:28816 [2] NCCL INFO Channel 01 : 70[43000] -> 71[63000] via P2P/IPC comm 0x2b35e4000ab0 nRanks 96 f14r2n09:2437:4379 [1] NCCL INFO Trees [0] 42/36/-1->41->40 [1] 42/-1/-1->41->40 comm 0x2b5a30000ab0 nRanks 96 busId 26000 f14r3n01:7395:9073 [1] NCCL INFO Channel 01 : 89[26000] -> 90[43000] via P2P/IPC comm 0x2b5940000ab0 nRanks 96 f14r2n11:16954:18675 [1] NCCL INFO Trees [0] 50/40/-1->49->48 [1] 50/-1/-1->49->48 comm 0x2b73e4000ab0 nRanks 96 busId 26000 f14r3n02:32367:1497 [2] NCCL INFO Channel 00 : 94[43000] -> 95[63000] via P2P/IPC comm 0x2ac760000ab0 nRanks 96 f14r2n12:7614:8984 [0] NCCL INFO Trees [0] 53/-1/-1->52->57 [1] 53/48/-1->52->45 comm 0x2b0e24000ab0 nRanks 96 busId 4000 f14r2n01:16211:17860 [0] NCCL INFO Channel 00/0 : 7[63000] -> 8[4000] [receive] via NET/IB/0 comm 0x2afec8000ab0 nRanks 96 f14r1n19:18663:20642 [1] NCCL INFO Channel 01 : 1[26000] -> 2[43000] via P2P/IPC comm 0x2b6d1c000ab0 nRanks 96 f14r2n10:499:2241 [0] NCCL INFO Trees [0] 45/-1/-1->44->40 [1] 45/36/-1->44->60 comm 0x2b769c000ab0 nRanks 96 busId 4000 f14r2n09:2438:4383 [0] NCCL INFO Trees [0] 41/44/-1->40->49 [1] 41/-1/-1->40->37 comm 0x2ac780000ab0 nRanks 96 busId 4000 f14r3n01:7397:9074 [2] NCCL INFO Channel 01 : 90[43000] -> 91[63000] via P2P/IPC comm 0x2ac180000ab0 nRanks 96 f14r2n11:16951:18676 [2] NCCL INFO Trees [0] 51/-1/-1->50->49 [1] 51/-1/-1->50->49 comm 0x2ab7c8000ab0 nRanks 96 busId 43000 f14r3n02:32369:1493 [1] NCCL INFO Channel 01 : 93[26000] -> 94[43000] via P2P/IPC comm 0x2ac184000ab0 nRanks 96 f14r2n12:7612:8983 [1] NCCL INFO Trees [0] 54/-1/-1->53->52 [1] 54/56/-1->53->52 comm 0x2b0c4c000ab0 nRanks 96 busId 26000 f14r2n14:4184:6067 [0] NCCL INFO Trees [0] 61/-1/-1->60->56 [1] 61/44/-1->60->29 comm 0x2b9b3c000ab0 nRanks 96 busId 4000 f14r2n00:27304:28693 [0] NCCL INFO Channel 00/0 : 3[63000] -> 4[4000] [receive] via NET/IB/0 comm 0x2ba3ec000ab0 nRanks 96 f14r2n13:20108:21749 [0] NCCL INFO Trees [0] 57/60/-1->56->48 [1] 57/-1/-1->56->53 comm 0x2b2664000ab0 nRanks 96 busId 4000 f14r1n19:18665:20644 [2] NCCL INFO Channel 01 : 2[43000] -> 3[63000] via P2P/IPC comm 0x2aeb10000ab0 nRanks 96 f14r2n11:16953:18671 [3] NCCL INFO Trees [0] -1/-1/-1->51->50 [1] -1/-1/-1->51->50 comm 0x2b9a48000ab0 nRanks 96 busId 63000 f14r3n02:32367:1497 [2] NCCL INFO Channel 01 : 94[43000] -> 95[63000] via P2P/IPC comm 0x2ac760000ab0 nRanks 96 f14r2n12:7615:8980 [3] NCCL INFO Trees [0] -1/-1/-1->55->54 [1] -1/-1/-1->55->54 comm 0x2ada64000ab0 nRanks 96 busId 63000 f14r2n14:4186:6070 [1] NCCL INFO Trees [0] 62/-1/-1->61->60 [1] 62/76/-1->61->60 comm 0x2b88f4000ab0 nRanks 96 busId 26000 f14r2n00:27303:28695 [1] NCCL INFO Channel 00 : 5[26000] -> 6[43000] via P2P/IPC comm 0x2b52d4000ab0 nRanks 96 f14r2n13:20110:21752 [1] NCCL INFO Trees [0] 58/52/-1->57->56 [1] 58/-1/-1->57->56 comm 0x2b6fc8000ab0 nRanks 96 busId 26000 f14r2n02:18587:20293 [0] NCCL INFO Channel 00/0 : 11[63000] -> 12[4000] [receive] via NET/IB/0 comm 0x2b5228000ab0 nRanks 96 f14r2n12:7613:8982 [2] NCCL INFO Trees [0] 55/-1/-1->54->53 [1] 55/-1/-1->54->53 comm 0x2b5b2c000ab0 nRanks 96 busId 43000 f14r2n00:27302:28696 [2] NCCL INFO Channel 00 : 6[43000] -> 7[63000] via P2P/IPC comm 0x2ba338000ab0 nRanks 96 f14r2n13:20107:21747 [2] NCCL INFO Trees [0] 59/-1/-1->58->57 [1] 59/-1/-1->58->57 comm 0x2badc4000ab0 nRanks 96 busId 43000 f14r2n03:27606:29257 [0] NCCL INFO Channel 00/0 : 15[63000] -> 16[4000] [receive] via NET/IB/0 comm 0x2ae958000ab0 nRanks 96 f14r2n01:16208:17863 [1] NCCL INFO Channel 00 : 9[26000] -> 10[43000] via P2P/IPC comm 0x2b557c000ab0 nRanks 96 f14r2n00:27303:28695 [1] NCCL INFO Channel 01 : 5[26000] -> 6[43000] via P2P/IPC comm 0x2b52d4000ab0 nRanks 96 f14r2n13:20109:21750 [3] NCCL INFO Trees [0] -1/-1/-1->59->58 [1] -1/-1/-1->59->58 comm 0x2b5f6c000ab0 nRanks 96 busId 63000 f14r2n01:16209:17862 [2] NCCL INFO Channel 00 : 10[43000] -> 11[63000] via P2P/IPC comm 0x2b4998000ab0 nRanks 96 f14r2n00:27302:28696 [2] NCCL INFO Channel 01 : 6[43000] -> 7[63000] via P2P/IPC comm 0x2ba338000ab0 nRanks 96 f14r2n01:16208:17863 [1] NCCL INFO Channel 01 : 9[26000] -> 10[43000] via P2P/IPC comm 0x2b557c000ab0 nRanks 96 f14r2n03:27605:29259 [1] NCCL INFO Channel 00 : 17[26000] -> 18[43000] via P2P/IPC comm 0x2bad5c000ab0 nRanks 96 f14r2n02:18586:20296 [2] NCCL INFO Channel 00 : 14[43000] -> 15[63000] via P2P/IPC comm 0x2b47a8000ab0 nRanks 96 f14r2n01:16209:17862 [2] NCCL INFO Channel 01 : 10[43000] -> 11[63000] via P2P/IPC comm 0x2b4998000ab0 nRanks 96 f14r2n03:27608:29263 [2] NCCL INFO Channel 00 : 18[43000] -> 19[63000] via P2P/IPC comm 0x2ac780000ab0 nRanks 96 f14r2n02:18588:20295 [1] NCCL INFO Channel 00 : 13[26000] -> 14[43000] via P2P/IPC comm 0x2b488c000ab0 nRanks 96 f14r2n03:27605:29259 [1] NCCL INFO Channel 01 : 17[26000] -> 18[43000] via P2P/IPC comm 0x2bad5c000ab0 nRanks 96 f14r2n02:18588:20295 [1] NCCL INFO Channel 01 : 13[26000] -> 14[43000] via P2P/IPC comm 0x2b488c000ab0 nRanks 96 f14r2n05:26238:27869 [0] NCCL INFO Channel 00/0 : 23[63000] -> 24[4000] [receive] via NET/IB/0 comm 0x2b5734000ab0 nRanks 96 f14r2n03:27608:29263 [2] NCCL INFO Channel 01 : 18[43000] -> 19[63000] via P2P/IPC comm 0x2ac780000ab0 nRanks 96 f14r2n02:18586:20296 [2] NCCL INFO Channel 01 : 14[43000] -> 15[63000] via P2P/IPC comm 0x2b47a8000ab0 nRanks 96 f14r2n06:8125:9503 [0] NCCL INFO Channel 00/0 : 27[63000] -> 28[4000] [receive] via NET/IB/0 comm 0x2b7ed8000ab0 nRanks 96 f14r2n15:32396:1585 [0] NCCL INFO Channel 00/0 : 63[63000] -> 64[4000] [receive] via NET/IB/0 comm 0x2afd04000ab0 nRanks 96 f14r2n08:27953:29675 [0] NCCL INFO Channel 00/0 : 35[63000] -> 36[4000] [receive] via NET/IB/0 comm 0x2b64a8000ab0 nRanks 96 f14r2n05:26239:27868 [1] NCCL INFO Channel 00 : 25[26000] -> 26[43000] via P2P/IPC comm 0x2b481c000ab0 nRanks 96 f14r2n07:7791:9166 [0] NCCL INFO Channel 00/0 : 31[63000] -> 32[4000] [receive] via NET/IB/0 comm 0x2bab08000ab0 nRanks 96 f14r2n05:26237:27873 [2] NCCL INFO Channel 00 : 26[43000] -> 27[63000] via P2P/IPC comm 0x2b3388000ab0 nRanks 96 f14r2n15:32395:1589 [2] NCCL INFO Channel 00 : 66[43000] -> 67[63000] via P2P/IPC comm 0x2b99d0000ab0 nRanks 96 f14r2n10:499:2241 [0] NCCL INFO Channel 00/0 : 43[63000] -> 44[4000] [receive] via NET/IB/0 comm 0x2b769c000ab0 nRanks 96 f14r2n08:27952:29673 [1] NCCL INFO Channel 00 : 37[26000] -> 38[43000] via P2P/IPC comm 0x2b1ef4000ab0 nRanks 96 f14r2n06:8126:9504 [1] NCCL INFO Channel 00 : 29[26000] -> 30[43000] via P2P/IPC comm 0x2b486c000ab0 nRanks 96 f14r2n05:26237:27873 [2] NCCL INFO Channel 01 : 26[43000] -> 27[63000] via P2P/IPC comm 0x2b3388000ab0 nRanks 96 f14r2n05:26239:27868 [1] NCCL INFO Channel 01 : 25[26000] -> 26[43000] via P2P/IPC comm 0x2b481c000ab0 nRanks 96 f14r2n09:2438:4383 [0] NCCL INFO Channel 00/0 : 39[63000] -> 40[4000] [receive] via NET/IB/0 comm 0x2ac780000ab0 nRanks 96 f14r2n07:7789:9165 [2] NCCL INFO Channel 00 : 34[43000] -> 35[63000] via P2P/IPC comm 0x2b51e4000ab0 nRanks 96 f14r2n09:2439:4384 [2] NCCL INFO Channel 00 : 42[43000] -> 43[63000] via P2P/IPC comm 0x2b6790000ab0 nRanks 96 f14r2n07:7790:9167 [1] NCCL INFO Channel 00 : 33[26000] -> 34[43000] via P2P/IPC comm 0x2b0138000ab0 nRanks 96 f14r2n06:8124:9505 [2] NCCL INFO Channel 00 : 30[43000] -> 31[63000] via P2P/IPC comm 0x2b164c000ab0 nRanks 96 f14r2n10:500:2242 [1] NCCL INFO Channel 00 : 45[26000] -> 46[43000] via P2P/IPC comm 0x2b0d5c000ab0 nRanks 96 f14r2n10:498:2244 [2] NCCL INFO Channel 00 : 46[43000] -> 47[63000] via P2P/IPC comm 0x2add2c000ab0 nRanks 96 f14r2n15:32398:1588 [1] NCCL INFO Channel 00 : 65[26000] -> 66[43000] via P2P/IPC comm 0x2b23cc000ab0 nRanks 96 f14r2n11:16952:18673 [0] NCCL INFO Channel 00/0 : 47[63000] -> 48[4000] [receive] via NET/IB/0 comm 0x2b71fc000ab0 nRanks 96 f14r2n15:32395:1589 [2] NCCL INFO Channel 01 : 66[43000] -> 67[63000] via P2P/IPC comm 0x2b99d0000ab0 nRanks 96 f14r2n08:27952:29673 [1] NCCL INFO Channel 01 : 37[26000] -> 38[43000] via P2P/IPC comm 0x2b1ef4000ab0 nRanks 96 f14r2n06:8126:9504 [1] NCCL INFO Channel 01 : 29[26000] -> 30[43000] via P2P/IPC comm 0x2b486c000ab0 nRanks 96 f14r2n08:27954:29674 [2] NCCL INFO Channel 00 : 38[43000] -> 39[63000] via P2P/IPC comm 0x2ae614000ab0 nRanks 96 f14r2n06:8124:9505 [2] NCCL INFO Channel 01 : 30[43000] -> 31[63000] via P2P/IPC comm 0x2b164c000ab0 nRanks 96 f14r2n09:2437:4379 [1] NCCL INFO Channel 00 : 41[26000] -> 42[43000] via P2P/IPC comm 0x2b5a30000ab0 nRanks 96 f14r2n07:7789:9165 [2] NCCL INFO Channel 01 : 34[43000] -> 35[63000] via P2P/IPC comm 0x2b51e4000ab0 nRanks 96 f14r2n12:7614:8984 [0] NCCL INFO Channel 00/0 : 51[63000] -> 52[4000] [receive] via NET/IB/0 comm 0x2b0e24000ab0 nRanks 96 f14r2n07:7790:9167 [1] NCCL INFO Channel 01 : 33[26000] -> 34[43000] via P2P/IPC comm 0x2b0138000ab0 nRanks 96 f14r2n14:4185:6069 [2] NCCL INFO Channel 00 : 62[43000] -> 63[63000] via P2P/IPC comm 0x2b2ac0000ab0 nRanks 96 f14r2n11:16954:18675 [1] NCCL INFO Channel 00 : 49[26000] -> 50[43000] via P2P/IPC comm 0x2b73e4000ab0 nRanks 96 f14r2n10:500:2242 [1] NCCL INFO Channel 01 : 45[26000] -> 46[43000] via P2P/IPC comm 0x2b0d5c000ab0 nRanks 96 f14r2n15:32398:1588 [1] NCCL INFO Channel 01 : 65[26000] -> 66[43000] via P2P/IPC comm 0x2b23cc000ab0 nRanks 96 f14r2n14:4184:6067 [0] NCCL INFO Channel 00/0 : 59[63000] -> 60[4000] [receive] via NET/IB/0 comm 0x2b9b3c000ab0 nRanks 96 f14r2n11:16951:18676 [2] NCCL INFO Channel 00 : 50[43000] -> 51[63000] via P2P/IPC comm 0x2ab7c8000ab0 nRanks 96 f14r2n10:498:2244 [2] NCCL INFO Channel 01 : 46[43000] -> 47[63000] via P2P/IPC comm 0x2add2c000ab0 nRanks 96 f14r2n09:2439:4384 [2] NCCL INFO Channel 01 : 42[43000] -> 43[63000] via P2P/IPC comm 0x2b6790000ab0 nRanks 96 f14r2n12:7612:8983 [1] NCCL INFO Channel 00 : 53[26000] -> 54[43000] via P2P/IPC comm 0x2b0c4c000ab0 nRanks 96 f14r2n08:27954:29674 [2] NCCL INFO Channel 01 : 38[43000] -> 39[63000] via P2P/IPC comm 0x2ae614000ab0 nRanks 96 f14r2n14:4186:6070 [1] NCCL INFO Channel 00 : 61[26000] -> 62[43000] via P2P/IPC comm 0x2b88f4000ab0 nRanks 96 f14r2n11:16951:18676 [2] NCCL INFO Channel 01 : 50[43000] -> 51[63000] via P2P/IPC comm 0x2ab7c8000ab0 nRanks 96 f14r2n09:2437:4379 [1] NCCL INFO Channel 01 : 41[26000] -> 42[43000] via P2P/IPC comm 0x2b5a30000ab0 nRanks 96 f14r2n12:7613:8982 [2] NCCL INFO Channel 00 : 54[43000] -> 55[63000] via P2P/IPC comm 0x2b5b2c000ab0 nRanks 96 f14r2n13:20108:21749 [0] NCCL INFO Channel 00/0 : 55[63000] -> 56[4000] [receive] via NET/IB/0 comm 0x2b2664000ab0 nRanks 96 f14r2n14:4185:6069 [2] NCCL INFO Channel 01 : 62[43000] -> 63[63000] via P2P/IPC comm 0x2b2ac0000ab0 nRanks 96 f14r2n11:16954:18675 [1] NCCL INFO Channel 01 : 49[26000] -> 50[43000] via P2P/IPC comm 0x2b73e4000ab0 nRanks 96 f14r2n12:7612:8983 [1] NCCL INFO Channel 01 : 53[26000] -> 54[43000] via P2P/IPC comm 0x2b0c4c000ab0 nRanks 96 f14r2n13:20107:21747 [2] NCCL INFO Channel 00 : 58[43000] -> 59[63000] via P2P/IPC comm 0x2badc4000ab0 nRanks 96 f14r2n14:4186:6070 [1] NCCL INFO Channel 01 : 61[26000] -> 62[43000] via P2P/IPC comm 0x2b88f4000ab0 nRanks 96 f14r2n12:7613:8982 [2] NCCL INFO Channel 01 : 54[43000] -> 55[63000] via P2P/IPC comm 0x2b5b2c000ab0 nRanks 96 f14r2n13:20110:21752 [1] NCCL INFO Channel 00 : 57[26000] -> 58[43000] via P2P/IPC comm 0x2b6fc8000ab0 nRanks 96 f14r2n13:20107:21747 [2] NCCL INFO Channel 01 : 58[43000] -> 59[63000] via P2P/IPC comm 0x2badc4000ab0 nRanks 96 f14r2n13:20110:21752 [1] NCCL INFO Channel 01 : 57[26000] -> 58[43000] via P2P/IPC comm 0x2b6fc8000ab0 nRanks 96 f14r2n04:3628:5488 [0] NCCL INFO Channel 00/0 : 19[63000] -> 20[4000] [receive] via NET/IB/0 comm 0x2ac12c000ab0 nRanks 96 f14r2n04:3629:5484 [1] NCCL INFO Channel 00 : 21[26000] -> 22[43000] via P2P/IPC comm 0x2ae624000ab0 nRanks 96 f14r2n04:3630:5491 [2] NCCL INFO Channel 00 : 22[43000] -> 23[63000] via P2P/IPC comm 0x2b0cec000ab0 nRanks 96 f14r2n04:3629:5484 [1] NCCL INFO Channel 01 : 21[26000] -> 22[43000] via P2P/IPC comm 0x2ae624000ab0 nRanks 96 f14r2n04:3630:5491 [2] NCCL INFO Channel 01 : 22[43000] -> 23[63000] via P2P/IPC comm 0x2b0cec000ab0 nRanks 96 f14r2n19:10613:12007 [0] NCCL INFO Channel 01/0 : 79[63000] -> 80[4000] [receive] via NET/IB/0 comm 0x2b8fb4000ab0 nRanks 96 f14r2n19:10613:12007 [0] NCCL INFO Channel 00 : 80[4000] -> 81[26000] via P2P/IPC comm 0x2b8fb4000ab0 nRanks 96 f14r2n16:27452:28811 [3] NCCL INFO Channel 00/0 : 71[63000] -> 72[4000] [send] via NET/IB/0 comm 0x2b6498000ab0 nRanks 96 f14r3n01:7396:9069 [0] NCCL INFO Channel 01/0 : 87[63000] -> 88[4000] [receive] via NET/IB/0 comm 0x2b16ec000ab0 nRanks 96 f14r3n01:7396:9069 [0] NCCL INFO Channel 00 : 88[4000] -> 89[26000] via P2P/IPC comm 0x2b16ec000ab0 nRanks 96 f14r2n16:27453:28814 [0] NCCL INFO Channel 01/0 : 67[63000] -> 68[4000] [receive] via NET/IB/0 comm 0x2ba180000ab0 nRanks 96 f14r2n16:27453:28814 [0] NCCL INFO Channel 00 : 68[4000] -> 69[26000] via P2P/IPC comm 0x2ba180000ab0 nRanks 96 f14r2n18:11305:13053 [3] NCCL INFO Channel 00/0 : 79[63000] -> 80[4000] [send] via NET/IB/0 comm 0x2b82a8000ab0 nRanks 96 f14r2n18:11304:13055 [0] NCCL INFO Channel 01/0 : 75[63000] -> 76[4000] [receive] via NET/IB/0 comm 0x2ab840000ab0 nRanks 96 f14r2n18:11304:13055 [0] NCCL INFO Channel 00 : 76[4000] -> 77[26000] via P2P/IPC comm 0x2ab840000ab0 nRanks 96 f14r3n00:20871:22238 [3] NCCL INFO Channel 00/0 : 87[63000] -> 88[4000] [send] via NET/IB/0 comm 0x2b450c000ab0 nRanks 96 f14r3n00:20870:22237 [0] NCCL INFO Channel 01/0 : 83[63000] -> 84[4000] [receive] via NET/IB/0 comm 0x2b4cdc000ab0 nRanks 96 f14r3n02:32370:1495 [0] NCCL INFO Channel 01/0 : 91[63000] -> 92[4000] [receive] via NET/IB/0 comm 0x2b0fcc000ab0 nRanks 96 f14r3n02:32370:1495 [0] NCCL INFO Channel 00 : 92[4000] -> 93[26000] via P2P/IPC comm 0x2b0fcc000ab0 nRanks 96 f14r3n00:20870:22237 [0] NCCL INFO Channel 00 : 84[4000] -> 85[26000] via P2P/IPC comm 0x2b4cdc000ab0 nRanks 96 f14r2n19:10613:12007 [0] NCCL INFO Channel 01 : 80[4000] -> 81[26000] via P2P/IPC comm 0x2b8fb4000ab0 nRanks 96 f14r3n01:7396:9069 [0] NCCL INFO Channel 01 : 88[4000] -> 89[26000] via P2P/IPC comm 0x2b16ec000ab0 nRanks 96 f14r2n16:27453:28814 [0] NCCL INFO Channel 01 : 68[4000] -> 69[26000] via P2P/IPC comm 0x2ba180000ab0 nRanks 96 f14r2n18:11304:13055 [0] NCCL INFO Channel 01 : 76[4000] -> 77[26000] via P2P/IPC comm 0x2ab840000ab0 nRanks 96 f14r2n17:14570:16419 [3] NCCL INFO Channel 00/0 : 75[63000] -> 76[4000] [send] via NET/IB/0 comm 0x2bacc8000ab0 nRanks 96 f14r3n02:32370:1495 [0] NCCL INFO Channel 01 : 92[4000] -> 93[26000] via P2P/IPC comm 0x2b0fcc000ab0 nRanks 96 f14r3n00:20870:22237 [0] NCCL INFO Channel 01 : 84[4000] -> 85[26000] via P2P/IPC comm 0x2b4cdc000ab0 nRanks 96 f14r2n17:14568:16418 [0] NCCL INFO Channel 01/0 : 71[63000] -> 72[4000] [receive] via NET/IB/0 comm 0x2acb44000ab0 nRanks 96 f14r2n17:14568:16418 [0] NCCL INFO Channel 00 : 72[4000] -> 73[26000] via P2P/IPC comm 0x2acb44000ab0 nRanks 96 f14r2n19:10612:12008 [3] NCCL INFO Channel 00/0 : 83[63000] -> 84[4000] [send] via NET/IB/0 comm 0x2b30d8000ab0 nRanks 96 f14r2n00:27305:28694 [3] NCCL INFO Channel 00/0 : 7[63000] -> 8[4000] [send] via NET/IB/0 comm 0x2b0858000ab0 nRanks 96 f14r2n00:27304:28693 [0] NCCL INFO Channel 01/0 : 3[63000] -> 4[4000] [receive] via NET/IB/0 comm 0x2ba3ec000ab0 nRanks 96 f14r2n00:27304:28693 [0] NCCL INFO Channel 00 : 4[4000] -> 5[26000] via P2P/IPC comm 0x2ba3ec000ab0 nRanks 96 f14r3n01:7394:9068 [3] NCCL INFO Channel 00/0 : 91[63000] -> 92[4000] [send] via NET/IB/0 comm 0x2aee1c000ab0 nRanks 96 f14r2n17:14568:16418 [0] NCCL INFO Channel 01 : 72[4000] -> 73[26000] via P2P/IPC comm 0x2acb44000ab0 nRanks 96 f14r3n02:32368:1492 [3] NCCL INFO Channel 00/0 : 95[63000] -> 0[4000] [send] via NET/IB/0 comm 0x2ac104000ab0 nRanks 96 f14r1n19:18666:20640 [3] NCCL INFO Channel 00/0 : 3[63000] -> 4[4000] [send] via NET/IB/0 comm 0x2b3468000ab0 nRanks 96 f14r2n01:16211:17860 [0] NCCL INFO Channel 01/0 : 7[63000] -> 8[4000] [receive] via NET/IB/0 comm 0x2afec8000ab0 nRanks 96 f14r1n19:18664:20445 [0] NCCL INFO Channel 01/0 : 95[63000] -> 0[4000] [receive] via NET/IB/0 comm 0x2b093c000ab0 nRanks 96 f14r1n19:18664:20445 [0] NCCL INFO Channel 00 : 0[4000] -> 1[26000] via P2P/IPC comm 0x2b093c000ab0 nRanks 96 f14r2n00:27304:28693 [0] NCCL INFO Channel 01 : 4[4000] -> 5[26000] via P2P/IPC comm 0x2ba3ec000ab0 nRanks 96 f14r2n01:16211:17860 [0] NCCL INFO Channel 00 : 8[4000] -> 9[26000] via P2P/IPC comm 0x2afec8000ab0 nRanks 96 f14r2n03:27607:29258 [3] NCCL INFO Channel 00/0 : 19[63000] -> 20[4000] [send] via NET/IB/0 comm 0x2ac3f0000ab0 nRanks 96 f14r2n03:27606:29257 [0] NCCL INFO Channel 01/0 : 15[63000] -> 16[4000] [receive] via NET/IB/0 comm 0x2ae958000ab0 nRanks 96 f14r2n03:27606:29257 [0] NCCL INFO Channel 00 : 16[4000] -> 17[26000] via P2P/IPC comm 0x2ae958000ab0 nRanks 96 f14r2n02:18589:20291 [3] NCCL INFO Channel 00/0 : 15[63000] -> 16[4000] [send] via NET/IB/0 comm 0x2b65e0000ab0 nRanks 96 f14r2n02:18587:20293 [0] NCCL INFO Channel 01/0 : 11[63000] -> 12[4000] [receive] via NET/IB/0 comm 0x2b5228000ab0 nRanks 96 f14r2n02:18587:20293 [0] NCCL INFO Channel 00 : 12[4000] -> 13[26000] via P2P/IPC comm 0x2b5228000ab0 nRanks 96 f14r2n01:16211:17860 [0] NCCL INFO Channel 01 : 8[4000] -> 9[26000] via P2P/IPC comm 0x2afec8000ab0 nRanks 96 f14r1n19:18664:20445 [0] NCCL INFO Channel 01 : 0[4000] -> 1[26000] via P2P/IPC comm 0x2b093c000ab0 nRanks 96 f14r2n03:27606:29257 [0] NCCL INFO Channel 01 : 16[4000] -> 17[26000] via P2P/IPC comm 0x2ae958000ab0 nRanks 96 f14r2n02:18587:20293 [0] NCCL INFO Channel 01 : 12[4000] -> 13[26000] via P2P/IPC comm 0x2b5228000ab0 nRanks 96 f14r2n05:26240:27871 [3] NCCL INFO Channel 00/0 : 27[63000] -> 28[4000] [send] via NET/IB/0 comm 0x2b4558000ab0 nRanks 96 f14r2n05:26238:27869 [0] NCCL INFO Channel 01/0 : 23[63000] -> 24[4000] [receive] via NET/IB/0 comm 0x2b5734000ab0 nRanks 96 f14r2n05:26238:27869 [0] NCCL INFO Channel 00 : 24[4000] -> 25[26000] via P2P/IPC comm 0x2b5734000ab0 nRanks 96 f14r2n01:16210:17861 [3] NCCL INFO Channel 00/0 : 11[63000] -> 12[4000] [send] via NET/IB/0 comm 0x2b37a8000ab0 nRanks 96 f14r2n08:27953:29675 [0] NCCL INFO Channel 01/0 : 35[63000] -> 36[4000] [receive] via NET/IB/0 comm 0x2b64a8000ab0 nRanks 96 f14r2n07:7791:9166 [0] NCCL INFO Channel 01/0 : 31[63000] -> 32[4000] [receive] via NET/IB/0 comm 0x2bab08000ab0 nRanks 96 f14r2n08:27953:29675 [0] NCCL INFO Channel 00 : 36[4000] -> 37[26000] via P2P/IPC comm 0x2b64a8000ab0 nRanks 96 f14r2n07:7791:9166 [0] NCCL INFO Channel 00 : 32[4000] -> 33[26000] via P2P/IPC comm 0x2bab08000ab0 nRanks 96 f14r2n06:8125:9503 [0] NCCL INFO Channel 01/0 : 27[63000] -> 28[4000] [receive] via NET/IB/0 comm 0x2b7ed8000ab0 nRanks 96 f14r2n06:8125:9503 [0] NCCL INFO Channel 00 : 28[4000] -> 29[26000] via P2P/IPC comm 0x2b7ed8000ab0 nRanks 96 f14r2n10:502:2243 [3] NCCL INFO Channel 00/0 : 47[63000] -> 48[4000] [send] via NET/IB/0 comm 0x2af01c000ab0 nRanks 96 f14r2n05:26238:27869 [0] NCCL INFO Channel 01 : 24[4000] -> 25[26000] via P2P/IPC comm 0x2b5734000ab0 nRanks 96 f14r2n10:499:2241 [0] NCCL INFO Channel 01/0 : 43[63000] -> 44[4000] [receive] via NET/IB/0 comm 0x2b769c000ab0 nRanks 96 f14r2n09:2440:4376 [3] NCCL INFO Channel 00/0 : 43[63000] -> 44[4000] [send] via NET/IB/0 comm 0x2b9c58000ab0 nRanks 96 f14r2n10:499:2241 [0] NCCL INFO Channel 00 : 44[4000] -> 45[26000] via P2P/IPC comm 0x2b769c000ab0 nRanks 96 f14r2n08:27953:29675 [0] NCCL INFO Channel 01 : 36[4000] -> 37[26000] via P2P/IPC comm 0x2b64a8000ab0 nRanks 96 f14r2n15:32397:1586 [3] NCCL INFO Channel 00/0 : 67[63000] -> 68[4000] [send] via NET/IB/0 comm 0x2b0aa0000ab0 nRanks 96 f14r2n09:2438:4383 [0] NCCL INFO Channel 01/0 : 39[63000] -> 40[4000] [receive] via NET/IB/0 comm 0x2ac780000ab0 nRanks 96 f14r2n07:7791:9166 [0] NCCL INFO Channel 01 : 32[4000] -> 33[26000] via P2P/IPC comm 0x2bab08000ab0 nRanks 96 f14r2n15:32396:1585 [0] NCCL INFO Channel 01/0 : 63[63000] -> 64[4000] [receive] via NET/IB/0 comm 0x2afd04000ab0 nRanks 96 f14r2n09:2438:4383 [0] NCCL INFO Channel 00 : 40[4000] -> 41[26000] via P2P/IPC comm 0x2ac780000ab0 nRanks 96 f14r2n06:8125:9503 [0] NCCL INFO Channel 01 : 28[4000] -> 29[26000] via P2P/IPC comm 0x2b7ed8000ab0 nRanks 96 f14r2n15:32396:1585 [0] NCCL INFO Channel 00 : 64[4000] -> 65[26000] via P2P/IPC comm 0x2afd04000ab0 nRanks 96 f14r2n14:4183:6068 [3] NCCL INFO Channel 00/0 : 63[63000] -> 64[4000] [send] via NET/IB/0 comm 0x2b2e20000ab0 nRanks 96 f14r2n14:4184:6067 [0] NCCL INFO Channel 01/0 : 59[63000] -> 60[4000] [receive] via NET/IB/0 comm 0x2b9b3c000ab0 nRanks 96 f14r2n16:27455:28812 [1] NCCL INFO Connected all rings comm 0x2b79a4000ab0 nRanks 96 busId 26000 f14r2n14:4184:6067 [0] NCCL INFO Channel 00 : 60[4000] -> 61[26000] via P2P/IPC comm 0x2b9b3c000ab0 nRanks 96 f14r2n13:20109:21750 [3] NCCL INFO Channel 00/0 : 59[63000] -> 60[4000] [send] via NET/IB/0 comm 0x2b5f6c000ab0 nRanks 96 f14r2n13:20108:21749 [0] NCCL INFO Channel 01/0 : 55[63000] -> 56[4000] [receive] via NET/IB/0 comm 0x2b2664000ab0 nRanks 96 f14r2n15:32396:1585 [0] NCCL INFO Channel 01 : 64[4000] -> 65[26000] via P2P/IPC comm 0x2afd04000ab0 nRanks 96 f14r2n09:2438:4383 [0] NCCL INFO Channel 01 : 40[4000] -> 41[26000] via P2P/IPC comm 0x2ac780000ab0 nRanks 96 f14r2n13:20108:21749 [0] NCCL INFO Channel 00 : 56[4000] -> 57[26000] via P2P/IPC comm 0x2b2664000ab0 nRanks 96 f14r2n07:7788:9164 [3] NCCL INFO Channel 00/0 : 35[63000] -> 36[4000] [send] via NET/IB/0 comm 0x2afc5c000ab0 nRanks 96 f14r2n08:27955:29670 [3] NCCL INFO Channel 00/0 : 39[63000] -> 40[4000] [send] via NET/IB/0 comm 0x2b2994000ab0 nRanks 96 f14r2n10:499:2241 [0] NCCL INFO Channel 01 : 44[4000] -> 45[26000] via P2P/IPC comm 0x2b769c000ab0 nRanks 96 f14r3n02:32369:1493 [1] NCCL INFO Connected all rings comm 0x2ac184000ab0 nRanks 96 busId 26000 f14r2n06:8123:9506 [3] NCCL INFO Channel 00/0 : 31[63000] -> 32[4000] [send] via NET/IB/0 comm 0x2af544000ab0 nRanks 96 f14r2n11:16953:18671 [3] NCCL INFO Channel 00/0 : 51[63000] -> 52[4000] [send] via NET/IB/0 comm 0x2b9a48000ab0 nRanks 96 f14r2n11:16952:18673 [0] NCCL INFO Channel 01/0 : 47[63000] -> 48[4000] [receive] via NET/IB/0 comm 0x2b71fc000ab0 nRanks 96 f14r2n19:10614:12006 [1] NCCL INFO Connected all rings comm 0x2b3b88000ab0 nRanks 96 busId 26000 f14r2n16:27455:28812 [1] NCCL INFO Channel 01/0 : 69[26000] -> 72[4000] [send] via NET/IB/0 comm 0x2b79a4000ab0 nRanks 96 f14r2n14:4184:6067 [0] NCCL INFO Channel 01 : 60[4000] -> 61[26000] via P2P/IPC comm 0x2b9b3c000ab0 nRanks 96 f14r2n11:16952:18673 [0] NCCL INFO Channel 00 : 48[4000] -> 49[26000] via P2P/IPC comm 0x2b71fc000ab0 nRanks 96 f14r3n01:7395:9073 [1] NCCL INFO Connected all rings comm 0x2b5940000ab0 nRanks 96 busId 26000 f14r2n12:7615:8980 [3] NCCL INFO Channel 00/0 : 55[63000] -> 56[4000] [send] via NET/IB/0 comm 0x2ada64000ab0 nRanks 96 f14r2n12:7614:8984 [0] NCCL INFO Channel 01/0 : 51[63000] -> 52[4000] [receive] via NET/IB/0 comm 0x2b0e24000ab0 nRanks 96 f14r2n13:20108:21749 [0] NCCL INFO Channel 01 : 56[4000] -> 57[26000] via P2P/IPC comm 0x2b2664000ab0 nRanks 96 f14r2n12:7614:8984 [0] NCCL INFO Channel 00 : 52[4000] -> 53[26000] via P2P/IPC comm 0x2b0e24000ab0 nRanks 96 f14r2n18:11306:13056 [1] NCCL INFO Connected all rings comm 0x2b1224000ab0 nRanks 96 busId 26000 f14r2n11:16952:18673 [0] NCCL INFO Channel 01 : 48[4000] -> 49[26000] via P2P/IPC comm 0x2b71fc000ab0 nRanks 96 f14r3n00:20873:22235 [1] NCCL INFO Connected all rings comm 0x2afed4000ab0 nRanks 96 busId 26000 f14r2n04:3628:5488 [0] NCCL INFO Channel 01/0 : 19[63000] -> 20[4000] [receive] via NET/IB/0 comm 0x2ac12c000ab0 nRanks 96 f14r2n19:10614:12006 [1] NCCL INFO Channel 00/0 : 72[4000] -> 81[26000] [receive] via NET/IB/0 comm 0x2b3b88000ab0 nRanks 96 f14r3n02:32369:1493 [1] NCCL INFO Channel 00 : 93[26000] -> 92[4000] via P2P/IPC comm 0x2ac184000ab0 nRanks 96 f14r2n04:3628:5488 [0] NCCL INFO Channel 00 : 20[4000] -> 21[26000] via P2P/IPC comm 0x2ac12c000ab0 nRanks 96 f14r2n12:7614:8984 [0] NCCL INFO Channel 01 : 52[4000] -> 53[26000] via P2P/IPC comm 0x2b0e24000ab0 nRanks 96 f14r3n01:7395:9073 [1] NCCL INFO Channel 00/0 : 84[4000] -> 89[26000] [receive] via NET/IB/0 comm 0x2b5940000ab0 nRanks 96 f14r2n17:14567:16420 [1] NCCL INFO Connected all rings comm 0x2b0cc8000ab0 nRanks 96 busId 26000 f14r2n18:11306:13056 [1] NCCL INFO Channel 01/0 : 77[26000] -> 84[4000] [send] via NET/IB/0 comm 0x2b1224000ab0 nRanks 96 f14r3n00:20873:22235 [1] NCCL INFO Channel 01/0 : 85[26000] -> 88[4000] [send] via NET/IB/0 comm 0x2afed4000ab0 nRanks 96 f14r3n02:32369:1493 [1] NCCL INFO Channel 01 : 93[26000] -> 92[4000] via P2P/IPC comm 0x2ac184000ab0 nRanks 96 f14r2n00:27303:28695 [1] NCCL INFO Connected all rings comm 0x2b52d4000ab0 nRanks 96 busId 26000 f14r2n04:3628:5488 [0] NCCL INFO Channel 01 : 20[4000] -> 21[26000] via P2P/IPC comm 0x2ac12c000ab0 nRanks 96 f14r2n17:14567:16420 [1] NCCL INFO Channel 00/0 : 68[4000] -> 73[26000] [receive] via NET/IB/0 comm 0x2b0cc8000ab0 nRanks 96 f14r2n00:27303:28695 [1] NCCL INFO Channel 01/0 : 5[26000] -> 8[4000] [send] via NET/IB/0 comm 0x2b52d4000ab0 nRanks 96 f14r1n19:18663:20642 [1] NCCL INFO Connected all rings comm 0x2b6d1c000ab0 nRanks 96 busId 26000 f14r2n04:3627:5487 [3] NCCL INFO Channel 00/0 : 23[63000] -> 24[4000] [send] via NET/IB/0 comm 0x2afa70000ab0 nRanks 96 f14r2n01:16208:17863 [1] NCCL INFO Connected all rings comm 0x2b557c000ab0 nRanks 96 busId 26000 f14r2n03:27605:29259 [1] NCCL INFO Connected all rings comm 0x2bad5c000ab0 nRanks 96 busId 26000 f14r2n02:18588:20295 [1] NCCL INFO Connected all rings comm 0x2b488c000ab0 nRanks 96 busId 26000 f14r1n19:18663:20642 [1] NCCL INFO Channel 00 : 1[26000] -> 0[4000] via P2P/IPC comm 0x2b6d1c000ab0 nRanks 96 f14r2n02:18588:20295 [1] NCCL INFO Channel 01/0 : 13[26000] -> 20[4000] [send] via NET/IB/0 comm 0x2b488c000ab0 nRanks 96 f14r2n01:16208:17863 [1] NCCL INFO Channel 00/0 : 4[4000] -> 9[26000] [receive] via NET/IB/0 comm 0x2b557c000ab0 nRanks 96 f14r2n05:26239:27868 [1] NCCL INFO Connected all rings comm 0x2b481c000ab0 nRanks 96 busId 26000 f14r2n03:27605:29259 [1] NCCL INFO Channel 00/0 : 8[4000] -> 17[26000] [receive] via NET/IB/0 comm 0x2bad5c000ab0 nRanks 96 f14r2n09:2437:4379 [1] NCCL INFO Connected all rings comm 0x2b5a30000ab0 nRanks 96 busId 26000 f14r1n19:18663:20642 [1] NCCL INFO Channel 01 : 1[26000] -> 0[4000] via P2P/IPC comm 0x2b6d1c000ab0 nRanks 96 f14r2n07:7790:9167 [1] NCCL INFO Connected all rings comm 0x2b0138000ab0 nRanks 96 busId 26000 f14r2n06:8126:9504 [1] NCCL INFO Connected all rings comm 0x2b486c000ab0 nRanks 96 busId 26000 f14r2n08:27952:29673 [1] NCCL INFO Connected all rings comm 0x2b1ef4000ab0 nRanks 96 busId 26000 f14r2n05:26239:27868 [1] NCCL INFO Channel 00/0 : 20[4000] -> 25[26000] [receive] via NET/IB/0 comm 0x2b481c000ab0 nRanks 96 f14r2n15:32398:1588 [1] NCCL INFO Connected all rings comm 0x2b23cc000ab0 nRanks 96 busId 26000 f14r2n10:500:2242 [1] NCCL INFO Connected all rings comm 0x2b0d5c000ab0 nRanks 96 busId 26000 f14r2n06:8126:9504 [1] NCCL INFO Channel 01/0 : 29[26000] -> 60[4000] [send] via NET/IB/0 comm 0x2b486c000ab0 nRanks 96 f14r2n09:2437:4379 [1] NCCL INFO Channel 00/0 : 36[4000] -> 41[26000] [receive] via NET/IB/0 comm 0x2b5a30000ab0 nRanks 96 f14r2n07:7790:9167 [1] NCCL INFO Channel 00/0 : 16[4000] -> 33[26000] [receive] via NET/IB/0 comm 0x2b0138000ab0 nRanks 96 f14r2n08:27952:29673 [1] NCCL INFO Channel 01/0 : 37[26000] -> 40[4000] [send] via NET/IB/0 comm 0x2b1ef4000ab0 nRanks 96 f14r2n14:4186:6070 [1] NCCL INFO Connected all rings comm 0x2b88f4000ab0 nRanks 96 busId 26000 f14r2n13:20110:21752 [1] NCCL INFO Connected all rings comm 0x2b6fc8000ab0 nRanks 96 busId 26000 f14r2n11:16954:18675 [1] NCCL INFO Connected all rings comm 0x2b73e4000ab0 nRanks 96 busId 26000 f14r2n10:500:2242 [1] NCCL INFO Channel 01/0 : 45[26000] -> 52[4000] [send] via NET/IB/0 comm 0x2b0d5c000ab0 nRanks 96 f14r2n15:32398:1588 [1] NCCL INFO Channel 00/0 : 32[4000] -> 65[26000] [receive] via NET/IB/0 comm 0x2b23cc000ab0 nRanks 96 f14r2n12:7612:8983 [1] NCCL INFO Connected all rings comm 0x2b0c4c000ab0 nRanks 96 busId 26000 f14r2n14:4186:6070 [1] NCCL INFO Channel 01/0 : 61[26000] -> 76[4000] [send] via NET/IB/0 comm 0x2b88f4000ab0 nRanks 96 f14r2n13:20110:21752 [1] NCCL INFO Channel 00/0 : 52[4000] -> 57[26000] [receive] via NET/IB/0 comm 0x2b6fc8000ab0 nRanks 96 f14r2n11:16954:18675 [1] NCCL INFO Channel 00/0 : 40[4000] -> 49[26000] [receive] via NET/IB/0 comm 0x2b73e4000ab0 nRanks 96 f14r2n04:3629:5484 [1] NCCL INFO Connected all rings comm 0x2ae624000ab0 nRanks 96 busId 26000 f14r2n12:7612:8983 [1] NCCL INFO Channel 01/0 : 53[26000] -> 56[4000] [send] via NET/IB/0 comm 0x2b0c4c000ab0 nRanks 96 f14r2n04:3629:5484 [1] NCCL INFO Channel 01/0 : 21[26000] -> 24[4000] [send] via NET/IB/0 comm 0x2ae624000ab0 nRanks 96 f14r2n16:27452:28811 [3] NCCL INFO Channel 01/0 : 71[63000] -> 72[4000] [send] via NET/IB/0 comm 0x2b6498000ab0 nRanks 96 f14r2n18:11305:13053 [3] NCCL INFO Channel 01/0 : 79[63000] -> 80[4000] [send] via NET/IB/0 comm 0x2b82a8000ab0 nRanks 96 f14r3n00:20871:22238 [3] NCCL INFO Channel 01/0 : 87[63000] -> 88[4000] [send] via NET/IB/0 comm 0x2b450c000ab0 nRanks 96 f14r2n17:14570:16419 [3] NCCL INFO Channel 01/0 : 75[63000] -> 76[4000] [send] via NET/IB/0 comm 0x2bacc8000ab0 nRanks 96 f14r2n19:10612:12008 [3] NCCL INFO Channel 01/0 : 83[63000] -> 84[4000] [send] via NET/IB/0 comm 0x2b30d8000ab0 nRanks 96 f14r2n00:27305:28694 [3] NCCL INFO Channel 01/0 : 7[63000] -> 8[4000] [send] via NET/IB/0 comm 0x2b0858000ab0 nRanks 96 f14r3n01:7394:9068 [3] NCCL INFO Channel 01/0 : 91[63000] -> 92[4000] [send] via NET/IB/0 comm 0x2aee1c000ab0 nRanks 96 f14r3n02:32368:1492 [3] NCCL INFO Channel 01/0 : 95[63000] -> 0[4000] [send] via NET/IB/0 comm 0x2ac104000ab0 nRanks 96 f14r1n19:18666:20640 [3] NCCL INFO Channel 01/0 : 3[63000] -> 4[4000] [send] via NET/IB/0 comm 0x2b3468000ab0 nRanks 96 f14r2n03:27607:29258 [3] NCCL INFO Channel 01/0 : 19[63000] -> 20[4000] [send] via NET/IB/0 comm 0x2ac3f0000ab0 nRanks 96 f14r2n02:18589:20291 [3] NCCL INFO Channel 01/0 : 15[63000] -> 16[4000] [send] via NET/IB/0 comm 0x2b65e0000ab0 nRanks 96 f14r2n05:26240:27871 [3] NCCL INFO Channel 01/0 : 27[63000] -> 28[4000] [send] via NET/IB/0 comm 0x2b4558000ab0 nRanks 96 f14r2n01:16210:17861 [3] NCCL INFO Channel 01/0 : 11[63000] -> 12[4000] [send] via NET/IB/0 comm 0x2b37a8000ab0 nRanks 96 f14r2n16:27454:28816 [2] NCCL INFO Connected all rings comm 0x2b35e4000ab0 nRanks 96 busId 43000 f14r2n10:502:2243 [3] NCCL INFO Channel 01/0 : 47[63000] -> 48[4000] [send] via NET/IB/0 comm 0x2af01c000ab0 nRanks 96 f14r2n09:2440:4376 [3] NCCL INFO Channel 01/0 : 43[63000] -> 44[4000] [send] via NET/IB/0 comm 0x2b9c58000ab0 nRanks 96 f14r2n18:11303:13058 [2] NCCL INFO Connected all rings comm 0x2b699c000ab0 nRanks 96 busId 43000 f14r2n15:32397:1586 [3] NCCL INFO Channel 01/0 : 67[63000] -> 68[4000] [send] via NET/IB/0 comm 0x2b0aa0000ab0 nRanks 96 f14r3n00:20872:22240 [2] NCCL INFO Connected all rings comm 0x2b3570000ab0 nRanks 96 busId 43000 f14r2n14:4183:6068 [3] NCCL INFO Channel 01/0 : 63[63000] -> 64[4000] [send] via NET/IB/0 comm 0x2b2e20000ab0 nRanks 96 f14r2n00:27302:28696 [2] NCCL INFO Connected all rings comm 0x2ba338000ab0 nRanks 96 busId 43000 f14r2n13:20109:21750 [3] NCCL INFO Channel 01/0 : 59[63000] -> 60[4000] [send] via NET/IB/0 comm 0x2b5f6c000ab0 nRanks 96 f14r2n16:27454:28816 [2] NCCL INFO Channel 00 : 70[43000] -> 69[26000] via P2P/IPC comm 0x2b35e4000ab0 nRanks 96 f14r2n17:14569:16422 [2] NCCL INFO Connected all rings comm 0x2b92f8000ab0 nRanks 96 busId 43000 f14r2n19:10615:12010 [2] NCCL INFO Connected all rings comm 0x2b1730000ab0 nRanks 96 busId 43000 f14r2n07:7788:9164 [3] NCCL INFO Channel 01/0 : 35[63000] -> 36[4000] [send] via NET/IB/0 comm 0x2afc5c000ab0 nRanks 96 f14r2n11:16953:18671 [3] NCCL INFO Channel 01/0 : 51[63000] -> 52[4000] [send] via NET/IB/0 comm 0x2b9a48000ab0 nRanks 96 f14r2n18:11303:13058 [2] NCCL INFO Channel 00 : 78[43000] -> 77[26000] via P2P/IPC comm 0x2b699c000ab0 nRanks 96 f14r2n06:8123:9506 [3] NCCL INFO Channel 01/0 : 31[63000] -> 32[4000] [send] via NET/IB/0 comm 0x2af544000ab0 nRanks 96 f14r2n08:27955:29670 [3] NCCL INFO Channel 01/0 : 39[63000] -> 40[4000] [send] via NET/IB/0 comm 0x2b2994000ab0 nRanks 96 f14r3n01:7397:9074 [2] NCCL INFO Connected all rings comm 0x2ac180000ab0 nRanks 96 busId 43000 f14r2n16:27454:28816 [2] NCCL INFO Channel 01 : 70[43000] -> 69[26000] via P2P/IPC comm 0x2b35e4000ab0 nRanks 96 f14r2n12:7615:8980 [3] NCCL INFO Channel 01/0 : 55[63000] -> 56[4000] [send] via NET/IB/0 comm 0x2ada64000ab0 nRanks 96 f14r3n00:20872:22240 [2] NCCL INFO Channel 00 : 86[43000] -> 85[26000] via P2P/IPC comm 0x2b3570000ab0 nRanks 96 f14r2n18:11303:13058 [2] NCCL INFO Channel 01 : 78[43000] -> 77[26000] via P2P/IPC comm 0x2b699c000ab0 nRanks 96 f14r2n00:27302:28696 [2] NCCL INFO Channel 00 : 6[43000] -> 5[26000] via P2P/IPC comm 0x2ba338000ab0 nRanks 96 f14r3n02:32367:1497 [2] NCCL INFO Connected all rings comm 0x2ac760000ab0 nRanks 96 busId 43000 f14r2n02:18586:20296 [2] NCCL INFO Connected all rings comm 0x2b47a8000ab0 nRanks 96 busId 43000 f14r3n00:20872:22240 [2] NCCL INFO Channel 01 : 86[43000] -> 85[26000] via P2P/IPC comm 0x2b3570000ab0 nRanks 96 f14r2n17:14569:16422 [2] NCCL INFO Channel 00 : 74[43000] -> 73[26000] via P2P/IPC comm 0x2b92f8000ab0 nRanks 96 f14r2n19:10615:12010 [2] NCCL INFO Channel 00 : 82[43000] -> 81[26000] via P2P/IPC comm 0x2b1730000ab0 nRanks 96 f14r2n00:27302:28696 [2] NCCL INFO Channel 01 : 6[43000] -> 5[26000] via P2P/IPC comm 0x2ba338000ab0 nRanks 96 f14r3n01:7397:9074 [2] NCCL INFO Channel 00 : 90[43000] -> 89[26000] via P2P/IPC comm 0x2ac180000ab0 nRanks 96 f14r1n19:18665:20644 [2] NCCL INFO Connected all rings comm 0x2aeb10000ab0 nRanks 96 busId 43000 f14r2n03:27608:29263 [2] NCCL INFO Connected all rings comm 0x2ac780000ab0 nRanks 96 busId 43000 f14r2n17:14569:16422 [2] NCCL INFO Channel 01 : 74[43000] -> 73[26000] via P2P/IPC comm 0x2b92f8000ab0 nRanks 96 f14r2n19:10615:12010 [2] NCCL INFO Channel 01 : 82[43000] -> 81[26000] via P2P/IPC comm 0x2b1730000ab0 nRanks 96 f14r3n01:7397:9074 [2] NCCL INFO Channel 01 : 90[43000] -> 89[26000] via P2P/IPC comm 0x2ac180000ab0 nRanks 96 f14r2n02:18586:20296 [2] NCCL INFO Channel 00 : 14[43000] -> 13[26000] via P2P/IPC comm 0x2b47a8000ab0 nRanks 96 f14r3n02:32367:1497 [2] NCCL INFO Channel 00 : 94[43000] -> 93[26000] via P2P/IPC comm 0x2ac760000ab0 nRanks 96 f14r2n01:16209:17862 [2] NCCL INFO Connected all rings comm 0x2b4998000ab0 nRanks 96 busId 43000 f14r2n05:26237:27873 [2] NCCL INFO Connected all rings comm 0x2b3388000ab0 nRanks 96 busId 43000 f14r2n03:27608:29263 [2] NCCL INFO Channel 00 : 18[43000] -> 17[26000] via P2P/IPC comm 0x2ac780000ab0 nRanks 96 f14r1n19:18665:20644 [2] NCCL INFO Channel 00 : 2[43000] -> 1[26000] via P2P/IPC comm 0x2aeb10000ab0 nRanks 96 f14r3n02:32367:1497 [2] NCCL INFO Channel 01 : 94[43000] -> 93[26000] via P2P/IPC comm 0x2ac760000ab0 nRanks 96 f14r2n02:18586:20296 [2] NCCL INFO Channel 01 : 14[43000] -> 13[26000] via P2P/IPC comm 0x2b47a8000ab0 nRanks 96 f14r2n04:3627:5487 [3] NCCL INFO Channel 01/0 : 23[63000] -> 24[4000] [send] via NET/IB/0 comm 0x2afa70000ab0 nRanks 96 f14r2n03:27608:29263 [2] NCCL INFO Channel 01 : 18[43000] -> 17[26000] via P2P/IPC comm 0x2ac780000ab0 nRanks 96 f14r1n19:18665:20644 [2] NCCL INFO Channel 01 : 2[43000] -> 1[26000] via P2P/IPC comm 0x2aeb10000ab0 nRanks 96 f14r2n15:32395:1589 [2] NCCL INFO Connected all rings comm 0x2b99d0000ab0 nRanks 96 busId 43000 f14r2n13:20107:21747 [2] NCCL INFO Connected all rings comm 0x2badc4000ab0 nRanks 96 busId 43000 f14r2n10:498:2244 [2] NCCL INFO Connected all rings comm 0x2add2c000ab0 nRanks 96 busId 43000 f14r2n05:26237:27873 [2] NCCL INFO Channel 00 : 26[43000] -> 25[26000] via P2P/IPC comm 0x2b3388000ab0 nRanks 96 f14r2n09:2439:4384 [2] NCCL INFO Connected all rings comm 0x2b6790000ab0 nRanks 96 busId 43000 f14r2n01:16209:17862 [2] NCCL INFO Channel 00 : 10[43000] -> 9[26000] via P2P/IPC comm 0x2b4998000ab0 nRanks 96 f14r2n14:4185:6069 [2] NCCL INFO Connected all rings comm 0x2b2ac0000ab0 nRanks 96 busId 43000 f14r2n06:8124:9505 [2] NCCL INFO Connected all rings comm 0x2b164c000ab0 nRanks 96 busId 43000 f14r2n05:26237:27873 [2] NCCL INFO Channel 01 : 26[43000] -> 25[26000] via P2P/IPC comm 0x2b3388000ab0 nRanks 96 f14r2n01:16209:17862 [2] NCCL INFO Channel 01 : 10[43000] -> 9[26000] via P2P/IPC comm 0x2b4998000ab0 nRanks 96 f14r2n11:16951:18676 [2] NCCL INFO Connected all rings comm 0x2ab7c8000ab0 nRanks 96 busId 43000 f14r2n13:20107:21747 [2] NCCL INFO Channel 00 : 58[43000] -> 57[26000] via P2P/IPC comm 0x2badc4000ab0 nRanks 96 f14r2n15:32395:1589 [2] NCCL INFO Channel 00 : 66[43000] -> 65[26000] via P2P/IPC comm 0x2b99d0000ab0 nRanks 96 f14r2n07:7789:9165 [2] NCCL INFO Connected all rings comm 0x2b51e4000ab0 nRanks 96 busId 43000 f14r2n10:498:2244 [2] NCCL INFO Channel 00 : 46[43000] -> 45[26000] via P2P/IPC comm 0x2add2c000ab0 nRanks 96 f14r2n08:27954:29674 [2] NCCL INFO Connected all rings comm 0x2ae614000ab0 nRanks 96 busId 43000 f14r2n09:2439:4384 [2] NCCL INFO Channel 00 : 42[43000] -> 41[26000] via P2P/IPC comm 0x2b6790000ab0 nRanks 96 f14r2n14:4185:6069 [2] NCCL INFO Channel 00 : 62[43000] -> 61[26000] via P2P/IPC comm 0x2b2ac0000ab0 nRanks 96 f14r2n06:8124:9505 [2] NCCL INFO Channel 00 : 30[43000] -> 29[26000] via P2P/IPC comm 0x2b164c000ab0 nRanks 96 f14r2n12:7613:8982 [2] NCCL INFO Connected all rings comm 0x2b5b2c000ab0 nRanks 96 busId 43000 f14r2n13:20107:21747 [2] NCCL INFO Channel 01 : 58[43000] -> 57[26000] via P2P/IPC comm 0x2badc4000ab0 nRanks 96 f14r2n15:32395:1589 [2] NCCL INFO Channel 01 : 66[43000] -> 65[26000] via P2P/IPC comm 0x2b99d0000ab0 nRanks 96 f14r2n10:498:2244 [2] NCCL INFO Channel 01 : 46[43000] -> 45[26000] via P2P/IPC comm 0x2add2c000ab0 nRanks 96 f14r2n09:2439:4384 [2] NCCL INFO Channel 01 : 42[43000] -> 41[26000] via P2P/IPC comm 0x2b6790000ab0 nRanks 96 f14r2n14:4185:6069 [2] NCCL INFO Channel 01 : 62[43000] -> 61[26000] via P2P/IPC comm 0x2b2ac0000ab0 nRanks 96 f14r2n06:8124:9505 [2] NCCL INFO Channel 01 : 30[43000] -> 29[26000] via P2P/IPC comm 0x2b164c000ab0 nRanks 96 f14r2n08:27954:29674 [2] NCCL INFO Channel 00 : 38[43000] -> 37[26000] via P2P/IPC comm 0x2ae614000ab0 nRanks 96 f14r2n07:7789:9165 [2] NCCL INFO Channel 00 : 34[43000] -> 33[26000] via P2P/IPC comm 0x2b51e4000ab0 nRanks 96 f14r2n11:16951:18676 [2] NCCL INFO Channel 00 : 50[43000] -> 49[26000] via P2P/IPC comm 0x2ab7c8000ab0 nRanks 96 f14r2n12:7613:8982 [2] NCCL INFO Channel 00 : 54[43000] -> 53[26000] via P2P/IPC comm 0x2b5b2c000ab0 nRanks 96 f14r2n08:27954:29674 [2] NCCL INFO Channel 01 : 38[43000] -> 37[26000] via P2P/IPC comm 0x2ae614000ab0 nRanks 96 f14r2n07:7789:9165 [2] NCCL INFO Channel 01 : 34[43000] -> 33[26000] via P2P/IPC comm 0x2b51e4000ab0 nRanks 96 f14r2n11:16951:18676 [2] NCCL INFO Channel 01 : 50[43000] -> 49[26000] via P2P/IPC comm 0x2ab7c8000ab0 nRanks 96 f14r2n12:7613:8982 [2] NCCL INFO Channel 01 : 54[43000] -> 53[26000] via P2P/IPC comm 0x2b5b2c000ab0 nRanks 96 f14r2n04:3630:5491 [2] NCCL INFO Connected all rings comm 0x2b0cec000ab0 nRanks 96 busId 43000 f14r2n04:3630:5491 [2] NCCL INFO Channel 00 : 22[43000] -> 21[26000] via P2P/IPC comm 0x2b0cec000ab0 nRanks 96 f14r2n04:3630:5491 [2] NCCL INFO Channel 01 : 22[43000] -> 21[26000] via P2P/IPC comm 0x2b0cec000ab0 nRanks 96 f14r2n16:27452:28811 [3] NCCL INFO Connected all rings comm 0x2b6498000ab0 nRanks 96 busId 63000 f14r2n16:27452:28811 [3] NCCL INFO Channel 00 : 71[63000] -> 70[43000] via P2P/IPC comm 0x2b6498000ab0 nRanks 96 f14r3n00:20871:22238 [3] NCCL INFO Connected all rings comm 0x2b450c000ab0 nRanks 96 busId 63000 f14r3n00:20871:22238 [3] NCCL INFO Channel 00 : 87[63000] -> 86[43000] via P2P/IPC comm 0x2b450c000ab0 nRanks 96 f14r2n16:27452:28811 [3] NCCL INFO Channel 01 : 71[63000] -> 70[43000] via P2P/IPC comm 0x2b6498000ab0 nRanks 96 f14r2n18:11305:13053 [3] NCCL INFO Connected all rings comm 0x2b82a8000ab0 nRanks 96 busId 63000 f14r2n18:11305:13053 [3] NCCL INFO Channel 00 : 79[63000] -> 78[43000] via P2P/IPC comm 0x2b82a8000ab0 nRanks 96 f14r3n00:20871:22238 [3] NCCL INFO Channel 01 : 87[63000] -> 86[43000] via P2P/IPC comm 0x2b450c000ab0 nRanks 96 f14r2n18:11305:13053 [3] NCCL INFO Channel 01 : 79[63000] -> 78[43000] via P2P/IPC comm 0x2b82a8000ab0 nRanks 96 f14r2n19:10612:12008 [3] NCCL INFO Connected all rings comm 0x2b30d8000ab0 nRanks 96 busId 63000 f14r2n19:10612:12008 [3] NCCL INFO Channel 00 : 83[63000] -> 82[43000] via P2P/IPC comm 0x2b30d8000ab0 nRanks 96 f14r2n19:10612:12008 [3] NCCL INFO Channel 01 : 83[63000] -> 82[43000] via P2P/IPC comm 0x2b30d8000ab0 nRanks 96 f14r2n17:14570:16419 [3] NCCL INFO Connected all rings comm 0x2bacc8000ab0 nRanks 96 busId 63000 f14r2n17:14570:16419 [3] NCCL INFO Channel 00 : 75[63000] -> 74[43000] via P2P/IPC comm 0x2bacc8000ab0 nRanks 96 f14r2n17:14570:16419 [3] NCCL INFO Channel 01 : 75[63000] -> 74[43000] via P2P/IPC comm 0x2bacc8000ab0 nRanks 96 f14r3n02:32368:1492 [3] NCCL INFO Connected all rings comm 0x2ac104000ab0 nRanks 96 busId 63000 f14r3n02:32368:1492 [3] NCCL INFO Channel 00 : 95[63000] -> 94[43000] via P2P/IPC comm 0x2ac104000ab0 nRanks 96 f14r3n01:7394:9068 [3] NCCL INFO Connected all rings comm 0x2aee1c000ab0 nRanks 96 busId 63000 f14r3n01:7394:9068 [3] NCCL INFO Channel 00 : 91[63000] -> 90[43000] via P2P/IPC comm 0x2aee1c000ab0 nRanks 96 f14r2n16:27452:28811 [3] NCCL INFO Connected all trees comm 0x2b6498000ab0 nRanks 96 busId 63000 f14r2n16:27452:28811 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n16:27452:28811 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r3n02:32368:1492 [3] NCCL INFO Channel 01 : 95[63000] -> 94[43000] via P2P/IPC comm 0x2ac104000ab0 nRanks 96 f14r3n00:20871:22238 [3] NCCL INFO Connected all trees comm 0x2b450c000ab0 nRanks 96 busId 63000 f14r2n02:18589:20291 [3] NCCL INFO Connected all rings comm 0x2b65e0000ab0 nRanks 96 busId 63000 f14r3n00:20871:22238 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n02:18589:20291 [3] NCCL INFO Channel 00 : 15[63000] -> 14[43000] via P2P/IPC comm 0x2b65e0000ab0 nRanks 96 f14r3n00:20871:22238 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r3n01:7394:9068 [3] NCCL INFO Channel 01 : 91[63000] -> 90[43000] via P2P/IPC comm 0x2aee1c000ab0 nRanks 96 f14r2n18:11305:13053 [3] NCCL INFO Connected all trees comm 0x2b82a8000ab0 nRanks 96 busId 63000 f14r2n00:27305:28694 [3] NCCL INFO Connected all rings comm 0x2b0858000ab0 nRanks 96 busId 63000 f14r2n00:27305:28694 [3] NCCL INFO Channel 00 : 7[63000] -> 6[43000] via P2P/IPC comm 0x2b0858000ab0 nRanks 96 f14r2n18:11305:13053 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n18:11305:13053 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n02:18589:20291 [3] NCCL INFO Channel 01 : 15[63000] -> 14[43000] via P2P/IPC comm 0x2b65e0000ab0 nRanks 96 f14r2n19:10613:12007 [0] NCCL INFO Connected all rings comm 0x2b8fb4000ab0 nRanks 96 busId 4000 f14r3n00:20870:22237 [0] NCCL INFO Connected all rings comm 0x2b4cdc000ab0 nRanks 96 busId 4000 f14r2n00:27305:28694 [3] NCCL INFO Channel 01 : 7[63000] -> 6[43000] via P2P/IPC comm 0x2b0858000ab0 nRanks 96 f14r2n14:4183:6068 [3] NCCL INFO Connected all rings comm 0x2b2e20000ab0 nRanks 96 busId 63000 f14r2n14:4183:6068 [3] NCCL INFO Channel 00 : 63[63000] -> 62[43000] via P2P/IPC comm 0x2b2e20000ab0 nRanks 96 f14r2n08:27955:29670 [3] NCCL INFO Connected all rings comm 0x2b2994000ab0 nRanks 96 busId 63000 f14r2n08:27955:29670 [3] NCCL INFO Channel 00 : 39[63000] -> 38[43000] via P2P/IPC comm 0x2b2994000ab0 nRanks 96 f14r3n01:7396:9069 [0] NCCL INFO Connected all rings comm 0x2b16ec000ab0 nRanks 96 busId 4000 f14r2n14:4183:6068 [3] NCCL INFO Channel 01 : 63[63000] -> 62[43000] via P2P/IPC comm 0x2b2e20000ab0 nRanks 96 f14r2n01:16210:17861 [3] NCCL INFO Connected all rings comm 0x2b37a8000ab0 nRanks 96 busId 63000 f14r2n01:16210:17861 [3] NCCL INFO Channel 00 : 11[63000] -> 10[43000] via P2P/IPC comm 0x2b37a8000ab0 nRanks 96 f14r2n15:32397:1586 [3] NCCL INFO Connected all rings comm 0x2b0aa0000ab0 nRanks 96 busId 63000 f14r2n15:32397:1586 [3] NCCL INFO Channel 00 : 67[63000] -> 66[43000] via P2P/IPC comm 0x2b0aa0000ab0 nRanks 96 f14r2n10:502:2243 [3] NCCL INFO Connected all rings comm 0x2af01c000ab0 nRanks 96 busId 63000 f14r2n08:27955:29670 [3] NCCL INFO Channel 01 : 39[63000] -> 38[43000] via P2P/IPC comm 0x2b2994000ab0 nRanks 96 f14r2n10:502:2243 [3] NCCL INFO Channel 00 : 47[63000] -> 46[43000] via P2P/IPC comm 0x2af01c000ab0 nRanks 96 f14r3n02:32370:1495 [0] NCCL INFO Connected all rings comm 0x2b0fcc000ab0 nRanks 96 busId 4000 f14r2n19:10612:12008 [3] NCCL INFO Connected all trees comm 0x2b30d8000ab0 nRanks 96 busId 63000 f14r2n18:11304:13055 [0] NCCL INFO Connected all rings comm 0x2ab840000ab0 nRanks 96 busId 4000 f14r2n06:8123:9506 [3] NCCL INFO Connected all rings comm 0x2af544000ab0 nRanks 96 busId 63000 f14r2n01:16210:17861 [3] NCCL INFO Channel 01 : 11[63000] -> 10[43000] via P2P/IPC comm 0x2b37a8000ab0 nRanks 96 f14r2n06:8123:9506 [3] NCCL INFO Channel 00 : 31[63000] -> 30[43000] via P2P/IPC comm 0x2af544000ab0 nRanks 96 f14r2n19:10612:12008 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n19:10612:12008 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n10:502:2243 [3] NCCL INFO Channel 01 : 47[63000] -> 46[43000] via P2P/IPC comm 0x2af01c000ab0 nRanks 96 f14r2n15:32397:1586 [3] NCCL INFO Channel 01 : 67[63000] -> 66[43000] via P2P/IPC comm 0x2b0aa0000ab0 nRanks 96 f14r2n12:7615:8980 [3] NCCL INFO Connected all rings comm 0x2ada64000ab0 nRanks 96 busId 63000 f14r2n12:7615:8980 [3] NCCL INFO Channel 00 : 55[63000] -> 54[43000] via P2P/IPC comm 0x2ada64000ab0 nRanks 96 f14r2n17:14568:16418 [0] NCCL INFO Connected all rings comm 0x2acb44000ab0 nRanks 96 busId 4000 f14r2n06:8123:9506 [3] NCCL INFO Channel 01 : 31[63000] -> 30[43000] via P2P/IPC comm 0x2af544000ab0 nRanks 96 f14r2n17:14570:16419 [3] NCCL INFO Connected all trees comm 0x2bacc8000ab0 nRanks 96 busId 63000 f14r2n17:14570:16419 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n12:7615:8980 [3] NCCL INFO Channel 01 : 55[63000] -> 54[43000] via P2P/IPC comm 0x2ada64000ab0 nRanks 96 f14r2n11:16953:18671 [3] NCCL INFO Connected all rings comm 0x2b9a48000ab0 nRanks 96 busId 63000 f14r2n11:16953:18671 [3] NCCL INFO Channel 00 : 51[63000] -> 50[43000] via P2P/IPC comm 0x2b9a48000ab0 nRanks 96 f14r2n17:14570:16419 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r3n02:32368:1492 [3] NCCL INFO Connected all trees comm 0x2ac104000ab0 nRanks 96 busId 63000 f14r2n13:20109:21750 [3] NCCL INFO Connected all rings comm 0x2b5f6c000ab0 nRanks 96 busId 63000 f14r2n11:16953:18671 [3] NCCL INFO Channel 01 : 51[63000] -> 50[43000] via P2P/IPC comm 0x2b9a48000ab0 nRanks 96 f14r2n13:20109:21750 [3] NCCL INFO Channel 00 : 59[63000] -> 58[43000] via P2P/IPC comm 0x2b5f6c000ab0 nRanks 96 f14r3n02:32368:1492 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n01:16211:17860 [0] NCCL INFO Connected all rings comm 0x2afec8000ab0 nRanks 96 busId 4000 f14r3n02:32368:1492 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r3n01:7394:9068 [3] NCCL INFO Connected all trees comm 0x2aee1c000ab0 nRanks 96 busId 63000 f14r3n01:7394:9068 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r3n01:7394:9068 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r3n02:32367:1497 [2] NCCL INFO Connected all trees comm 0x2ac760000ab0 nRanks 96 busId 43000 f14r2n13:20109:21750 [3] NCCL INFO Channel 01 : 59[63000] -> 58[43000] via P2P/IPC comm 0x2b5f6c000ab0 nRanks 96 f14r3n02:32367:1497 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r3n02:32367:1497 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n02:18589:20291 [3] NCCL INFO Connected all trees comm 0x2b65e0000ab0 nRanks 96 busId 63000 f14r2n02:18589:20291 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n00:27305:28694 [3] NCCL INFO Connected all trees comm 0x2b0858000ab0 nRanks 96 busId 63000 f14r2n03:27607:29258 [3] NCCL INFO Connected all rings comm 0x2ac3f0000ab0 nRanks 96 busId 63000 f14r2n02:18589:20291 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n03:27607:29258 [3] NCCL INFO Channel 00 : 19[63000] -> 18[43000] via P2P/IPC comm 0x2ac3f0000ab0 nRanks 96 f14r2n00:27305:28694 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n00:27305:28694 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n14:4183:6068 [3] NCCL INFO Connected all trees comm 0x2b2e20000ab0 nRanks 96 busId 63000 f14r2n14:4183:6068 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n03:27607:29258 [3] NCCL INFO Channel 01 : 19[63000] -> 18[43000] via P2P/IPC comm 0x2ac3f0000ab0 nRanks 96 f14r2n14:4183:6068 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n08:27955:29670 [3] NCCL INFO Connected all trees comm 0x2b2994000ab0 nRanks 96 busId 63000 f14r2n13:20108:21749 [0] NCCL INFO Connected all rings comm 0x2b2664000ab0 nRanks 96 busId 4000 f14r2n08:27955:29670 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n08:27955:29670 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n16:27453:28814 [0] NCCL INFO Connected all rings comm 0x2ba180000ab0 nRanks 96 busId 4000 f14r2n14:4184:6067 [0] NCCL INFO Connected all rings comm 0x2b9b3c000ab0 nRanks 96 busId 4000 f14r2n05:26240:27871 [3] NCCL INFO Connected all rings comm 0x2b4558000ab0 nRanks 96 busId 63000 f14r2n05:26240:27871 [3] NCCL INFO Channel 00 : 27[63000] -> 26[43000] via P2P/IPC comm 0x2b4558000ab0 nRanks 96 f14r2n01:16210:17861 [3] NCCL INFO Connected all trees comm 0x2b37a8000ab0 nRanks 96 busId 63000 f14r2n02:18587:20293 [0] NCCL INFO Connected all rings comm 0x2b5228000ab0 nRanks 96 busId 4000 f14r2n01:16210:17861 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n12:7614:8984 [0] NCCL INFO Connected all rings comm 0x2b0e24000ab0 nRanks 96 busId 4000 f14r2n10:502:2243 [3] NCCL INFO Connected all trees comm 0x2af01c000ab0 nRanks 96 busId 63000 f14r2n15:32397:1586 [3] NCCL INFO Connected all trees comm 0x2b0aa0000ab0 nRanks 96 busId 63000 f14r2n01:16210:17861 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n15:32397:1586 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n10:502:2243 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n15:32397:1586 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n10:502:2243 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n11:16952:18673 [0] NCCL INFO Connected all rings comm 0x2b71fc000ab0 nRanks 96 busId 4000 f14r2n04:3628:5488 [0] NCCL INFO Connected all rings comm 0x2ac12c000ab0 nRanks 96 busId 4000 f14r2n05:26240:27871 [3] NCCL INFO Channel 01 : 27[63000] -> 26[43000] via P2P/IPC comm 0x2b4558000ab0 nRanks 96 f14r2n06:8123:9506 [3] NCCL INFO Connected all trees comm 0x2af544000ab0 nRanks 96 busId 63000 f14r2n06:8123:9506 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n06:8123:9506 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n06:8125:9503 [0] NCCL INFO Connected all rings comm 0x2b7ed8000ab0 nRanks 96 busId 4000 f14r2n11:16953:18671 [3] NCCL INFO Connected all trees comm 0x2b9a48000ab0 nRanks 96 busId 63000 f14r2n11:16953:18671 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n11:16953:18671 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n12:7615:8980 [3] NCCL INFO Connected all trees comm 0x2ada64000ab0 nRanks 96 busId 63000 f14r1n19:18664:20445 [0] NCCL INFO Connected all rings comm 0x2b093c000ab0 nRanks 96 busId 4000 f14r1n19:18666:20640 [3] NCCL INFO Connected all rings comm 0x2b3468000ab0 nRanks 96 busId 63000 f14r1n19:18666:20640 [3] NCCL INFO Channel 00 : 3[63000] -> 2[43000] via P2P/IPC comm 0x2b3468000ab0 nRanks 96 f14r2n12:7615:8980 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n12:7615:8980 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r1n19:18666:20640 [3] NCCL INFO Channel 01 : 3[63000] -> 2[43000] via P2P/IPC comm 0x2b3468000ab0 nRanks 96 f14r2n09:2438:4383 [0] NCCL INFO Connected all rings comm 0x2ac780000ab0 nRanks 96 busId 4000 f14r2n13:20109:21750 [3] NCCL INFO Connected all trees comm 0x2b5f6c000ab0 nRanks 96 busId 63000 f14r2n13:20109:21750 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n08:27953:29675 [0] NCCL INFO Connected all rings comm 0x2b64a8000ab0 nRanks 96 busId 4000 f14r2n13:20109:21750 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n05:26238:27869 [0] NCCL INFO Connected all rings comm 0x2b5734000ab0 nRanks 96 busId 4000 f14r2n00:27304:28693 [0] NCCL INFO Connected all rings comm 0x2ba3ec000ab0 nRanks 96 busId 4000 f14r2n03:27607:29258 [3] NCCL INFO Connected all trees comm 0x2ac3f0000ab0 nRanks 96 busId 63000 f14r2n03:27607:29258 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n03:27607:29258 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n05:26240:27871 [3] NCCL INFO Connected all trees comm 0x2b4558000ab0 nRanks 96 busId 63000 f14r2n05:26240:27871 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n05:26240:27871 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n10:499:2241 [0] NCCL INFO Connected all rings comm 0x2b769c000ab0 nRanks 96 busId 4000 f14r2n09:2440:4376 [3] NCCL INFO Connected all rings comm 0x2b9c58000ab0 nRanks 96 busId 63000 f14r2n09:2440:4376 [3] NCCL INFO Channel 00 : 43[63000] -> 42[43000] via P2P/IPC comm 0x2b9c58000ab0 nRanks 96 f14r2n09:2440:4376 [3] NCCL INFO Channel 01 : 43[63000] -> 42[43000] via P2P/IPC comm 0x2b9c58000ab0 nRanks 96 f14r1n19:18666:20640 [3] NCCL INFO Connected all trees comm 0x2b3468000ab0 nRanks 96 busId 63000 f14r1n19:18666:20640 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r1n19:18666:20640 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n03:27606:29257 [0] NCCL INFO Connected all rings comm 0x2ae958000ab0 nRanks 96 busId 4000 f14r2n07:7788:9164 [3] NCCL INFO Connected all rings comm 0x2afc5c000ab0 nRanks 96 busId 63000 f14r1n19:18665:20644 [2] NCCL INFO Connected all trees comm 0x2aeb10000ab0 nRanks 96 busId 43000 f14r2n07:7788:9164 [3] NCCL INFO Channel 00 : 35[63000] -> 34[43000] via P2P/IPC comm 0x2afc5c000ab0 nRanks 96 f14r1n19:18665:20644 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r1n19:18665:20644 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n07:7788:9164 [3] NCCL INFO Channel 01 : 35[63000] -> 34[43000] via P2P/IPC comm 0x2afc5c000ab0 nRanks 96 f14r2n04:3627:5487 [3] NCCL INFO Connected all rings comm 0x2afa70000ab0 nRanks 96 busId 63000 f14r2n04:3627:5487 [3] NCCL INFO Channel 00 : 23[63000] -> 22[43000] via P2P/IPC comm 0x2afa70000ab0 nRanks 96 f14r2n04:3627:5487 [3] NCCL INFO Channel 01 : 23[63000] -> 22[43000] via P2P/IPC comm 0x2afa70000ab0 nRanks 96 f14r2n09:2440:4376 [3] NCCL INFO Connected all trees comm 0x2b9c58000ab0 nRanks 96 busId 63000 f14r2n09:2440:4376 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n09:2440:4376 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n07:7788:9164 [3] NCCL INFO Connected all trees comm 0x2afc5c000ab0 nRanks 96 busId 63000 f14r2n15:32396:1585 [0] NCCL INFO Connected all rings comm 0x2afd04000ab0 nRanks 96 busId 4000 f14r2n07:7788:9164 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n07:7788:9164 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n04:3627:5487 [3] NCCL INFO Connected all trees comm 0x2afa70000ab0 nRanks 96 busId 63000 f14r2n04:3627:5487 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n04:3627:5487 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n07:7791:9166 [0] NCCL INFO Connected all rings comm 0x2bab08000ab0 nRanks 96 busId 4000 f14r2n19:10613:12007 [0] NCCL INFO Channel 01/0 : 80[4000] -> 84[4000] [send] via NET/IB/0 comm 0x2b8fb4000ab0 nRanks 96 f14r3n00:20870:22237 [0] NCCL INFO Channel 01/0 : 80[4000] -> 84[4000] [receive] via NET/IB/0 comm 0x2b4cdc000ab0 nRanks 96 f14r3n01:7396:9069 [0] NCCL INFO Channel 01/0 : 85[26000] -> 88[4000] [receive] via NET/IB/0 comm 0x2b16ec000ab0 nRanks 96 f14r2n18:11304:13055 [0] NCCL INFO Channel 00/0 : 72[4000] -> 76[4000] [receive] via NET/IB/0 comm 0x2ab840000ab0 nRanks 96 f14r3n02:32370:1495 [0] NCCL INFO Channel 00/0 : 88[4000] -> 92[4000] [receive] via NET/IB/0 comm 0x2b0fcc000ab0 nRanks 96 f14r2n17:14568:16418 [0] NCCL INFO Channel 01/0 : 69[26000] -> 72[4000] [receive] via NET/IB/0 comm 0x2acb44000ab0 nRanks 96 f14r2n01:16211:17860 [0] NCCL INFO Channel 01/0 : 5[26000] -> 8[4000] [receive] via NET/IB/0 comm 0x2afec8000ab0 nRanks 96 f14r2n02:18587:20293 [0] NCCL INFO Channel 00/0 : 8[4000] -> 12[4000] [receive] via NET/IB/0 comm 0x2b5228000ab0 nRanks 96 f14r2n04:3628:5488 [0] NCCL INFO Channel 01/0 : 16[4000] -> 20[4000] [receive] via NET/IB/0 comm 0x2ac12c000ab0 nRanks 96 f14r2n14:4184:6067 [0] NCCL INFO Channel 00/0 : 56[4000] -> 60[4000] [receive] via NET/IB/0 comm 0x2b9b3c000ab0 nRanks 96 f14r2n16:27453:28814 [0] NCCL INFO Channel 01/0 : 64[4000] -> 68[4000] [receive] via NET/IB/0 comm 0x2ba180000ab0 nRanks 96 f14r2n13:20108:21749 [0] NCCL INFO Channel 01/0 : 53[26000] -> 56[4000] [receive] via NET/IB/0 comm 0x2b2664000ab0 nRanks 96 f14r2n11:16952:18673 [0] NCCL INFO Channel 01/0 : 48[4000] -> 52[4000] [send] via NET/IB/0 comm 0x2b71fc000ab0 nRanks 96 f14r2n06:8125:9503 [0] NCCL INFO Channel 00/0 : 24[4000] -> 28[4000] [receive] via NET/IB/0 comm 0x2b7ed8000ab0 nRanks 96 f14r2n12:7614:8984 [0] NCCL INFO Channel 01/0 : 48[4000] -> 52[4000] [receive] via NET/IB/0 comm 0x2b0e24000ab0 nRanks 96 f14r1n19:18664:20445 [0] NCCL INFO Channel 01/0 : 0[4000] -> 4[4000] [send] via NET/IB/0 comm 0x2b093c000ab0 nRanks 96 f14r2n08:27953:29675 [0] NCCL INFO Channel 01/0 : 32[4000] -> 36[4000] [receive] via NET/IB/0 comm 0x2b64a8000ab0 nRanks 96 f14r2n09:2438:4383 [0] NCCL INFO Channel 01/0 : 37[26000] -> 40[4000] [receive] via NET/IB/0 comm 0x2ac780000ab0 nRanks 96 f14r2n00:27304:28693 [0] NCCL INFO Channel 01/0 : 0[4000] -> 4[4000] [receive] via NET/IB/0 comm 0x2ba3ec000ab0 nRanks 96 f14r2n05:26238:27869 [0] NCCL INFO Channel 01/0 : 21[26000] -> 24[4000] [receive] via NET/IB/0 comm 0x2b5734000ab0 nRanks 96 f14r2n10:499:2241 [0] NCCL INFO Channel 00/0 : 40[4000] -> 44[4000] [receive] via NET/IB/0 comm 0x2b769c000ab0 nRanks 96 f14r2n03:27606:29257 [0] NCCL INFO Channel 01/0 : 16[4000] -> 20[4000] [send] via NET/IB/0 comm 0x2ae958000ab0 nRanks 96 f14r2n15:32396:1585 [0] NCCL INFO Channel 01/0 : 64[4000] -> 68[4000] [send] via NET/IB/0 comm 0x2afd04000ab0 nRanks 96 f14r2n07:7791:9166 [0] NCCL INFO Channel 01/0 : 32[4000] -> 36[4000] [send] via NET/IB/0 comm 0x2bab08000ab0 nRanks 96 f14r2n19:10613:12007 [0] NCCL INFO Channel 00/0 : 80[4000] -> 88[4000] [send] via NET/IB/0 comm 0x2b8fb4000ab0 nRanks 96 f14r3n00:20873:22235 [1] NCCL INFO Channel 01/0 : 88[4000] -> 85[26000] [receive] via NET/IB/0 comm 0x2afed4000ab0 nRanks 96 f14r2n16:27455:28812 [1] NCCL INFO Channel 01/0 : 72[4000] -> 69[26000] [receive] via NET/IB/0 comm 0x2b79a4000ab0 nRanks 96 f14r3n00:20870:22237 [0] NCCL INFO Channel 00/0 : 84[4000] -> 89[26000] [send] via NET/IB/0 comm 0x2b4cdc000ab0 nRanks 96 f14r2n00:27303:28695 [1] NCCL INFO Channel 01/0 : 8[4000] -> 5[26000] [receive] via NET/IB/0 comm 0x2b52d4000ab0 nRanks 96 f14r2n11:16952:18673 [0] NCCL INFO Channel 00/0 : 48[4000] -> 56[4000] [send] via NET/IB/0 comm 0x2b71fc000ab0 nRanks 96 f14r2n12:7612:8983 [1] NCCL INFO Channel 01/0 : 56[4000] -> 53[26000] [receive] via NET/IB/0 comm 0x2b0c4c000ab0 nRanks 96 f14r2n08:27952:29673 [1] NCCL INFO Channel 01/0 : 40[4000] -> 37[26000] [receive] via NET/IB/0 comm 0x2b1ef4000ab0 nRanks 96 f14r3n01:7396:9069 [0] NCCL INFO Channel 00/0 : 88[4000] -> 92[4000] [send] via NET/IB/0 comm 0x2b16ec000ab0 nRanks 96 f14r1n19:18664:20445 [0] NCCL INFO Channel 00/0 : 64[4000] -> 0[4000] [receive] via NET/IB/0 comm 0x2b093c000ab0 nRanks 96 f14r2n17:14568:16418 [0] NCCL INFO Channel 00/0 : 72[4000] -> 76[4000] [send] via NET/IB/0 comm 0x2acb44000ab0 nRanks 96 f14r2n04:3629:5484 [1] NCCL INFO Channel 01/0 : 24[4000] -> 21[26000] [receive] via NET/IB/0 comm 0x2ae624000ab0 nRanks 96 f14r2n01:16211:17860 [0] NCCL INFO Channel 00/0 : 8[4000] -> 12[4000] [send] via NET/IB/0 comm 0x2afec8000ab0 nRanks 96 f14r2n03:27606:29257 [0] NCCL INFO Channel 00/0 : 16[4000] -> 24[4000] [send] via NET/IB/0 comm 0x2ae958000ab0 nRanks 96 f14r2n00:27304:28693 [0] NCCL INFO Channel 00/0 : 4[4000] -> 9[26000] [send] via NET/IB/0 comm 0x2ba3ec000ab0 nRanks 96 f14r2n13:20108:21749 [0] NCCL INFO Channel 00/0 : 56[4000] -> 60[4000] [send] via NET/IB/0 comm 0x2b2664000ab0 nRanks 96 f14r2n04:3628:5488 [0] NCCL INFO Channel 00/0 : 20[4000] -> 25[26000] [send] via NET/IB/0 comm 0x2ac12c000ab0 nRanks 96 f14r2n12:7614:8984 [0] NCCL INFO Channel 00/0 : 52[4000] -> 57[26000] [send] via NET/IB/0 comm 0x2b0e24000ab0 nRanks 96 f14r2n15:32396:1585 [0] NCCL INFO Channel 00/0 : 64[4000] -> 80[4000] [send] via NET/IB/0 comm 0x2afd04000ab0 nRanks 96 f14r2n09:2438:4383 [0] NCCL INFO Channel 00/0 : 40[4000] -> 44[4000] [send] via NET/IB/0 comm 0x2ac780000ab0 nRanks 96 f14r2n05:26238:27869 [0] NCCL INFO Channel 00/0 : 24[4000] -> 28[4000] [send] via NET/IB/0 comm 0x2b5734000ab0 nRanks 96 f14r2n07:7791:9166 [0] NCCL INFO Channel 00/0 : 32[4000] -> 48[4000] [send] via NET/IB/0 comm 0x2bab08000ab0 nRanks 96 f14r2n16:27453:28814 [0] NCCL INFO Channel 00/0 : 68[4000] -> 73[26000] [send] via NET/IB/0 comm 0x2ba180000ab0 nRanks 96 f14r2n08:27953:29675 [0] NCCL INFO Channel 00/0 : 36[4000] -> 41[26000] [send] via NET/IB/0 comm 0x2b64a8000ab0 nRanks 96 f14r3n01:7396:9069 [0] NCCL INFO Channel 00/0 : 80[4000] -> 88[4000] [receive] via NET/IB/0 comm 0x2b16ec000ab0 nRanks 96 f14r2n17:14568:16418 [0] NCCL INFO Channel 00/0 : 72[4000] -> 81[26000] [send] via NET/IB/0 comm 0x2acb44000ab0 nRanks 96 f14r2n00:27304:28693 [0] NCCL INFO Channel 01/0 : 4[4000] -> 12[4000] [send] via NET/IB/0 comm 0x2ba3ec000ab0 nRanks 96 f14r3n01:7395:9073 [1] NCCL INFO Channel 00/0 : 89[26000] -> 84[4000] [send] via NET/IB/0 comm 0x2b5940000ab0 nRanks 96 f14r2n01:16211:17860 [0] NCCL INFO Channel 00/0 : 8[4000] -> 17[26000] [send] via NET/IB/0 comm 0x2afec8000ab0 nRanks 96 f14r2n13:20108:21749 [0] NCCL INFO Channel 00/0 : 48[4000] -> 56[4000] [receive] via NET/IB/0 comm 0x2b2664000ab0 nRanks 96 f14r2n04:3628:5488 [0] NCCL INFO Channel 01/0 : 13[26000] -> 20[4000] [receive] via NET/IB/0 comm 0x2ac12c000ab0 nRanks 96 f14r3n00:20870:22237 [0] NCCL INFO Channel 01/0 : 77[26000] -> 84[4000] [receive] via NET/IB/0 comm 0x2b4cdc000ab0 nRanks 96 f14r2n12:7614:8984 [0] NCCL INFO Channel 01/0 : 45[26000] -> 52[4000] [receive] via NET/IB/0 comm 0x2b0e24000ab0 nRanks 96 f14r2n09:2438:4383 [0] NCCL INFO Channel 00/0 : 40[4000] -> 49[26000] [send] via NET/IB/0 comm 0x2ac780000ab0 nRanks 96 f14r3n02:32370:1495 [0] NCCL INFO Channel 01/0 : 92[4000] -> 28[4000] [send] via NET/IB/0 comm 0x2b0fcc000ab0 nRanks 96 f14r2n01:16208:17863 [1] NCCL INFO Channel 00/0 : 9[26000] -> 4[4000] [send] via NET/IB/0 comm 0x2b557c000ab0 nRanks 96 f14r2n05:26238:27869 [0] NCCL INFO Channel 00/0 : 16[4000] -> 24[4000] [receive] via NET/IB/0 comm 0x2b5734000ab0 nRanks 96 f14r2n05:26239:27868 [1] NCCL INFO Channel 00/0 : 25[26000] -> 20[4000] [send] via NET/IB/0 comm 0x2b481c000ab0 nRanks 96 f14r2n18:11304:13055 [0] NCCL INFO Channel 01/0 : 68[4000] -> 76[4000] [receive] via NET/IB/0 comm 0x2ab840000ab0 nRanks 96 f14r2n02:18587:20293 [0] NCCL INFO Channel 01/0 : 4[4000] -> 12[4000] [receive] via NET/IB/0 comm 0x2b5228000ab0 nRanks 96 f14r2n13:20110:21752 [1] NCCL INFO Channel 00/0 : 57[26000] -> 52[4000] [send] via NET/IB/0 comm 0x2b6fc8000ab0 nRanks 96 f14r2n16:27453:28814 [0] NCCL INFO Channel 01/0 : 68[4000] -> 76[4000] [send] via NET/IB/0 comm 0x2ba180000ab0 nRanks 96 f14r2n14:4184:6067 [0] NCCL INFO Channel 01/0 : 44[4000] -> 60[4000] [receive] via NET/IB/0 comm 0x2b9b3c000ab0 nRanks 96 f14r2n08:27953:29675 [0] NCCL INFO Channel 01/0 : 36[4000] -> 44[4000] [send] via NET/IB/0 comm 0x2b64a8000ab0 nRanks 96 f14r2n17:14567:16420 [1] NCCL INFO Channel 00/0 : 73[26000] -> 68[4000] [send] via NET/IB/0 comm 0x2b0cc8000ab0 nRanks 96 f14r2n10:499:2241 [0] NCCL INFO Channel 01/0 : 36[4000] -> 44[4000] [receive] via NET/IB/0 comm 0x2b769c000ab0 nRanks 96 f14r2n06:8125:9503 [0] NCCL INFO Channel 01/0 : 12[4000] -> 28[4000] [receive] via NET/IB/0 comm 0x2b7ed8000ab0 nRanks 96 f14r2n09:2437:4379 [1] NCCL INFO Channel 00/0 : 41[26000] -> 36[4000] [send] via NET/IB/0 comm 0x2b5a30000ab0 nRanks 96 f14r2n17:14568:16418 [0] NCCL INFO Channel 00/0 : 81[26000] -> 72[4000] [receive] via NET/IB/0 comm 0x2acb44000ab0 nRanks 96 f14r2n19:10613:12007 [0] NCCL INFO Channel 00/0 : 64[4000] -> 80[4000] [receive] via NET/IB/0 comm 0x2b8fb4000ab0 nRanks 96 f14r2n01:16211:17860 [0] NCCL INFO Channel 00/0 : 17[26000] -> 8[4000] [receive] via NET/IB/0 comm 0x2afec8000ab0 nRanks 96 f14r2n19:10614:12006 [1] NCCL INFO Channel 00/0 : 81[26000] -> 72[4000] [send] via NET/IB/0 comm 0x2b3b88000ab0 nRanks 96 f14r2n18:11306:13056 [1] NCCL INFO Channel 01/0 : 84[4000] -> 77[26000] [receive] via NET/IB/0 comm 0x2b1224000ab0 nRanks 96 f14r2n11:16952:18673 [0] NCCL INFO Channel 00/0 : 32[4000] -> 48[4000] [receive] via NET/IB/0 comm 0x2b71fc000ab0 nRanks 96 f14r2n10:500:2242 [1] NCCL INFO Channel 01/0 : 52[4000] -> 45[26000] [receive] via NET/IB/0 comm 0x2b0d5c000ab0 nRanks 96 f14r2n02:18588:20295 [1] NCCL INFO Channel 01/0 : 20[4000] -> 13[26000] [receive] via NET/IB/0 comm 0x2b488c000ab0 nRanks 96 f14r2n09:2438:4383 [0] NCCL INFO Channel 00/0 : 49[26000] -> 40[4000] [receive] via NET/IB/0 comm 0x2ac780000ab0 nRanks 96 f14r2n03:27606:29257 [0] NCCL INFO Channel 00/0 : 16[4000] -> 33[26000] [send] via NET/IB/0 comm 0x2ae958000ab0 nRanks 96 f14r3n01:7396:9069 [0] NCCL INFO Channel 00/0 : 88[4000] -> 80[4000] [send] via NET/IB/0 comm 0x2b16ec000ab0 nRanks 96 f14r2n11:16954:18675 [1] NCCL INFO Channel 00/0 : 49[26000] -> 40[4000] [send] via NET/IB/0 comm 0x2b73e4000ab0 nRanks 96 f14r2n03:27605:29259 [1] NCCL INFO Channel 00/0 : 17[26000] -> 8[4000] [send] via NET/IB/0 comm 0x2bad5c000ab0 nRanks 96 f14r2n00:27304:28693 [0] NCCL INFO Channel 01/0 : 12[4000] -> 4[4000] [receive] via NET/IB/0 comm 0x2ba3ec000ab0 nRanks 96 f14r2n13:20108:21749 [0] NCCL INFO Channel 00/0 : 56[4000] -> 48[4000] [send] via NET/IB/0 comm 0x2b2664000ab0 nRanks 96 f14r2n16:27453:28814 [0] NCCL INFO Channel 01/0 : 76[4000] -> 68[4000] [receive] via NET/IB/0 comm 0x2ba180000ab0 nRanks 96 f14r2n18:11304:13055 [0] NCCL INFO Channel 01/0 : 61[26000] -> 76[4000] [receive] via NET/IB/0 comm 0x2ab840000ab0 nRanks 96 f14r2n08:27953:29675 [0] NCCL INFO Channel 01/0 : 44[4000] -> 36[4000] [receive] via NET/IB/0 comm 0x2b64a8000ab0 nRanks 96 f14r2n02:18587:20293 [0] NCCL INFO Channel 01/0 : 12[4000] -> 28[4000] [send] via NET/IB/0 comm 0x2b5228000ab0 nRanks 96 f14r2n04:3628:5488 [0] NCCL INFO Channel 01/0 : 20[4000] -> 13[26000] [send] via NET/IB/0 comm 0x2ac12c000ab0 nRanks 96 f14r2n05:26238:27869 [0] NCCL INFO Channel 00/0 : 24[4000] -> 16[4000] [send] via NET/IB/0 comm 0x2b5734000ab0 nRanks 96 f14r3n00:20870:22237 [0] NCCL INFO Channel 01/0 : 84[4000] -> 77[26000] [send] via NET/IB/0 comm 0x2b4cdc000ab0 nRanks 96 f14r2n12:7614:8984 [0] NCCL INFO Channel 01/0 : 52[4000] -> 45[26000] [send] via NET/IB/0 comm 0x2b0e24000ab0 nRanks 96 f14r2n10:499:2241 [0] NCCL INFO Channel 01/0 : 44[4000] -> 60[4000] [send] via NET/IB/0 comm 0x2b769c000ab0 nRanks 96 f14r2n19:10614:12006 [1] NCCL INFO Channel 00 : 81[26000] -> 80[4000] via P2P/IPC comm 0x2b3b88000ab0 nRanks 96 f14r2n19:10614:12006 [1] NCCL INFO Channel 01 : 81[26000] -> 80[4000] via P2P/IPC comm 0x2b3b88000ab0 nRanks 96 f14r2n11:16954:18675 [1] NCCL INFO Channel 00 : 49[26000] -> 48[4000] via P2P/IPC comm 0x2b73e4000ab0 nRanks 96 f14r2n03:27605:29259 [1] NCCL INFO Channel 00 : 17[26000] -> 16[4000] via P2P/IPC comm 0x2bad5c000ab0 nRanks 96 f14r2n19:10615:12010 [2] NCCL INFO Connected all trees comm 0x2b1730000ab0 nRanks 96 busId 43000 f14r2n19:10615:12010 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n11:16954:18675 [1] NCCL INFO Channel 01 : 49[26000] -> 48[4000] via P2P/IPC comm 0x2b73e4000ab0 nRanks 96 f14r2n19:10615:12010 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n03:27605:29259 [1] NCCL INFO Channel 01 : 17[26000] -> 16[4000] via P2P/IPC comm 0x2bad5c000ab0 nRanks 96 f14r2n11:16951:18676 [2] NCCL INFO Connected all trees comm 0x2ab7c8000ab0 nRanks 96 busId 43000 f14r2n11:16951:18676 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n11:16951:18676 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n03:27608:29263 [2] NCCL INFO Connected all trees comm 0x2ac780000ab0 nRanks 96 busId 43000 f14r2n03:27608:29263 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n03:27608:29263 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n02:18588:20295 [1] NCCL INFO Channel 00 : 13[26000] -> 12[4000] via P2P/IPC comm 0x2b488c000ab0 nRanks 96 f14r2n02:18588:20295 [1] NCCL INFO Channel 01 : 13[26000] -> 12[4000] via P2P/IPC comm 0x2b488c000ab0 nRanks 96 f14r2n10:500:2242 [1] NCCL INFO Channel 00 : 45[26000] -> 44[4000] via P2P/IPC comm 0x2b0d5c000ab0 nRanks 96 f14r2n10:500:2242 [1] NCCL INFO Channel 01 : 45[26000] -> 44[4000] via P2P/IPC comm 0x2b0d5c000ab0 nRanks 96 f14r2n18:11306:13056 [1] NCCL INFO Channel 00 : 77[26000] -> 76[4000] via P2P/IPC comm 0x2b1224000ab0 nRanks 96 f14r2n18:11306:13056 [1] NCCL INFO Channel 01 : 77[26000] -> 76[4000] via P2P/IPC comm 0x2b1224000ab0 nRanks 96 f14r2n02:18586:20296 [2] NCCL INFO Connected all trees comm 0x2b47a8000ab0 nRanks 96 busId 43000 f14r2n02:18586:20296 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n02:18586:20296 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n10:498:2244 [2] NCCL INFO Connected all trees comm 0x2add2c000ab0 nRanks 96 busId 43000 f14r2n10:498:2244 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n10:498:2244 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n18:11303:13058 [2] NCCL INFO Connected all trees comm 0x2b699c000ab0 nRanks 96 busId 43000 f14r2n18:11303:13058 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n18:11303:13058 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n15:32396:1585 [0] NCCL INFO Channel 00/0 : 64[4000] -> 0[4000] [send] via NET/IB/0 comm 0x2afd04000ab0 nRanks 96 f14r2n19:10613:12007 [0] NCCL INFO Channel 00/0 : 80[4000] -> 64[4000] [send] via NET/IB/0 comm 0x2b8fb4000ab0 nRanks 96 f14r2n07:7791:9166 [0] NCCL INFO Channel 00/0 : 32[4000] -> 65[26000] [send] via NET/IB/0 comm 0x2bab08000ab0 nRanks 96 f14r2n03:27606:29257 [0] NCCL INFO Channel 00/0 : 33[26000] -> 16[4000] [receive] via NET/IB/0 comm 0x2ae958000ab0 nRanks 96 f14r2n11:16952:18673 [0] NCCL INFO Channel 00/0 : 48[4000] -> 32[4000] [send] via NET/IB/0 comm 0x2b71fc000ab0 nRanks 96 f14r2n17:14568:16418 [0] NCCL INFO Channel 00/0 : 76[4000] -> 72[4000] [receive] via NET/IB/0 comm 0x2acb44000ab0 nRanks 96 f14r2n01:16211:17860 [0] NCCL INFO Channel 00/0 : 12[4000] -> 8[4000] [receive] via NET/IB/0 comm 0x2afec8000ab0 nRanks 96 f14r2n04:3628:5488 [0] NCCL INFO Channel 00/0 : 25[26000] -> 20[4000] [receive] via NET/IB/0 comm 0x2ac12c000ab0 nRanks 96 f14r2n14:4186:6070 [1] NCCL INFO Channel 01/0 : 76[4000] -> 61[26000] [receive] via NET/IB/0 comm 0x2b88f4000ab0 nRanks 96 f14r3n00:20870:22237 [0] NCCL INFO Channel 00/0 : 89[26000] -> 84[4000] [receive] via NET/IB/0 comm 0x2b4cdc000ab0 nRanks 96 f14r2n02:18587:20293 [0] NCCL INFO Channel 01/0 : 28[4000] -> 12[4000] [receive] via NET/IB/0 comm 0x2b5228000ab0 nRanks 96 f14r2n09:2438:4383 [0] NCCL INFO Channel 00/0 : 44[4000] -> 40[4000] [receive] via NET/IB/0 comm 0x2ac780000ab0 nRanks 96 f14r2n12:7614:8984 [0] NCCL INFO Channel 00/0 : 57[26000] -> 52[4000] [receive] via NET/IB/0 comm 0x2b0e24000ab0 nRanks 96 f14r2n10:499:2241 [0] NCCL INFO Channel 01/0 : 60[4000] -> 44[4000] [receive] via NET/IB/0 comm 0x2b769c000ab0 nRanks 96 f14r2n07:7790:9167 [1] NCCL INFO Channel 00/0 : 33[26000] -> 16[4000] [send] via NET/IB/0 comm 0x2b0138000ab0 nRanks 96 f14r2n14:4184:6067 [0] NCCL INFO Channel 01/0 : 29[26000] -> 60[4000] [receive] via NET/IB/0 comm 0x2b9b3c000ab0 nRanks 96 f14r2n18:11304:13055 [0] NCCL INFO Channel 01/0 : 76[4000] -> 61[26000] [send] via NET/IB/0 comm 0x2ab840000ab0 nRanks 96 f14r2n06:8125:9503 [0] NCCL INFO Channel 01/0 : 92[4000] -> 28[4000] [receive] via NET/IB/0 comm 0x2b7ed8000ab0 nRanks 96 f14r2n05:26239:27868 [1] NCCL INFO Channel 00 : 25[26000] -> 24[4000] via P2P/IPC comm 0x2b481c000ab0 nRanks 96 f14r2n07:7790:9167 [1] NCCL INFO Channel 00 : 33[26000] -> 32[4000] via P2P/IPC comm 0x2b0138000ab0 nRanks 96 f14r2n05:26239:27868 [1] NCCL INFO Channel 01 : 25[26000] -> 24[4000] via P2P/IPC comm 0x2b481c000ab0 nRanks 96 f14r3n01:7395:9073 [1] NCCL INFO Channel 00 : 89[26000] -> 88[4000] via P2P/IPC comm 0x2b5940000ab0 nRanks 96 f14r2n07:7790:9167 [1] NCCL INFO Channel 01 : 33[26000] -> 32[4000] via P2P/IPC comm 0x2b0138000ab0 nRanks 96 f14r3n01:7395:9073 [1] NCCL INFO Channel 01 : 89[26000] -> 88[4000] via P2P/IPC comm 0x2b5940000ab0 nRanks 96 f14r2n13:20110:21752 [1] NCCL INFO Channel 00 : 57[26000] -> 56[4000] via P2P/IPC comm 0x2b6fc8000ab0 nRanks 96 f14r2n13:20110:21752 [1] NCCL INFO Channel 01 : 57[26000] -> 56[4000] via P2P/IPC comm 0x2b6fc8000ab0 nRanks 96 f14r2n05:26237:27873 [2] NCCL INFO Connected all trees comm 0x2b3388000ab0 nRanks 96 busId 43000 f14r2n05:26237:27873 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n05:26237:27873 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n07:7789:9165 [2] NCCL INFO Connected all trees comm 0x2b51e4000ab0 nRanks 96 busId 43000 f14r2n07:7789:9165 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n07:7789:9165 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r3n01:7397:9074 [2] NCCL INFO Connected all trees comm 0x2ac180000ab0 nRanks 96 busId 43000 f14r3n01:7397:9074 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r3n01:7397:9074 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n13:20107:21747 [2] NCCL INFO Connected all trees comm 0x2badc4000ab0 nRanks 96 busId 43000 f14r2n13:20107:21747 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n13:20107:21747 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n14:4186:6070 [1] NCCL INFO Channel 00 : 61[26000] -> 60[4000] via P2P/IPC comm 0x2b88f4000ab0 nRanks 96 f14r2n14:4186:6070 [1] NCCL INFO Channel 01 : 61[26000] -> 60[4000] via P2P/IPC comm 0x2b88f4000ab0 nRanks 96 f14r2n14:4185:6069 [2] NCCL INFO Connected all trees comm 0x2b2ac0000ab0 nRanks 96 busId 43000 f14r2n14:4185:6069 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n14:4185:6069 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n15:32396:1585 [0] NCCL INFO Channel 00/0 : 0[4000] -> 64[4000] [receive] via NET/IB/0 comm 0x2afd04000ab0 nRanks 96 f14r2n07:7791:9166 [0] NCCL INFO Channel 00/0 : 65[26000] -> 32[4000] [receive] via NET/IB/0 comm 0x2bab08000ab0 nRanks 96 f14r1n19:18664:20445 [0] NCCL INFO Channel 00/0 : 0[4000] -> 64[4000] [send] via NET/IB/0 comm 0x2b093c000ab0 nRanks 96 f14r2n15:32398:1588 [1] NCCL INFO Channel 00/0 : 65[26000] -> 32[4000] [send] via NET/IB/0 comm 0x2b23cc000ab0 nRanks 96 f14r2n18:11304:13055 [0] NCCL INFO Channel 01/0 : 76[4000] -> 68[4000] [send] via NET/IB/0 comm 0x2ab840000ab0 nRanks 96 f14r2n04:3628:5488 [0] NCCL INFO Channel 01/0 : 20[4000] -> 16[4000] [send] via NET/IB/0 comm 0x2ac12c000ab0 nRanks 96 f14r3n00:20870:22237 [0] NCCL INFO Channel 01/0 : 84[4000] -> 80[4000] [send] via NET/IB/0 comm 0x2b4cdc000ab0 nRanks 96 f14r3n02:32370:1495 [0] NCCL INFO Channel 01/0 : 28[4000] -> 92[4000] [receive] via NET/IB/0 comm 0x2b0fcc000ab0 nRanks 96 f14r2n12:7614:8984 [0] NCCL INFO Channel 01/0 : 52[4000] -> 48[4000] [send] via NET/IB/0 comm 0x2b0e24000ab0 nRanks 96 f14r2n06:8126:9504 [1] NCCL INFO Channel 01/0 : 60[4000] -> 29[26000] [receive] via NET/IB/0 comm 0x2b486c000ab0 nRanks 96 f14r2n03:27606:29257 [0] NCCL INFO Channel 00/0 : 24[4000] -> 16[4000] [receive] via NET/IB/0 comm 0x2ae958000ab0 nRanks 96 f14r2n06:8125:9503 [0] NCCL INFO Channel 01/0 : 28[4000] -> 92[4000] [send] via NET/IB/0 comm 0x2b7ed8000ab0 nRanks 96 f14r2n14:4184:6067 [0] NCCL INFO Channel 01/0 : 60[4000] -> 29[26000] [send] via NET/IB/0 comm 0x2b9b3c000ab0 nRanks 96 f14r2n15:32398:1588 [1] NCCL INFO Channel 00 : 65[26000] -> 64[4000] via P2P/IPC comm 0x2b23cc000ab0 nRanks 96 f14r2n15:32398:1588 [1] NCCL INFO Channel 01 : 65[26000] -> 64[4000] via P2P/IPC comm 0x2b23cc000ab0 nRanks 96 f14r2n15:32395:1589 [2] NCCL INFO Connected all trees comm 0x2b99d0000ab0 nRanks 96 busId 43000 f14r2n15:32395:1589 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n15:32395:1589 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n06:8126:9504 [1] NCCL INFO Channel 00 : 29[26000] -> 28[4000] via P2P/IPC comm 0x2b486c000ab0 nRanks 96 f14r2n06:8126:9504 [1] NCCL INFO Channel 01 : 29[26000] -> 28[4000] via P2P/IPC comm 0x2b486c000ab0 nRanks 96 f14r2n06:8124:9505 [2] NCCL INFO Connected all trees comm 0x2b164c000ab0 nRanks 96 busId 43000 f14r2n06:8124:9505 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n06:8124:9505 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r1n19:18664:20445 [0] NCCL INFO Channel 01/0 : 4[4000] -> 0[4000] [receive] via NET/IB/0 comm 0x2b093c000ab0 nRanks 96 f14r2n15:32396:1585 [0] NCCL INFO Channel 00/0 : 80[4000] -> 64[4000] [receive] via NET/IB/0 comm 0x2afd04000ab0 nRanks 96 f14r2n07:7791:9166 [0] NCCL INFO Channel 00/0 : 48[4000] -> 32[4000] [receive] via NET/IB/0 comm 0x2bab08000ab0 nRanks 96 f14r2n18:11304:13055 [0] NCCL INFO Channel 00/0 : 76[4000] -> 72[4000] [send] via NET/IB/0 comm 0x2ab840000ab0 nRanks 96 f14r2n05:26238:27869 [0] NCCL INFO Channel 00/0 : 28[4000] -> 24[4000] [receive] via NET/IB/0 comm 0x2b5734000ab0 nRanks 96 f14r2n06:8125:9503 [0] NCCL INFO Channel 01/0 : 28[4000] -> 12[4000] [send] via NET/IB/0 comm 0x2b7ed8000ab0 nRanks 96 f14r2n14:4184:6067 [0] NCCL INFO Channel 01/0 : 60[4000] -> 44[4000] [send] via NET/IB/0 comm 0x2b9b3c000ab0 nRanks 96 f14r2n16:27453:28814 [0] NCCL INFO Channel 00/0 : 73[26000] -> 68[4000] [receive] via NET/IB/0 comm 0x2ba180000ab0 nRanks 96 f14r2n03:27606:29257 [0] NCCL INFO Channel 01/0 : 20[4000] -> 16[4000] [receive] via NET/IB/0 comm 0x2ae958000ab0 nRanks 96 f14r3n02:32370:1495 [0] NCCL INFO Channel 00/0 : 92[4000] -> 88[4000] [send] via NET/IB/0 comm 0x2b0fcc000ab0 nRanks 96 f14r2n18:11304:13055 [0] NCCL INFO Connected all trees comm 0x2ab840000ab0 nRanks 96 busId 4000 f14r2n18:11304:13055 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n18:11304:13055 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n18:11306:13056 [1] NCCL INFO Connected all trees comm 0x2b1224000ab0 nRanks 96 busId 26000 f14r2n18:11306:13056 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n18:11306:13056 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n17:14567:16420 [1] NCCL INFO Channel 00 : 73[26000] -> 72[4000] via P2P/IPC comm 0x2b0cc8000ab0 nRanks 96 f14r2n17:14567:16420 [1] NCCL INFO Channel 01 : 73[26000] -> 72[4000] via P2P/IPC comm 0x2b0cc8000ab0 nRanks 96 f14r2n17:14569:16422 [2] NCCL INFO Connected all trees comm 0x2b92f8000ab0 nRanks 96 busId 43000 f14r2n17:14569:16422 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n17:14569:16422 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n03:27606:29257 [0] NCCL INFO Connected all trees comm 0x2ae958000ab0 nRanks 96 busId 4000 f14r2n03:27606:29257 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n03:27606:29257 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n03:27605:29259 [1] NCCL INFO Connected all trees comm 0x2bad5c000ab0 nRanks 96 busId 26000 f14r2n03:27605:29259 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n03:27605:29259 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n19:10613:12007 [0] NCCL INFO Channel 00/0 : 88[4000] -> 80[4000] [receive] via NET/IB/0 comm 0x2b8fb4000ab0 nRanks 96 f14r2n11:16952:18673 [0] NCCL INFO Channel 00/0 : 56[4000] -> 48[4000] [receive] via NET/IB/0 comm 0x2b71fc000ab0 nRanks 96 f14r2n15:32396:1585 [0] NCCL INFO Channel 01/0 : 68[4000] -> 64[4000] [receive] via NET/IB/0 comm 0x2afd04000ab0 nRanks 96 f14r2n07:7791:9166 [0] NCCL INFO Channel 01/0 : 36[4000] -> 32[4000] [receive] via NET/IB/0 comm 0x2bab08000ab0 nRanks 96 f14r2n17:14568:16418 [0] NCCL INFO Channel 01/0 : 72[4000] -> 69[26000] [send] via NET/IB/0 comm 0x2acb44000ab0 nRanks 96 f14r2n14:4184:6067 [0] NCCL INFO Channel 00/0 : 60[4000] -> 56[4000] [send] via NET/IB/0 comm 0x2b9b3c000ab0 nRanks 96 f14r2n06:8125:9503 [0] NCCL INFO Channel 00/0 : 28[4000] -> 24[4000] [send] via NET/IB/0 comm 0x2b7ed8000ab0 nRanks 96 f14r2n16:27453:28814 [0] NCCL INFO Channel 01/0 : 68[4000] -> 64[4000] [send] via NET/IB/0 comm 0x2ba180000ab0 nRanks 96 f14r2n10:499:2241 [0] NCCL INFO Channel 01/0 : 44[4000] -> 36[4000] [send] via NET/IB/0 comm 0x2b769c000ab0 nRanks 96 f14r2n02:18587:20293 [0] NCCL INFO Channel 01/0 : 12[4000] -> 4[4000] [send] via NET/IB/0 comm 0x2b5228000ab0 nRanks 96 f14r2n17:14568:16418 [0] NCCL INFO Connected all trees comm 0x2acb44000ab0 nRanks 96 busId 4000 f14r2n17:14568:16418 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n17:14568:16418 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n17:14567:16420 [1] NCCL INFO Connected all trees comm 0x2b0cc8000ab0 nRanks 96 busId 26000 f14r2n17:14567:16420 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n17:14567:16420 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n06:8125:9503 [0] NCCL INFO Connected all trees comm 0x2b7ed8000ab0 nRanks 96 busId 4000 f14r2n06:8125:9503 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n06:8125:9503 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n06:8126:9504 [1] NCCL INFO Connected all trees comm 0x2b486c000ab0 nRanks 96 busId 26000 f14r2n06:8126:9504 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n06:8126:9504 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n16:27455:28812 [1] NCCL INFO Channel 00 : 69[26000] -> 68[4000] via P2P/IPC comm 0x2b79a4000ab0 nRanks 96 f14r2n16:27455:28812 [1] NCCL INFO Channel 01 : 69[26000] -> 68[4000] via P2P/IPC comm 0x2b79a4000ab0 nRanks 96 f14r2n16:27453:28814 [0] NCCL INFO Connected all trees comm 0x2ba180000ab0 nRanks 96 busId 4000 f14r2n16:27453:28814 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n16:27453:28814 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n16:27454:28816 [2] NCCL INFO Connected all trees comm 0x2b35e4000ab0 nRanks 96 busId 43000 f14r2n16:27454:28816 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n16:27454:28816 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n16:27455:28812 [1] NCCL INFO Connected all trees comm 0x2b79a4000ab0 nRanks 96 busId 26000 f14r2n16:27455:28812 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n16:27455:28812 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n15:32396:1585 [0] NCCL INFO Connected all trees comm 0x2afd04000ab0 nRanks 96 busId 4000 f14r2n15:32396:1585 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n15:32396:1585 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n15:32398:1588 [1] NCCL INFO Connected all trees comm 0x2b23cc000ab0 nRanks 96 busId 26000 f14r2n15:32398:1588 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n15:32398:1588 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r3n01:7396:9069 [0] NCCL INFO Channel 00/0 : 92[4000] -> 88[4000] [receive] via NET/IB/0 comm 0x2b16ec000ab0 nRanks 96 f14r2n13:20108:21749 [0] NCCL INFO Channel 00/0 : 60[4000] -> 56[4000] [receive] via NET/IB/0 comm 0x2b2664000ab0 nRanks 96 f14r2n19:10613:12007 [0] NCCL INFO Channel 01/0 : 84[4000] -> 80[4000] [receive] via NET/IB/0 comm 0x2b8fb4000ab0 nRanks 96 f14r2n11:16952:18673 [0] NCCL INFO Channel 01/0 : 52[4000] -> 48[4000] [receive] via NET/IB/0 comm 0x2b71fc000ab0 nRanks 96 f14r2n10:499:2241 [0] NCCL INFO Channel 00/0 : 44[4000] -> 40[4000] [send] via NET/IB/0 comm 0x2b769c000ab0 nRanks 96 f14r2n05:26238:27869 [0] NCCL INFO Channel 01/0 : 24[4000] -> 21[26000] [send] via NET/IB/0 comm 0x2b5734000ab0 nRanks 96 f14r2n02:18587:20293 [0] NCCL INFO Channel 00/0 : 12[4000] -> 8[4000] [send] via NET/IB/0 comm 0x2b5228000ab0 nRanks 96 f14r2n18:11303:13058 [2] NCCL INFO comm 0x2b699c000ab0 rank 78 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n18:11306:13056 [1] NCCL INFO comm 0x2b1224000ab0 rank 77 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n18:11305:13053 [3] NCCL INFO comm 0x2b82a8000ab0 rank 79 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n08:27953:29675 [0] NCCL INFO Channel 00/0 : 41[26000] -> 36[4000] [receive] via NET/IB/0 comm 0x2b64a8000ab0 nRanks 96 f14r2n00:27304:28693 [0] NCCL INFO Channel 00/0 : 9[26000] -> 4[4000] [receive] via NET/IB/0 comm 0x2ba3ec000ab0 nRanks 96 f14r2n18:11304:13055 [0] NCCL INFO comm 0x2ab840000ab0 rank 76 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n14:4184:6067 [0] NCCL INFO Connected all trees comm 0x2b9b3c000ab0 nRanks 96 busId 4000 f14r3n02:32370:1495 [0] NCCL INFO Connected all trees comm 0x2b0fcc000ab0 nRanks 96 busId 4000 f14r3n02:32370:1495 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r3n02:32370:1495 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n14:4184:6067 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n14:4184:6067 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n14:4186:6070 [1] NCCL INFO Connected all trees comm 0x2b88f4000ab0 nRanks 96 busId 26000 f14r3n02:32369:1493 [1] NCCL INFO Connected all trees comm 0x2ac184000ab0 nRanks 96 busId 26000 f14r2n14:4186:6070 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n14:4186:6070 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r3n02:32369:1493 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r3n02:32369:1493 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n03:27608:29263 [2] NCCL INFO comm 0x2ac780000ab0 rank 18 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n03:27605:29259 [1] NCCL INFO comm 0x2bad5c000ab0 rank 17 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n03:27607:29258 [3] NCCL INFO comm 0x2ac3f0000ab0 rank 19 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n03:27606:29257 [0] NCCL INFO comm 0x2ae958000ab0 rank 16 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n19:10613:12007 [0] NCCL INFO Connected all trees comm 0x2b8fb4000ab0 nRanks 96 busId 4000 f14r2n19:10613:12007 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n19:10613:12007 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n10:499:2241 [0] NCCL INFO Connected all trees comm 0x2b769c000ab0 nRanks 96 busId 4000 f14r2n19:10614:12006 [1] NCCL INFO Connected all trees comm 0x2b3b88000ab0 nRanks 96 busId 26000 f14r2n10:499:2241 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n10:499:2241 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n19:10614:12006 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n19:10614:12006 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n10:500:2242 [1] NCCL INFO Connected all trees comm 0x2b0d5c000ab0 nRanks 96 busId 26000 f14r2n10:500:2242 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n10:500:2242 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n05:26238:27869 [0] NCCL INFO Connected all trees comm 0x2b5734000ab0 nRanks 96 busId 4000 f14r2n05:26238:27869 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n05:26238:27869 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n05:26239:27868 [1] NCCL INFO Connected all trees comm 0x2b481c000ab0 nRanks 96 busId 26000 f14r2n11:16952:18673 [0] NCCL INFO Connected all trees comm 0x2b71fc000ab0 nRanks 96 busId 4000 f14r2n05:26239:27868 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n05:26239:27868 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n11:16952:18673 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n11:16952:18673 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n02:18587:20293 [0] NCCL INFO Connected all trees comm 0x2b5228000ab0 nRanks 96 busId 4000 f14r2n02:18587:20293 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n02:18587:20293 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n02:18588:20295 [1] NCCL INFO Connected all trees comm 0x2b488c000ab0 nRanks 96 busId 26000 f14r2n11:16954:18675 [1] NCCL INFO Connected all trees comm 0x2b73e4000ab0 nRanks 96 busId 26000 f14r2n02:18588:20295 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n02:18588:20295 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n11:16954:18675 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n11:16954:18675 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n09:2437:4379 [1] NCCL INFO Channel 00 : 41[26000] -> 40[4000] via P2P/IPC comm 0x2b5a30000ab0 nRanks 96 f14r2n09:2437:4379 [1] NCCL INFO Channel 01 : 41[26000] -> 40[4000] via P2P/IPC comm 0x2b5a30000ab0 nRanks 96 f14r2n04:3629:5484 [1] NCCL INFO Channel 00 : 21[26000] -> 20[4000] via P2P/IPC comm 0x2ae624000ab0 nRanks 96 f14r2n04:3629:5484 [1] NCCL INFO Channel 01 : 21[26000] -> 20[4000] via P2P/IPC comm 0x2ae624000ab0 nRanks 96 f14r2n09:2439:4384 [2] NCCL INFO Connected all trees comm 0x2b6790000ab0 nRanks 96 busId 43000 f14r2n09:2439:4384 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n09:2439:4384 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n04:3628:5488 [0] NCCL INFO Connected all trees comm 0x2ac12c000ab0 nRanks 96 busId 4000 f14r2n04:3628:5488 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n04:3628:5488 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n01:16208:17863 [1] NCCL INFO Channel 00 : 9[26000] -> 8[4000] via P2P/IPC comm 0x2b557c000ab0 nRanks 96 f14r2n04:3630:5491 [2] NCCL INFO Connected all trees comm 0x2b0cec000ab0 nRanks 96 busId 43000 f14r2n04:3629:5484 [1] NCCL INFO Connected all trees comm 0x2ae624000ab0 nRanks 96 busId 26000 f14r2n01:16208:17863 [1] NCCL INFO Channel 01 : 9[26000] -> 8[4000] via P2P/IPC comm 0x2b557c000ab0 nRanks 96 f14r2n04:3630:5491 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n04:3630:5491 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n04:3629:5484 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n04:3629:5484 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n01:16209:17862 [2] NCCL INFO Connected all trees comm 0x2b4998000ab0 nRanks 96 busId 43000 f14r2n01:16209:17862 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n01:16209:17862 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r3n01:7396:9069 [0] NCCL INFO Channel 01/0 : 88[4000] -> 85[26000] [send] via NET/IB/0 comm 0x2b16ec000ab0 nRanks 96 f14r2n13:20108:21749 [0] NCCL INFO Channel 01/0 : 56[4000] -> 53[26000] [send] via NET/IB/0 comm 0x2b2664000ab0 nRanks 96 f14r2n09:2438:4383 [0] NCCL INFO Channel 01/0 : 40[4000] -> 37[26000] [send] via NET/IB/0 comm 0x2ac780000ab0 nRanks 96 f14r2n01:16211:17860 [0] NCCL INFO Channel 01/0 : 8[4000] -> 5[26000] [send] via NET/IB/0 comm 0x2afec8000ab0 nRanks 96 f14r2n17:14568:16418 [0] NCCL INFO comm 0x2acb44000ab0 rank 72 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n17:14569:16422 [2] NCCL INFO comm 0x2b92f8000ab0 rank 74 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n06:8125:9503 [0] NCCL INFO comm 0x2b7ed8000ab0 rank 28 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n17:14570:16419 [3] NCCL INFO comm 0x2bacc8000ab0 rank 75 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n17:14567:16420 [1] NCCL INFO comm 0x2b0cc8000ab0 rank 73 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n08:27953:29675 [0] NCCL INFO Channel 01/0 : 36[4000] -> 32[4000] [send] via NET/IB/0 comm 0x2b64a8000ab0 nRanks 96 f14r2n06:8126:9504 [1] NCCL INFO comm 0x2b486c000ab0 rank 29 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n06:8123:9506 [3] NCCL INFO comm 0x2af544000ab0 rank 31 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n00:27304:28693 [0] NCCL INFO Channel 01/0 : 4[4000] -> 0[4000] [send] via NET/IB/0 comm 0x2ba3ec000ab0 nRanks 96 f14r2n16:27453:28814 [0] NCCL INFO comm 0x2ba180000ab0 rank 68 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n15:32395:1589 [2] NCCL INFO comm 0x2b99d0000ab0 rank 66 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n16:27452:28811 [3] NCCL INFO comm 0x2b6498000ab0 rank 71 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n06:8124:9505 [2] NCCL INFO comm 0x2b164c000ab0 rank 30 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r3n01:7396:9069 [0] NCCL INFO Connected all trees comm 0x2b16ec000ab0 nRanks 96 busId 4000 f14r3n01:7396:9069 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r3n01:7396:9069 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r3n01:7395:9073 [1] NCCL INFO Connected all trees comm 0x2b5940000ab0 nRanks 96 busId 26000 f14r3n01:7395:9073 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r3n01:7395:9073 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n16:27455:28812 [1] NCCL INFO comm 0x2b79a4000ab0 rank 69 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n16:27454:28816 [2] NCCL INFO comm 0x2b35e4000ab0 rank 70 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r3n00:20873:22235 [1] NCCL INFO Channel 00 : 85[26000] -> 84[4000] via P2P/IPC comm 0x2afed4000ab0 nRanks 96 f14r3n00:20873:22235 [1] NCCL INFO Channel 01 : 85[26000] -> 84[4000] via P2P/IPC comm 0x2afed4000ab0 nRanks 96 f14r2n15:32396:1585 [0] NCCL INFO comm 0x2afd04000ab0 rank 64 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n12:7612:8983 [1] NCCL INFO Channel 00 : 53[26000] -> 52[4000] via P2P/IPC comm 0x2b0c4c000ab0 nRanks 96 f14r2n12:7612:8983 [1] NCCL INFO Channel 01 : 53[26000] -> 52[4000] via P2P/IPC comm 0x2b0c4c000ab0 nRanks 96 f14r2n13:20108:21749 [0] NCCL INFO Connected all trees comm 0x2b2664000ab0 nRanks 96 busId 4000 f14r2n13:20108:21749 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n13:20108:21749 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r3n00:20870:22237 [0] NCCL INFO Connected all trees comm 0x2b4cdc000ab0 nRanks 96 busId 4000 f14r2n13:20110:21752 [1] NCCL INFO Connected all trees comm 0x2b6fc8000ab0 nRanks 96 busId 26000 f14r3n00:20870:22237 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r3n00:20870:22237 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n13:20110:21752 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n13:20110:21752 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r3n00:20873:22235 [1] NCCL INFO Connected all trees comm 0x2afed4000ab0 nRanks 96 busId 26000 f14r3n00:20872:22240 [2] NCCL INFO Connected all trees comm 0x2b3570000ab0 nRanks 96 busId 43000 f14r3n00:20873:22235 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r3n00:20872:22240 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r3n00:20872:22240 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r3n00:20873:22235 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n15:32397:1586 [3] NCCL INFO comm 0x2b0aa0000ab0 rank 67 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n15:32398:1588 [1] NCCL INFO comm 0x2b23cc000ab0 rank 65 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n12:7613:8982 [2] NCCL INFO Connected all trees comm 0x2b5b2c000ab0 nRanks 96 busId 43000 f14r2n12:7612:8983 [1] NCCL INFO Connected all trees comm 0x2b0c4c000ab0 nRanks 96 busId 26000 f14r2n12:7613:8982 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n12:7613:8982 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n12:7612:8983 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n12:7612:8983 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n12:7614:8984 [0] NCCL INFO Connected all trees comm 0x2b0e24000ab0 nRanks 96 busId 4000 f14r2n12:7614:8984 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n12:7614:8984 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n09:2438:4383 [0] NCCL INFO Connected all trees comm 0x2ac780000ab0 nRanks 96 busId 4000 f14r2n09:2438:4383 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n09:2438:4383 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n09:2437:4379 [1] NCCL INFO Connected all trees comm 0x2b5a30000ab0 nRanks 96 busId 26000 f14r2n09:2437:4379 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n09:2437:4379 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n01:16211:17860 [0] NCCL INFO Connected all trees comm 0x2afec8000ab0 nRanks 96 busId 4000 f14r2n01:16211:17860 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n01:16211:17860 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n01:16208:17863 [1] NCCL INFO Connected all trees comm 0x2b557c000ab0 nRanks 96 busId 26000 f14r2n01:16208:17863 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n01:16208:17863 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n08:27952:29673 [1] NCCL INFO Channel 00 : 37[26000] -> 36[4000] via P2P/IPC comm 0x2b1ef4000ab0 nRanks 96 f14r2n08:27952:29673 [1] NCCL INFO Channel 01 : 37[26000] -> 36[4000] via P2P/IPC comm 0x2b1ef4000ab0 nRanks 96 f14r2n00:27303:28695 [1] NCCL INFO Channel 00 : 5[26000] -> 4[4000] via P2P/IPC comm 0x2b52d4000ab0 nRanks 96 f14r2n00:27303:28695 [1] NCCL INFO Channel 01 : 5[26000] -> 4[4000] via P2P/IPC comm 0x2b52d4000ab0 nRanks 96 f14r2n08:27953:29675 [0] NCCL INFO Connected all trees comm 0x2b64a8000ab0 nRanks 96 busId 4000 f14r2n08:27953:29675 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n08:27953:29675 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n08:27954:29674 [2] NCCL INFO Connected all trees comm 0x2ae614000ab0 nRanks 96 busId 43000 f14r2n08:27952:29673 [1] NCCL INFO Connected all trees comm 0x2b1ef4000ab0 nRanks 96 busId 26000 f14r2n08:27954:29674 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n08:27954:29674 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n08:27952:29673 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n08:27952:29673 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n00:27304:28693 [0] NCCL INFO Connected all trees comm 0x2ba3ec000ab0 nRanks 96 busId 4000 f14r2n00:27304:28693 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n00:27304:28693 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n00:27302:28696 [2] NCCL INFO Connected all trees comm 0x2ba338000ab0 nRanks 96 busId 43000 f14r2n00:27303:28695 [1] NCCL INFO Connected all trees comm 0x2b52d4000ab0 nRanks 96 busId 26000 f14r2n00:27302:28696 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n00:27302:28696 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n00:27303:28695 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n00:27303:28695 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n07:7791:9166 [0] NCCL INFO Connected all trees comm 0x2bab08000ab0 nRanks 96 busId 4000 f14r2n07:7791:9166 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n07:7791:9166 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n07:7790:9167 [1] NCCL INFO Connected all trees comm 0x2b0138000ab0 nRanks 96 busId 26000 f14r2n07:7790:9167 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n07:7790:9167 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r1n19:18664:20445 [0] NCCL INFO Connected all trees comm 0x2b093c000ab0 nRanks 96 busId 4000 f14r1n19:18664:20445 [0] NCCL INFO Using tuning table 0 with LL128 disabled f14r1n19:18664:20445 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r1n19:18664:20445 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r1n19:18663:20642 [1] NCCL INFO Connected all trees comm 0x2b6d1c000ab0 nRanks 96 busId 26000 f14r1n19:18663:20642 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r1n19:18663:20642 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n14:4184:6067 [0] NCCL INFO comm 0x2b9b3c000ab0 rank 60 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r3n02:32367:1497 [2] NCCL INFO comm 0x2ac760000ab0 rank 94 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r3n02:32368:1492 [3] NCCL INFO comm 0x2ac104000ab0 rank 95 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n10:499:2241 [0] NCCL INFO comm 0x2b769c000ab0 rank 44 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n10:498:2244 [2] NCCL INFO comm 0x2add2c000ab0 rank 46 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n05:26237:27873 [2] NCCL INFO comm 0x2b3388000ab0 rank 26 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n19:10614:12006 [1] NCCL INFO comm 0x2b3b88000ab0 rank 81 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n02:18586:20296 [2] NCCL INFO comm 0x2b47a8000ab0 rank 14 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n02:18588:20295 [1] NCCL INFO comm 0x2b488c000ab0 rank 13 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n14:4185:6069 [2] NCCL INFO comm 0x2b2ac0000ab0 rank 62 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r3n02:32369:1493 [1] NCCL INFO comm 0x2ac184000ab0 rank 93 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n14:4183:6068 [3] NCCL INFO comm 0x2b2e20000ab0 rank 63 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r3n02:32370:1495 [0] NCCL INFO comm 0x2b0fcc000ab0 rank 92 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n02:18587:20293 [0] NCCL INFO comm 0x2b5228000ab0 rank 12 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n04:3628:5488 [0] NCCL INFO comm 0x2ac12c000ab0 rank 20 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n14:4186:6070 [1] NCCL INFO comm 0x2b88f4000ab0 rank 61 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n04:3630:5491 [2] NCCL INFO comm 0x2b0cec000ab0 rank 22 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n11:16951:18676 [2] NCCL INFO comm 0x2ab7c8000ab0 rank 50 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n19:10615:12010 [2] NCCL INFO comm 0x2b1730000ab0 rank 82 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n19:10613:12007 [0] NCCL INFO comm 0x2b8fb4000ab0 rank 80 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n05:26238:27869 [0] NCCL INFO comm 0x2b5734000ab0 rank 24 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n10:502:2243 [3] NCCL INFO comm 0x2af01c000ab0 rank 47 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n11:16954:18675 [1] NCCL INFO comm 0x2b73e4000ab0 rank 49 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n10:500:2242 [1] NCCL INFO comm 0x2b0d5c000ab0 rank 45 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n11:16952:18673 [0] NCCL INFO comm 0x2b71fc000ab0 rank 48 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n05:26239:27868 [1] NCCL INFO comm 0x2b481c000ab0 rank 25 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n05:26240:27871 [3] NCCL INFO comm 0x2b4558000ab0 rank 27 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n11:16953:18671 [3] NCCL INFO comm 0x2b9a48000ab0 rank 51 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n02:18589:20291 [3] NCCL INFO comm 0x2b65e0000ab0 rank 15 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n19:10612:12008 [3] NCCL INFO comm 0x2b30d8000ab0 rank 83 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n04:3629:5484 [1] NCCL INFO comm 0x2ae624000ab0 rank 21 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n04:3627:5487 [3] NCCL INFO comm 0x2afa70000ab0 rank 23 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r3n01:7395:9073 [1] NCCL INFO comm 0x2b5940000ab0 rank 89 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r3n01:7394:9068 [3] NCCL INFO comm 0x2aee1c000ab0 rank 91 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n13:20107:21747 [2] NCCL INFO comm 0x2badc4000ab0 rank 58 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r3n00:20871:22238 [3] NCCL INFO comm 0x2b450c000ab0 rank 87 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n13:20108:21749 [0] NCCL INFO comm 0x2b2664000ab0 rank 56 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r3n00:20873:22235 [1] NCCL INFO comm 0x2afed4000ab0 rank 85 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n13:20110:21752 [1] NCCL INFO comm 0x2b6fc8000ab0 rank 57 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r3n00:20870:22237 [0] NCCL INFO comm 0x2b4cdc000ab0 rank 84 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r3n00:20872:22240 [2] NCCL INFO comm 0x2b3570000ab0 rank 86 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n13:20109:21750 [3] NCCL INFO comm 0x2b5f6c000ab0 rank 59 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n12:7615:8980 [3] NCCL INFO comm 0x2ada64000ab0 rank 55 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n12:7612:8983 [1] NCCL INFO comm 0x2b0c4c000ab0 rank 53 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n09:2439:4384 [2] NCCL INFO comm 0x2b6790000ab0 rank 42 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n01:16209:17862 [2] NCCL INFO comm 0x2b4998000ab0 rank 10 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n01:16208:17863 [1] NCCL INFO comm 0x2b557c000ab0 rank 9 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r3n01:7396:9069 [0] NCCL INFO comm 0x2b16ec000ab0 rank 88 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r3n01:7397:9074 [2] NCCL INFO comm 0x2ac180000ab0 rank 90 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n08:27955:29670 [3] NCCL INFO comm 0x2b2994000ab0 rank 39 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n01:16210:17861 [3] NCCL INFO comm 0x2b37a8000ab0 rank 11 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n00:27304:28693 [0] NCCL INFO comm 0x2ba3ec000ab0 rank 4 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n08:27954:29674 [2] NCCL INFO comm 0x2ae614000ab0 rank 38 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n08:27953:29675 [0] NCCL INFO comm 0x2b64a8000ab0 rank 36 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n07:7789:9165 [2] NCCL INFO comm 0x2b51e4000ab0 rank 34 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r1n19:18664:20445 [0] NCCL INFO comm 0x2b093c000ab0 rank 0 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r1n19:18663:20642 [1] NCCL INFO comm 0x2b6d1c000ab0 rank 1 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n12:7613:8982 [2] NCCL INFO comm 0x2b5b2c000ab0 rank 54 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n08:27952:29673 [1] NCCL INFO comm 0x2b1ef4000ab0 rank 37 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r1n19:18666:20640 [3] NCCL INFO comm 0x2b3468000ab0 rank 3 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n12:7614:8984 [0] NCCL INFO comm 0x2b0e24000ab0 rank 52 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n09:2438:4383 [0] NCCL INFO comm 0x2ac780000ab0 rank 40 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n09:2437:4379 [1] NCCL INFO comm 0x2b5a30000ab0 rank 41 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n01:16211:17860 [0] NCCL INFO comm 0x2afec8000ab0 rank 8 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n09:2440:4376 [3] NCCL INFO comm 0x2b9c58000ab0 rank 43 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n00:27305:28694 [3] NCCL INFO comm 0x2b0858000ab0 rank 7 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n00:27302:28696 [2] NCCL INFO comm 0x2ba338000ab0 rank 6 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n00:27303:28695 [1] NCCL INFO comm 0x2b52d4000ab0 rank 5 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n07:7791:9166 [0] NCCL INFO comm 0x2bab08000ab0 rank 32 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r1n19:18665:20644 [2] NCCL INFO comm 0x2aeb10000ab0 rank 2 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n07:7788:9164 [3] NCCL INFO comm 0x2afc5c000ab0 rank 35 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n07:7790:9167 [1] NCCL INFO comm 0x2b0138000ab0 rank 33 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE [2023-11-09 17:32:24,940] [INFO] [partition_parameters.py:454:__exit__] finished initializing model with 7.51B parameters trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 k> input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 k> input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 trainable params: 524288 || all params: 7506497536 || trainable%: 0.006984455766295744 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 input: 写一篇关于气候变化对海洋生态的影响的文章。 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 从刚刚的文章中提取出气候变化对海洋生物繁殖的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 label: 好的,以下是你要求的文章: 气候变化对海洋生态的影响 气候变化对海洋生态产生了广泛的影响。全球变暖导致海洋温度上升,这可能会对许多水生生物的生存、繁殖和迁移造成巨大的影响。另外,海洋酸化也是一个问题,因为大气中二氧化碳的增加导致海水中的pH值下降,使得许多生物的外骨骼变得脆弱,从而影响它们的生存和繁殖。 此外,气候变化还会引起海平面上升,这不仅对海岸线和沿海居民产生影响,还会对许多海洋生物的栖息地造成影响。一些岛屿上的陆地生物面临几乎完全消失的风险,而另一些生物范围则会扩大到更广泛的领域,这可能会导致新的竞争和生态平衡的改变。 总之,气候变化并不只是一个地球气温的问题,它对海洋生态系统产生了广泛和深远的影响。 文章已经提到过气候变化会对海洋生物的生存、繁殖和迁移造成影响。例如,海洋酸化会使得许多生物的外骨骼变得脆弱,进而影响它们的生存和繁殖。此外,海洋温度上升也可能会对很多生物的生存和繁殖产生负面影响。 f14r1n19:18664:22332 [0] NCCL INFO Using network IB f14r1n19:18666:22335 [3] NCCL INFO Using network IB f14r1n19:18665:22334 [2] NCCL INFO Using network IB f14r1n19:18663:22337 [1] NCCL INFO Using network IB f14r2n18:11305:14583 [3] NCCL INFO Using network IB f14r2n07:7788:10495 [3] NCCL INFO Using network IB f14r2n10:502:3712 [3] NCCL INFO Using network IB f14r2n12:7615:10166 [3] NCCL INFO Using network IB f14r2n06:8123:10805 [3] NCCL INFO Using network IB f14r2n04:3627:6959 [3] NCCL INFO Using network IB f14r2n00:27305:29821 [3] NCCL INFO Using network IB f14r2n16:27454:30011 [2] NCCL INFO Using network IB f14r2n09:2439:5946 [2] NCCL INFO Using network IB f14r3n01:7397:10847 [2] NCCL INFO Using network IB f14r2n03:27607:30911 [3] NCCL INFO Using network IB f14r3n00:20872:23420 [2] NCCL INFO Using network IB f14r3n02:32368:2681 [3] NCCL INFO Using network IB f14r2n17:14569:17924 [2] NCCL INFO Using network IB f14r2n15:32395:3202 [2] NCCL INFO Using network IB f14r2n11:16953:20216 [3] NCCL INFO Using network IB f14r2n18:11303:14585 [2] NCCL INFO Using network IB f14r2n07:7791:10497 [0] NCCL INFO Using network IB f14r2n10:498:3713 [2] NCCL INFO Using network IB f14r2n12:7613:10167 [2] NCCL INFO Using network IB f14r2n06:8124:10806 [2] NCCL INFO Using network IB f14r2n04:3630:6960 [2] NCCL INFO Using network IB f14r2n00:27304:29826 [0] NCCL INFO Using network IB f14r2n16:27455:30012 [1] NCCL INFO Using network IB f14r2n09:2440:5947 [3] NCCL INFO Using network IB f14r3n01:7395:10848 [1] NCCL INFO Using network IB f14r2n03:27606:30913 [0] NCCL INFO Using network IB f14r3n00:20870:23421 [0] NCCL INFO Using network IB f14r3n02:32369:2684 [1] NCCL INFO Using network IB f14r2n17:14567:17925 [1] NCCL INFO Using network IB f14r2n15:32396:3203 [0] NCCL INFO Using network IB f14r2n11:16951:20218 [2] NCCL INFO Using network IB f14r2n08:27954:31230 [2] NCCL INFO Using network IB f14r2n18:11304:14586 [0] NCCL INFO Using network IB f14r2n10:499:3715 [0] NCCL INFO Using network IB f14r2n12:7614:10170 [0] NCCL INFO Using network IB f14r2n06:8125:10808 [0] NCCL INFO Using network IB f14r2n04:3629:6961 [1] NCCL INFO Using network IB f14r2n00:27303:29827 [1] NCCL INFO Using network IB f14r2n16:27453:30013 [0] NCCL INFO Using network IB f14r2n09:2438:5948 [0] NCCL INFO Using network IB f14r3n01:7394:10851 [3] NCCL INFO Using network IB f14r2n03:27605:30914 [1] NCCL INFO Using network IB f14r3n00:20871:23422 [3] NCCL INFO Using network IB f14r3n02:32367:2683 [2] NCCL INFO Using network IB f14r2n17:14570:17928 [3] NCCL INFO Using network IB f14r2n15:32397:3205 [3] NCCL INFO Using network IB f14r2n11:16954:20219 [1] NCCL INFO Using network IB f14r2n08:27952:31231 [1] NCCL INFO Using network IB f14r2n13:20109:23245 [3] NCCL INFO Using network IB f14r2n14:4183:7769 [3] NCCL INFO Using network IB f14r2n18:11306:14587 [1] NCCL INFO Using network IB f14r2n10:500:3716 [1] NCCL INFO Using network IB f14r2n12:7612:10171 [1] NCCL INFO Using network IB f14r2n06:8126:10809 [1] NCCL INFO Using network IB f14r2n04:3628:6963 [0] NCCL INFO Using network IB f14r2n00:27302:29830 [2] NCCL INFO Using network IB f14r2n16:27452:30017 [3] NCCL INFO Using network IB f14r2n09:2437:5949 [1] NCCL INFO Using network IB f14r3n01:7396:10852 [0] NCCL INFO Using network IB f14r2n03:27608:30915 [2] NCCL INFO Using network IB f14r3n00:20873:23424 [1] NCCL INFO Using network IB f14r3n02:32370:2687 [0] NCCL INFO Using network IB f14r2n17:14568:17929 [0] NCCL INFO Using network IB f14r2n15:32398:3207 [1] NCCL INFO Using network IB f14r2n11:16952:20220 [0] NCCL INFO Using network IB f14r2n08:27953:31232 [0] NCCL INFO Using network IB f14r2n13:20107:23246 [2] NCCL INFO Using network IB f14r2n08:27955:31236 [3] NCCL INFO Using network IB f14r2n13:20108:23249 [0] NCCL INFO Using network IB f14r2n14:4185:7771 [2] NCCL INFO Using network IB f14r2n13:20110:23250 [1] NCCL INFO Using network IB f14r2n14:4184:7772 [0] NCCL INFO Using network IB f14r2n14:4186:7774 [1] NCCL INFO Using network IB f14r2n19:10614:13374 [1] NCCL INFO Using network IB f14r2n19:10612:13376 [3] NCCL INFO Using network IB f14r2n19:10615:13378 [2] NCCL INFO Using network IB f14r2n19:10613:13379 [0] NCCL INFO Using network IB f14r2n02:18589:21774 [3] NCCL INFO Using network IB f14r2n02:18587:21776 [0] NCCL INFO Using network IB f14r2n02:18586:21777 [2] NCCL INFO Using network IB f14r2n01:16208:19153 [1] NCCL INFO Using network IB f14r2n05:26237:29358 [2] NCCL INFO Using network IB f14r2n01:16211:19154 [0] NCCL INFO Using network IB f14r2n05:26240:29359 [3] NCCL INFO Using network IB f14r2n07:7790:10503 [1] NCCL INFO Using network IB f14r2n05:26239:29360 [1] NCCL INFO Using network IB f14r2n05:26238:29362 [0] NCCL INFO Using network IB f14r2n01:16210:19157 [3] NCCL INFO Using network IB f14r2n02:18588:21780 [1] NCCL INFO Using network IB f14r2n01:16209:19158 [2] NCCL INFO Using network IB f14r2n07:7789:10505 [2] NCCL INFO Using network IB f14r2n15:32395:3202 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r3n02:32369:2684 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n08:27954:31230 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n11:16951:20218 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n02:18586:21777 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n03:27605:30914 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n10:499:3715 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n10:498:3713 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n15:32398:3207 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n15:32397:3205 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n15:32396:3203 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n16:27455:30012 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n17:14568:17929 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r3n02:32370:2687 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n08:27955:31236 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n00:27305:29821 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n17:14567:17925 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n11:16953:20216 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r3n02:32368:2681 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n14:4186:7774 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n13:20107:23246 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n13:20109:23245 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r3n02:32367:2683 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n18:11306:14587 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r3n00:20872:23420 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r3n01:7394:10851 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n17:14570:17928 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n16:27453:30013 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n19:10613:13379 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n17:14569:17924 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n18:11305:14583 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n19:10614:13374 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n16:27452:30017 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r1n19:18666:22335 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n19:10612:13376 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n00:27304:29826 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n16:27454:30011 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n03:27606:30913 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r3n01:7395:10848 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r3n00:20873:23424 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n01:16208:19153 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r3n00:20870:23421 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n10:502:3712 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n18:11304:14586 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n12:7615:10166 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n19:10615:13378 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n03:27607:30911 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r3n00:20871:23422 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n10:500:3716 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n18:11303:14585 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n03:27608:30915 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n11:16952:20220 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n13:20110:23250 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r3n01:7396:10852 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n14:4184:7772 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n09:2440:5947 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n11:16954:20219 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n13:20108:23249 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r3n01:7397:10847 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n14:4183:7769 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n02:18588:21780 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n00:27303:29827 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n14:4185:7771 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n02:18589:21774 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n00:27302:29830 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n12:7612:10171 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n09:2437:5949 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n01:16210:19157 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n08:27953:31232 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n02:18587:21776 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n12:7614:10170 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n09:2439:5946 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n01:16211:19154 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n08:27952:31231 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r1n19:18664:22332 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r1n19:18663:22337 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n12:7613:10167 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n09:2438:5948 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n01:16209:19158 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r1n19:18665:22334 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n04:3628:6963 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n04:3629:6961 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n07:7788:10495 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n04:3627:6959 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n04:3630:6960 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n05:26238:29362 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n05:26240:29359 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n07:7791:10497 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n06:8125:10808 [0] NCCL INFO Setting affinity for GPU 0 to ff f14r2n06:8126:10809 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n05:26239:29360 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n05:26237:29358 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n07:7790:10503 [1] NCCL INFO Setting affinity for GPU 1 to ff00 f14r2n07:7789:10505 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n06:8124:10806 [2] NCCL INFO Setting affinity for GPU 2 to ff0000 f14r2n06:8123:10805 [3] NCCL INFO Setting affinity for GPU 3 to ff000000 f14r2n07:7790:10503 [1] NCCL INFO Trees [0] 34/16/-1->33->32 [1] 34/-1/-1->33->32 comm 0x2b01c8000ab0 nRanks 96 busId 26000 f14r2n07:7789:10505 [2] NCCL INFO Trees [0] 35/-1/-1->34->33 [1] 35/-1/-1->34->33 comm 0x2b5270000ab0 nRanks 96 busId 43000 f14r2n07:7788:10495 [3] NCCL INFO Trees [0] -1/-1/-1->35->34 [1] -1/-1/-1->35->34 comm 0x2afce8000ab0 nRanks 96 busId 63000 f14r2n08:27952:31231 [1] NCCL INFO Trees [0] 38/-1/-1->37->36 [1] 38/40/-1->37->36 comm 0x2b1f80000ab0 nRanks 96 busId 26000 f14r2n08:27953:31232 [0] NCCL INFO Trees [0] 37/-1/-1->36->41 [1] 37/32/-1->36->44 comm 0x2b6534000ab0 nRanks 96 busId 4000 f14r2n08:27955:31236 [3] NCCL INFO Trees [0] -1/-1/-1->39->38 [1] -1/-1/-1->39->38 comm 0x2b2a24000ab0 nRanks 96 busId 63000 f14r2n08:27954:31230 [2] NCCL INFO Trees [0] 39/-1/-1->38->37 [1] 39/-1/-1->38->37 comm 0x2ae6a0000ab0 nRanks 96 busId 43000 f14r2n09:2437:5949 [1] NCCL INFO Trees [0] 42/36/-1->41->40 [1] 42/-1/-1->41->40 comm 0x2b5ac4000ab0 nRanks 96 busId 26000 f14r1n19:18666:22335 [3] NCCL INFO Trees [0] -1/-1/-1->3->2 [1] -1/-1/-1->3->2 comm 0x2b34f4000ab0 nRanks 96 busId 63000 f14r2n09:2438:5948 [0] NCCL INFO Trees [0] 41/44/-1->40->49 [1] 41/-1/-1->40->37 comm 0x2ac80c000ab0 nRanks 96 busId 4000 f14r3n01:7394:10851 [3] NCCL INFO Trees [0] -1/-1/-1->91->90 [1] -1/-1/-1->91->90 comm 0x2aeea8000ab0 nRanks 96 busId 63000 f14r3n01:7397:10847 [2] NCCL INFO Trees [0] 91/-1/-1->90->89 [1] 91/-1/-1->90->89 comm 0x2ac210000ab0 nRanks 96 busId 43000 f14r1n19:18663:22337 [1] NCCL INFO Trees [0] 2/-1/-1->1->0 [1] 2/-1/-1->1->0 comm 0x2b6dac000ab0 nRanks 96 busId 26000 f14r2n15:32397:3205 [3] NCCL INFO Trees [0] -1/-1/-1->67->66 [1] -1/-1/-1->67->66 comm 0x2b0b30000ab0 nRanks 96 busId 63000 f14r2n09:2439:5946 [2] NCCL INFO Trees [0] 43/-1/-1->42->41 [1] 43/-1/-1->42->41 comm 0x2b6820000ab0 nRanks 96 busId 43000 f14r3n02:32367:2683 [2] NCCL INFO Trees [0] 95/-1/-1->94->93 [1] 95/-1/-1->94->93 comm 0x2ac7f0000ab0 nRanks 96 busId 43000 f14r1n19:18664:22332 [0] NCCL INFO Channel 00/02 : 0 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 f14r1n19:18664:22332 [0] NCCL INFO Channel 01/02 : 0 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 f14r1n19:18664:22332 [0] NCCL INFO Trees [0] 1/64/-1->0->-1 [1] 1/-1/-1->0->4 comm 0x2b09c8000ab0 nRanks 96 busId 4000 f14r1n19:18665:22334 [2] NCCL INFO Trees [0] 3/-1/-1->2->1 [1] 3/-1/-1->2->1 comm 0x2aeba0000ab0 nRanks 96 busId 43000 f14r2n15:32398:3207 [1] NCCL INFO Trees [0] 66/32/-1->65->64 [1] 66/-1/-1->65->64 comm 0x2b245c000ab0 nRanks 96 busId 26000 f14r2n09:2440:5947 [3] NCCL INFO Trees [0] -1/-1/-1->43->42 [1] -1/-1/-1->43->42 comm 0x2b9ce4000ab0 nRanks 96 busId 63000 f14r3n01:7395:10848 [1] NCCL INFO Trees [0] 90/84/-1->89->88 [1] 90/-1/-1->89->88 comm 0x2b59cc000ab0 nRanks 96 busId 26000 f14r2n14:4185:7771 [2] NCCL INFO Trees [0] 63/-1/-1->62->61 [1] 63/-1/-1->62->61 comm 0x2b2b50000ab0 nRanks 96 busId 43000 f14r3n00:20870:23421 [0] NCCL INFO Trees [0] 85/-1/-1->84->89 [1] 85/80/-1->84->77 comm 0x2b4d6c000ab0 nRanks 96 busId 4000 f14r2n16:27454:30011 [2] NCCL INFO Trees [0] 71/-1/-1->70->69 [1] 71/-1/-1->70->69 comm 0x2b3674000ab0 nRanks 96 busId 43000 f14r2n07:7791:10497 [0] NCCL INFO Trees [0] 33/48/-1->32->65 [1] 33/-1/-1->32->36 comm 0x2bab98000ab0 nRanks 96 busId 4000 f14r2n19:10612:13376 [3] NCCL INFO Trees [0] -1/-1/-1->83->82 [1] -1/-1/-1->83->82 comm 0x2b3168000ab0 nRanks 96 busId 63000 f14r2n15:32396:3203 [0] NCCL INFO Trees [0] 65/80/-1->64->0 [1] 65/-1/-1->64->68 comm 0x2afd94000ab0 nRanks 96 busId 4000 f14r3n01:7396:10852 [0] NCCL INFO Trees [0] 89/92/-1->88->80 [1] 89/-1/-1->88->85 comm 0x2b177c000ab0 nRanks 96 busId 4000 f14r2n14:4183:7769 [3] NCCL INFO Trees [0] -1/-1/-1->63->62 [1] -1/-1/-1->63->62 comm 0x2b2eb0000ab0 nRanks 96 busId 63000 f14r3n00:20873:23424 [1] NCCL INFO Trees [0] 86/-1/-1->85->84 [1] 86/88/-1->85->84 comm 0x2aff60000ab0 nRanks 96 busId 26000 f14r2n16:27455:30012 [1] NCCL INFO Trees [0] 70/-1/-1->69->68 [1] 70/72/-1->69->68 comm 0x2b7a34000ab0 nRanks 96 busId 26000 f14r2n19:10614:13374 [1] NCCL INFO Trees [0] 82/72/-1->81->80 [1] 82/-1/-1->81->80 comm 0x2b3c14000ab0 nRanks 96 busId 26000 f14r3n02:32368:2681 [3] NCCL INFO Trees [0] -1/-1/-1->95->94 [1] -1/-1/-1->95->94 comm 0x2ac190000ab0 nRanks 96 busId 63000 f14r2n01:16208:19153 [1] NCCL INFO Trees [0] 10/4/-1->9->8 [1] 10/-1/-1->9->8 comm 0x2b5610000ab0 nRanks 96 busId 26000 f14r2n12:7615:10166 [3] NCCL INFO Trees [0] -1/-1/-1->55->54 [1] -1/-1/-1->55->54 comm 0x2adaf0000ab0 nRanks 96 busId 63000 f14r2n00:27304:29826 [0] NCCL INFO Trees [0] 5/-1/-1->4->9 [1] 5/0/-1->4->12 comm 0x2ba47c000ab0 nRanks 96 busId 4000 f14r2n10:500:3716 [1] NCCL INFO Trees [0] 46/-1/-1->45->44 [1] 46/52/-1->45->44 comm 0x2b0dec000ab0 nRanks 96 busId 26000 f14r2n18:11306:14587 [1] NCCL INFO Trees [0] 78/-1/-1->77->76 [1] 78/84/-1->77->76 comm 0x2b12b4000ab0 nRanks 96 busId 26000 f14r2n17:14569:17924 [2] NCCL INFO Trees [0] 75/-1/-1->74->73 [1] 75/-1/-1->74->73 comm 0x2b9384000ab0 nRanks 96 busId 43000 f14r2n06:8125:10808 [0] NCCL INFO Trees [0] 29/-1/-1->28->24 [1] 29/12/-1->28->92 comm 0x2b7f64000ab0 nRanks 96 busId 4000 f14r2n13:20109:23245 [3] NCCL INFO Trees [0] -1/-1/-1->59->58 [1] -1/-1/-1->59->58 comm 0x2b5ff8000ab0 nRanks 96 busId 63000 f14r2n15:32395:3202 [2] NCCL INFO Trees [0] 67/-1/-1->66->65 [1] 67/-1/-1->66->65 comm 0x2b9a60000ab0 nRanks 96 busId 43000 f14r2n14:4186:7774 [1] NCCL INFO Trees [0] 62/-1/-1->61->60 [1] 62/76/-1->61->60 comm 0x2b8980000ab0 nRanks 96 busId 26000 f14r3n00:20872:23420 [2] NCCL INFO Trees [0] 87/-1/-1->86->85 [1] 87/-1/-1->86->85 comm 0x2b3600000ab0 nRanks 96 busId 43000 f14r2n16:27452:30017 [3] NCCL INFO Trees [0] -1/-1/-1->71->70 [1] -1/-1/-1->71->70 comm 0x2b6524000ab0 nRanks 96 busId 63000 f14r2n19:10613:13379 [0] NCCL INFO Trees [0] 81/88/-1->80->64 [1] 81/-1/-1->80->84 comm 0x2b9044000ab0 nRanks 96 busId 4000 f14r3n02:32370:2687 [0] NCCL INFO Trees [0] 93/-1/-1->92->88 [1] 93/28/-1->92->-1 comm 0x2b1058000ab0 nRanks 96 busId 4000 f14r2n01:16211:19154 [0] NCCL INFO Trees [0] 9/12/-1->8->17 [1] 9/-1/-1->8->5 comm 0x2aff58000ab0 nRanks 96 busId 4000 f14r2n12:7612:10171 [1] NCCL INFO Trees [0] 54/-1/-1->53->52 [1] 54/56/-1->53->52 comm 0x2b0cdc000ab0 nRanks 96 busId 26000 f14r2n00:27303:29827 [1] NCCL INFO Trees [0] 6/-1/-1->5->4 [1] 6/8/-1->5->4 comm 0x2b5364000ab0 nRanks 96 busId 26000 f14r2n10:499:3715 [0] NCCL INFO Trees [0] 45/-1/-1->44->40 [1] 45/36/-1->44->60 comm 0x2b772c000ab0 nRanks 96 busId 4000 f14r2n18:11303:14585 [2] NCCL INFO Trees [0] 79/-1/-1->78->77 [1] 79/-1/-1->78->77 comm 0x2b6a28000ab0 nRanks 96 busId 43000 f14r2n17:14570:17928 [3] NCCL INFO Trees [0] -1/-1/-1->75->74 [1] -1/-1/-1->75->74 comm 0x2bad58000ab0 nRanks 96 busId 63000 f14r2n06:8126:10809 [1] NCCL INFO Trees [0] 30/-1/-1->29->28 [1] 30/60/-1->29->28 comm 0x2b48fc000ab0 nRanks 96 busId 26000 f14r2n13:20108:23249 [0] NCCL INFO Trees [0] 57/60/-1->56->48 [1] 57/-1/-1->56->53 comm 0x2b26f4000ab0 nRanks 96 busId 4000 f14r2n02:18589:21774 [3] NCCL INFO Trees [0] -1/-1/-1->15->14 [1] -1/-1/-1->15->14 comm 0x2b666c000ab0 nRanks 96 busId 63000 f14r2n03:27608:30915 [2] NCCL INFO Trees [0] 19/-1/-1->18->17 [1] 19/-1/-1->18->17 comm 0x2ac810000ab0 nRanks 96 busId 43000 f14r2n11:16951:20218 [2] NCCL INFO Trees [0] 51/-1/-1->50->49 [1] 51/-1/-1->50->49 comm 0x2ab858000ab0 nRanks 96 busId 43000 f14r2n04:3628:6963 [0] NCCL INFO Trees [0] 21/-1/-1->20->25 [1] 21/16/-1->20->13 comm 0x2ac1bc000ab0 nRanks 96 busId 4000 f14r2n14:4184:7772 [0] NCCL INFO Trees [0] 61/-1/-1->60->56 [1] 61/44/-1->60->29 comm 0x2b9bcc000ab0 nRanks 96 busId 4000 f14r3n00:20871:23422 [3] NCCL INFO Trees [0] -1/-1/-1->87->86 [1] -1/-1/-1->87->86 comm 0x2b4598000ab0 nRanks 96 busId 63000 f14r2n16:27453:30013 [0] NCCL INFO Trees [0] 69/-1/-1->68->73 [1] 69/64/-1->68->76 comm 0x2ba214000ab0 nRanks 96 busId 4000 f14r2n19:10615:13378 [2] NCCL INFO Trees [0] 83/-1/-1->82->81 [1] 83/-1/-1->82->81 comm 0x2b17c0000ab0 nRanks 96 busId 43000 f14r3n02:32369:2684 [1] NCCL INFO Trees [0] 94/-1/-1->93->92 [1] 94/-1/-1->93->92 comm 0x2ac214000ab0 nRanks 96 busId 26000 f14r2n01:16210:19157 [3] NCCL INFO Trees [0] -1/-1/-1->11->10 [1] -1/-1/-1->11->10 comm 0x2b3834000ab0 nRanks 96 busId 63000 f14r2n12:7614:10170 [0] NCCL INFO Trees [0] 53/-1/-1->52->57 [1] 53/48/-1->52->45 comm 0x2b0eb4000ab0 nRanks 96 busId 4000 f14r2n00:27302:29830 [2] NCCL INFO Trees [0] 7/-1/-1->6->5 [1] 7/-1/-1->6->5 comm 0x2ba3c8000ab0 nRanks 96 busId 43000 f14r2n10:502:3712 [3] NCCL INFO Trees [0] -1/-1/-1->47->46 [1] -1/-1/-1->47->46 comm 0x2af0a8000ab0 nRanks 96 busId 63000 f14r2n18:11305:14583 [3] NCCL INFO Trees [0] -1/-1/-1->79->78 [1] -1/-1/-1->79->78 comm 0x2b8334000ab0 nRanks 96 busId 63000 f14r2n17:14568:17929 [0] NCCL INFO Trees [0] 73/76/-1->72->81 [1] 73/-1/-1->72->69 comm 0x2acbd4000ab0 nRanks 96 busId 4000 f14r2n06:8123:10805 [3] NCCL INFO Trees [0] -1/-1/-1->31->30 [1] -1/-1/-1->31->30 comm 0x2af5d4000ab0 nRanks 96 busId 63000 f14r2n13:20107:23246 [2] NCCL INFO Trees [0] 59/-1/-1->58->57 [1] 59/-1/-1->58->57 comm 0x2bae54000ab0 nRanks 96 busId 43000 f14r2n02:18587:21776 [0] NCCL INFO Trees [0] 13/-1/-1->12->8 [1] 13/4/-1->12->28 comm 0x2b52b8000ab0 nRanks 96 busId 4000 f14r2n03:27607:30911 [3] NCCL INFO Trees [0] -1/-1/-1->19->18 [1] -1/-1/-1->19->18 comm 0x2ac47c000ab0 nRanks 96 busId 63000 f14r2n11:16953:20216 [3] NCCL INFO Trees [0] -1/-1/-1->51->50 [1] -1/-1/-1->51->50 comm 0x2b9ad8000ab0 nRanks 96 busId 63000 f14r2n04:3629:6961 [1] NCCL INFO Trees [0] 22/-1/-1->21->20 [1] 22/24/-1->21->20 comm 0x2ae6b4000ab0 nRanks 96 busId 26000 f14r2n05:26238:29362 [0] NCCL INFO Trees [0] 25/28/-1->24->16 [1] 25/-1/-1->24->21 comm 0x2b57c4000ab0 nRanks 96 busId 4000 f14r2n01:16209:19158 [2] NCCL INFO Trees [0] 11/-1/-1->10->9 [1] 11/-1/-1->10->9 comm 0x2b4a28000ab0 nRanks 96 busId 43000 f14r2n12:7613:10167 [2] NCCL INFO Trees [0] 55/-1/-1->54->53 [1] 55/-1/-1->54->53 comm 0x2b5bbc000ab0 nRanks 96 busId 43000 f14r2n00:27305:29821 [3] NCCL INFO Trees [0] -1/-1/-1->7->6 [1] -1/-1/-1->7->6 comm 0x2b08e4000ab0 nRanks 96 busId 63000 f14r2n10:498:3713 [2] NCCL INFO Trees [0] 47/-1/-1->46->45 [1] 47/-1/-1->46->45 comm 0x2addbc000ab0 nRanks 96 busId 43000 f14r2n18:11304:14586 [0] NCCL INFO Trees [0] 77/-1/-1->76->72 [1] 77/68/-1->76->61 comm 0x2ab8d0000ab0 nRanks 96 busId 4000 f14r2n17:14567:17925 [1] NCCL INFO Trees [0] 74/68/-1->73->72 [1] 74/-1/-1->73->72 comm 0x2b0d54000ab0 nRanks 96 busId 26000 f14r2n06:8124:10806 [2] NCCL INFO Trees [0] 31/-1/-1->30->29 [1] 31/-1/-1->30->29 comm 0x2b16dc000ab0 nRanks 96 busId 43000 f14r2n13:20110:23250 [1] NCCL INFO Trees [0] 58/52/-1->57->56 [1] 58/-1/-1->57->56 comm 0x2b7058000ab0 nRanks 96 busId 26000 f14r2n02:18588:21780 [1] NCCL INFO Trees [0] 14/-1/-1->13->12 [1] 14/20/-1->13->12 comm 0x2b491c000ab0 nRanks 96 busId 26000 f14r2n03:27606:30913 [0] NCCL INFO Trees [0] 17/24/-1->16->33 [1] 17/-1/-1->16->20 comm 0x2ae9e4000ab0 nRanks 96 busId 4000 f14r2n11:16954:20219 [1] NCCL INFO Trees [0] 50/40/-1->49->48 [1] 50/-1/-1->49->48 comm 0x2b7474000ab0 nRanks 96 busId 26000 f14r2n04:3630:6960 [2] NCCL INFO Trees [0] 23/-1/-1->22->21 [1] 23/-1/-1->22->21 comm 0x2b0d7c000ab0 nRanks 96 busId 43000 f14r2n05:26240:29359 [3] NCCL INFO Trees [0] -1/-1/-1->27->26 [1] -1/-1/-1->27->26 comm 0x2b45e4000ab0 nRanks 96 busId 63000 f14r2n02:18586:21777 [2] NCCL INFO Trees [0] 15/-1/-1->14->13 [1] 15/-1/-1->14->13 comm 0x2b4838000ab0 nRanks 96 busId 43000 f14r2n03:27605:30914 [1] NCCL INFO Trees [0] 18/8/-1->17->16 [1] 18/-1/-1->17->16 comm 0x2badec000ab0 nRanks 96 busId 26000 f14r2n11:16952:20220 [0] NCCL INFO Trees [0] 49/56/-1->48->32 [1] 49/-1/-1->48->52 comm 0x2b728c000ab0 nRanks 96 busId 4000 f14r2n04:3627:6959 [3] NCCL INFO Trees [0] -1/-1/-1->23->22 [1] -1/-1/-1->23->22 comm 0x2afafc000ab0 nRanks 96 busId 63000 f14r2n05:26239:29360 [1] NCCL INFO Trees [0] 26/20/-1->25->24 [1] 26/-1/-1->25->24 comm 0x2b48ac000ab0 nRanks 96 busId 26000 f14r2n05:26237:29358 [2] NCCL INFO Trees [0] 27/-1/-1->26->25 [1] 27/-1/-1->26->25 comm 0x2b3418000ab0 nRanks 96 busId 43000 f14r2n07:7790:10503 [1] NCCL INFO Channel 00 : 33[26000] -> 34[43000] via P2P/IPC comm 0x2b01c8000ab0 nRanks 96 f14r2n08:27953:31232 [0] NCCL INFO Channel 00/0 : 35[63000] -> 36[4000] [receive] via NET/IB/0 comm 0x2b6534000ab0 nRanks 96 f14r2n07:7789:10505 [2] NCCL INFO Channel 00 : 34[43000] -> 35[63000] via P2P/IPC comm 0x2b5270000ab0 nRanks 96 f14r2n09:2438:5948 [0] NCCL INFO Channel 00/0 : 39[63000] -> 40[4000] [receive] via NET/IB/0 comm 0x2ac80c000ab0 nRanks 96 f14r2n07:7790:10503 [1] NCCL INFO Channel 01 : 33[26000] -> 34[43000] via P2P/IPC comm 0x2b01c8000ab0 nRanks 96 f14r2n15:32396:3203 [0] NCCL INFO Channel 00/0 : 63[63000] -> 64[4000] [receive] via NET/IB/0 comm 0x2afd94000ab0 nRanks 96 f14r3n00:20870:23421 [0] NCCL INFO Channel 00/0 : 83[63000] -> 84[4000] [receive] via NET/IB/0 comm 0x2b4d6c000ab0 nRanks 96 f14r1n19:18664:22332 [0] NCCL INFO Channel 00/0 : 95[63000] -> 0[4000] [receive] via NET/IB/0 comm 0x2b09c8000ab0 nRanks 96 f14r3n01:7396:10852 [0] NCCL INFO Channel 00/0 : 87[63000] -> 88[4000] [receive] via NET/IB/0 comm 0x2b177c000ab0 nRanks 96 f14r2n07:7791:10497 [0] NCCL INFO Channel 00/0 : 31[63000] -> 32[4000] [receive] via NET/IB/0 comm 0x2bab98000ab0 nRanks 96 f14r2n07:7789:10505 [2] NCCL INFO Channel 01 : 34[43000] -> 35[63000] via P2P/IPC comm 0x2b5270000ab0 nRanks 96 f14r2n08:27952:31231 [1] NCCL INFO Channel 00 : 37[26000] -> 38[43000] via P2P/IPC comm 0x2b1f80000ab0 nRanks 96 f14r3n02:32370:2687 [0] NCCL INFO Channel 00/0 : 91[63000] -> 92[4000] [receive] via NET/IB/0 comm 0x2b1058000ab0 nRanks 96 f14r2n09:2437:5949 [1] NCCL INFO Channel 00 : 41[26000] -> 42[43000] via P2P/IPC comm 0x2b5ac4000ab0 nRanks 96 f14r2n00:27304:29826 [0] NCCL INFO Channel 00/0 : 3[63000] -> 4[4000] [receive] via NET/IB/0 comm 0x2ba47c000ab0 nRanks 96 f14r1n19:18663:22337 [1] NCCL INFO Channel 00 : 1[26000] -> 2[43000] via P2P/IPC comm 0x2b6dac000ab0 nRanks 96 f14r2n08:27954:31230 [2] NCCL INFO Channel 00 : 38[43000] -> 39[63000] via P2P/IPC comm 0x2ae6a0000ab0 nRanks 96 f14r3n02:32367:2683 [2] NCCL INFO Channel 00 : 94[43000] -> 95[63000] via P2P/IPC comm 0x2ac7f0000ab0 nRanks 96 f14r2n09:2439:5946 [2] NCCL INFO Channel 00 : 42[43000] -> 43[63000] via P2P/IPC comm 0x2b6820000ab0 nRanks 96 f14r2n14:4184:7772 [0] NCCL INFO Channel 00/0 : 59[63000] -> 60[4000] [receive] via NET/IB/0 comm 0x2b9bcc000ab0 nRanks 96 f14r3n01:7397:10847 [2] NCCL INFO Channel 00 : 90[43000] -> 91[63000] via P2P/IPC comm 0x2ac210000ab0 nRanks 96 f14r2n15:32398:3207 [1] NCCL INFO Channel 00 : 65[26000] -> 66[43000] via P2P/IPC comm 0x2b245c000ab0 nRanks 96 f14r2n01:16211:19154 [0] NCCL INFO Channel 00/0 : 7[63000] -> 8[4000] [receive] via NET/IB/0 comm 0x2aff58000ab0 nRanks 96 f14r2n06:8125:10808 [0] NCCL INFO Channel 00/0 : 27[63000] -> 28[4000] [receive] via NET/IB/0 comm 0x2b7f64000ab0 nRanks 96 f14r2n16:27454:30011 [2] NCCL INFO Channel 00 : 70[43000] -> 71[63000] via P2P/IPC comm 0x2b3674000ab0 nRanks 96 f14r1n19:18665:22334 [2] NCCL INFO Channel 00 : 2[43000] -> 3[63000] via P2P/IPC comm 0x2aeba0000ab0 nRanks 96 f14r2n08:27954:31230 [2] NCCL INFO Channel 01 : 38[43000] -> 39[63000] via P2P/IPC comm 0x2ae6a0000ab0 nRanks 96 f14r2n09:2437:5949 [1] NCCL INFO Channel 01 : 41[26000] -> 42[43000] via P2P/IPC comm 0x2b5ac4000ab0 nRanks 96 f14r2n14:4185:7771 [2] NCCL INFO Channel 00 : 62[43000] -> 63[63000] via P2P/IPC comm 0x2b2b50000ab0 nRanks 96 f14r3n01:7395:10848 [1] NCCL INFO Channel 00 : 89[26000] -> 90[43000] via P2P/IPC comm 0x2b59cc000ab0 nRanks 96 f14r2n01:16208:19153 [1] NCCL INFO Channel 00 : 9[26000] -> 10[43000] via P2P/IPC comm 0x2b5610000ab0 nRanks 96 f14r2n06:8126:10809 [1] NCCL INFO Channel 00 : 29[26000] -> 30[43000] via P2P/IPC comm 0x2b48fc000ab0 nRanks 96 f14r2n16:27453:30013 [0] NCCL INFO Channel 00/0 : 67[63000] -> 68[4000] [receive] via NET/IB/0 comm 0x2ba214000ab0 nRanks 96 f14r2n18:11304:14586 [0] NCCL INFO Channel 00/0 : 75[63000] -> 76[4000] [receive] via NET/IB/0 comm 0x2ab8d0000ab0 nRanks 96 f14r2n02:18587:21776 [0] NCCL INFO Channel 00/0 : 11[63000] -> 12[4000] [receive] via NET/IB/0 comm 0x2b52b8000ab0 nRanks 96 f14r2n13:20108:23249 [0] NCCL INFO Channel 00/0 : 55[63000] -> 56[4000] [receive] via NET/IB/0 comm 0x2b26f4000ab0 nRanks 96 f14r2n19:10613:13379 [0] NCCL INFO Channel 00/0 : 79[63000] -> 80[4000] [receive] via NET/IB/0 comm 0x2b9044000ab0 nRanks 96 f14r2n17:14568:17929 [0] NCCL INFO Channel 00/0 : 71[63000] -> 72[4000] [receive] via NET/IB/0 comm 0x2acbd4000ab0 nRanks 96 f14r2n11:16952:20220 [0] NCCL INFO Channel 00/0 : 47[63000] -> 48[4000] [receive] via NET/IB/0 comm 0x2b728c000ab0 nRanks 96 f14r3n00:20873:23424 [1] NCCL INFO Channel 00 : 85[26000] -> 86[43000] via P2P/IPC comm 0x2aff60000ab0 nRanks 96 f14r2n12:7614:10170 [0] NCCL INFO Channel 00/0 : 51[63000] -> 52[4000] [receive] via NET/IB/0 comm 0x2b0eb4000ab0 nRanks 96 f14r2n10:499:3715 [0] NCCL INFO Channel 00/0 : 43[63000] -> 44[4000] [receive] via NET/IB/0 comm 0x2b772c000ab0 nRanks 96 f14r2n03:27606:30913 [0] NCCL INFO Channel 00/0 : 15[63000] -> 16[4000] [receive] via NET/IB/0 comm 0x2ae9e4000ab0 nRanks 96 f14r1n19:18663:22337 [1] NCCL INFO Channel 01 : 1[26000] -> 2[43000] via P2P/IPC comm 0x2b6dac000ab0 nRanks 96 f14r1n19:18665:22334 [2] NCCL INFO Channel 01 : 2[43000] -> 3[63000] via P2P/IPC comm 0x2aeba0000ab0 nRanks 96 f14r2n08:27952:31231 [1] NCCL INFO Channel 01 : 37[26000] -> 38[43000] via P2P/IPC comm 0x2b1f80000ab0 nRanks 96 f14r2n09:2439:5946 [2] NCCL INFO Channel 01 : 42[43000] -> 43[63000] via P2P/IPC comm 0x2b6820000ab0 nRanks 96 f14r2n14:4185:7771 [2] NCCL INFO Channel 01 : 62[43000] -> 63[63000] via P2P/IPC comm 0x2b2b50000ab0 nRanks 96 f14r3n01:7397:10847 [2] NCCL INFO Channel 01 : 90[43000] -> 91[63000] via P2P/IPC comm 0x2ac210000ab0 nRanks 96 f14r2n01:16209:19158 [2] NCCL INFO Channel 00 : 10[43000] -> 11[63000] via P2P/IPC comm 0x2b4a28000ab0 nRanks 96 f14r2n06:8124:10806 [2] NCCL INFO Channel 00 : 30[43000] -> 31[63000] via P2P/IPC comm 0x2b16dc000ab0 nRanks 96 f14r2n16:27454:30011 [2] NCCL INFO Channel 01 : 70[43000] -> 71[63000] via P2P/IPC comm 0x2b3674000ab0 nRanks 96 f14r2n18:11306:14587 [1] NCCL INFO Channel 00 : 77[26000] -> 78[43000] via P2P/IPC comm 0x2b12b4000ab0 nRanks 96 f14r2n02:18588:21780 [1] NCCL INFO Channel 00 : 13[26000] -> 14[43000] via P2P/IPC comm 0x2b491c000ab0 nRanks 96 f14r2n13:20110:23250 [1] NCCL INFO Channel 00 : 57[26000] -> 58[43000] via P2P/IPC comm 0x2b7058000ab0 nRanks 96 f14r2n19:10614:13374 [1] NCCL INFO Channel 00 : 81[26000] -> 82[43000] via P2P/IPC comm 0x2b3c14000ab0 nRanks 96 f14r2n17:14567:17925 [1] NCCL INFO Channel 00 : 73[26000] -> 74[43000] via P2P/IPC comm 0x2b0d54000ab0 nRanks 96 f14r2n11:16954:20219 [1] NCCL INFO Channel 00 : 49[26000] -> 50[43000] via P2P/IPC comm 0x2b7474000ab0 nRanks 96 f14r3n00:20872:23420 [2] NCCL INFO Channel 00 : 86[43000] -> 87[63000] via P2P/IPC comm 0x2b3600000ab0 nRanks 96 f14r2n12:7613:10167 [2] NCCL INFO Channel 00 : 54[43000] -> 55[63000] via P2P/IPC comm 0x2b5bbc000ab0 nRanks 96 f14r2n10:500:3716 [1] NCCL INFO Channel 00 : 45[26000] -> 46[43000] via P2P/IPC comm 0x2b0dec000ab0 nRanks 96 f14r2n03:27608:30915 [2] NCCL INFO Channel 00 : 18[43000] -> 19[63000] via P2P/IPC comm 0x2ac810000ab0 nRanks 96 f14r3n02:32367:2683 [2] NCCL INFO Channel 01 : 94[43000] -> 95[63000] via P2P/IPC comm 0x2ac7f0000ab0 nRanks 96 f14r2n05:26238:29362 [0] NCCL INFO Channel 00/0 : 23[63000] -> 24[4000] [receive] via NET/IB/0 comm 0x2b57c4000ab0 nRanks 96 f14r2n04:3628:6963 [0] NCCL INFO Channel 00/0 : 19[63000] -> 20[4000] [receive] via NET/IB/0 comm 0x2ac1bc000ab0 nRanks 96 f14r2n15:32395:3202 [2] NCCL INFO Channel 00 : 66[43000] -> 67[63000] via P2P/IPC comm 0x2b9a60000ab0 nRanks 96 f14r2n00:27302:29830 [2] NCCL INFO Channel 00 : 6[43000] -> 7[63000] via P2P/IPC comm 0x2ba3c8000ab0 nRanks 96 f14r2n14:4186:7774 [1] NCCL INFO Channel 00 : 61[26000] -> 62[43000] via P2P/IPC comm 0x2b8980000ab0 nRanks 96 f14r3n01:7395:10848 [1] NCCL INFO Channel 01 : 89[26000] -> 90[43000] via P2P/IPC comm 0x2b59cc000ab0 nRanks 96 f14r2n01:16208:19153 [1] NCCL INFO Channel 01 : 9[26000] -> 10[43000] via P2P/IPC comm 0x2b5610000ab0 nRanks 96 f14r2n06:8124:10806 [2] NCCL INFO Channel 01 : 30[43000] -> 31[63000] via P2P/IPC comm 0x2b16dc000ab0 nRanks 96 f14r2n16:27455:30012 [1] NCCL INFO Channel 00 : 69[26000] -> 70[43000] via P2P/IPC comm 0x2b7a34000ab0 nRanks 96 f14r2n18:11303:14585 [2] NCCL INFO Channel 00 : 78[43000] -> 79[63000] via P2P/IPC comm 0x2b6a28000ab0 nRanks 96 f14r2n02:18586:21777 [2] NCCL INFO Channel 00 : 14[43000] -> 15[63000] via P2P/IPC comm 0x2b4838000ab0 nRanks 96 f14r2n13:20107:23246 [2] NCCL INFO Channel 00 : 58[43000] -> 59[63000] via P2P/IPC comm 0x2bae54000ab0 nRanks 96 f14r2n19:10615:13378 [2] NCCL INFO Channel 00 : 82[43000] -> 83[63000] via P2P/IPC comm 0x2b17c0000ab0 nRanks 96 f14r2n17:14569:17924 [2] NCCL INFO Channel 00 : 74[43000] -> 75[63000] via P2P/IPC comm 0x2b9384000ab0 nRanks 96 f14r2n11:16951:20218 [2] NCCL INFO Channel 00 : 50[43000] -> 51[63000] via P2P/IPC comm 0x2ab858000ab0 nRanks 96 f14r3n00:20873:23424 [1] NCCL INFO Channel 01 : 85[26000] -> 86[43000] via P2P/IPC comm 0x2aff60000ab0 nRanks 96 f14r2n12:7612:10171 [1] NCCL INFO Channel 00 : 53[26000] -> 54[43000] via P2P/IPC comm 0x2b0cdc000ab0 nRanks 96 f14r2n10:498:3713 [2] NCCL INFO Channel 00 : 46[43000] -> 47[63000] via P2P/IPC comm 0x2addbc000ab0 nRanks 96 f14r2n03:27608:30915 [2] NCCL INFO Channel 01 : 18[43000] -> 19[63000] via P2P/IPC comm 0x2ac810000ab0 nRanks 96 f14r3n02:32369:2684 [1] NCCL INFO Channel 00 : 93[26000] -> 94[43000] via P2P/IPC comm 0x2ac214000ab0 nRanks 96 f14r2n05:26239:29360 [1] NCCL INFO Channel 00 : 25[26000] -> 26[43000] via P2P/IPC comm 0x2b48ac000ab0 nRanks 96 f14r2n04:3629:6961 [1] NCCL INFO Channel 00 : 21[26000] -> 22[43000] via P2P/IPC comm 0x2ae6b4000ab0 nRanks 96 f14r2n15:32398:3207 [1] NCCL INFO Channel 01 : 65[26000] -> 66[43000] via P2P/IPC comm 0x2b245c000ab0 nRanks 96 f14r2n00:27303:29827 [1] NCCL INFO Channel 00 : 5[26000] -> 6[43000] via P2P/IPC comm 0x2b5364000ab0 nRanks 96 f14r2n14:4186:7774 [1] NCCL INFO Channel 01 : 61[26000] -> 62[43000] via P2P/IPC comm 0x2b8980000ab0 nRanks 96 f14r2n01:16209:19158 [2] NCCL INFO Channel 01 : 10[43000] -> 11[63000] via P2P/IPC comm 0x2b4a28000ab0 nRanks 96 f14r2n06:8126:10809 [1] NCCL INFO Channel 01 : 29[26000] -> 30[43000] via P2P/IPC comm 0x2b48fc000ab0 nRanks 96 f14r2n16:27455:30012 [1] NCCL INFO Channel 01 : 69[26000] -> 70[43000] via P2P/IPC comm 0x2b7a34000ab0 nRanks 96 f14r2n18:11306:14587 [1] NCCL INFO Channel 01 : 77[26000] -> 78[43000] via P2P/IPC comm 0x2b12b4000ab0 nRanks 96 f14r2n02:18586:21777 [2] NCCL INFO Channel 01 : 14[43000] -> 15[63000] via P2P/IPC comm 0x2b4838000ab0 nRanks 96 f14r2n13:20107:23246 [2] NCCL INFO Channel 01 : 58[43000] -> 59[63000] via P2P/IPC comm 0x2bae54000ab0 nRanks 96 f14r2n19:10614:13374 [1] NCCL INFO Channel 01 : 81[26000] -> 82[43000] via P2P/IPC comm 0x2b3c14000ab0 nRanks 96 f14r2n17:14569:17924 [2] NCCL INFO Channel 01 : 74[43000] -> 75[63000] via P2P/IPC comm 0x2b9384000ab0 nRanks 96 f14r2n11:16954:20219 [1] NCCL INFO Channel 01 : 49[26000] -> 50[43000] via P2P/IPC comm 0x2b7474000ab0 nRanks 96 f14r3n00:20872:23420 [2] NCCL INFO Channel 01 : 86[43000] -> 87[63000] via P2P/IPC comm 0x2b3600000ab0 nRanks 96 f14r2n12:7613:10167 [2] NCCL INFO Channel 01 : 54[43000] -> 55[63000] via P2P/IPC comm 0x2b5bbc000ab0 nRanks 96 f14r2n10:500:3716 [1] NCCL INFO Channel 01 : 45[26000] -> 46[43000] via P2P/IPC comm 0x2b0dec000ab0 nRanks 96 f14r2n03:27605:30914 [1] NCCL INFO Channel 00 : 17[26000] -> 18[43000] via P2P/IPC comm 0x2badec000ab0 nRanks 96 f14r3n02:32369:2684 [1] NCCL INFO Channel 01 : 93[26000] -> 94[43000] via P2P/IPC comm 0x2ac214000ab0 nRanks 96 f14r2n05:26237:29358 [2] NCCL INFO Channel 00 : 26[43000] -> 27[63000] via P2P/IPC comm 0x2b3418000ab0 nRanks 96 f14r2n04:3629:6961 [1] NCCL INFO Channel 01 : 21[26000] -> 22[43000] via P2P/IPC comm 0x2ae6b4000ab0 nRanks 96 f14r2n15:32395:3202 [2] NCCL INFO Channel 01 : 66[43000] -> 67[63000] via P2P/IPC comm 0x2b9a60000ab0 nRanks 96 f14r2n00:27303:29827 [1] NCCL INFO Channel 01 : 5[26000] -> 6[43000] via P2P/IPC comm 0x2b5364000ab0 nRanks 96 f14r2n18:11303:14585 [2] NCCL INFO Channel 01 : 78[43000] -> 79[63000] via P2P/IPC comm 0x2b6a28000ab0 nRanks 96 f14r2n02:18588:21780 [1] NCCL INFO Channel 01 : 13[26000] -> 14[43000] via P2P/IPC comm 0x2b491c000ab0 nRanks 96 f14r2n13:20110:23250 [1] NCCL INFO Channel 01 : 57[26000] -> 58[43000] via P2P/IPC comm 0x2b7058000ab0 nRanks 96 f14r2n19:10615:13378 [2] NCCL INFO Channel 01 : 82[43000] -> 83[63000] via P2P/IPC comm 0x2b17c0000ab0 nRanks 96 f14r2n17:14567:17925 [1] NCCL INFO Channel 01 : 73[26000] -> 74[43000] via P2P/IPC comm 0x2b0d54000ab0 nRanks 96 f14r2n11:16951:20218 [2] NCCL INFO Channel 01 : 50[43000] -> 51[63000] via P2P/IPC comm 0x2ab858000ab0 nRanks 96 f14r2n12:7612:10171 [1] NCCL INFO Channel 01 : 53[26000] -> 54[43000] via P2P/IPC comm 0x2b0cdc000ab0 nRanks 96 f14r2n10:498:3713 [2] NCCL INFO Channel 01 : 46[43000] -> 47[63000] via P2P/IPC comm 0x2addbc000ab0 nRanks 96 f14r2n03:27605:30914 [1] NCCL INFO Channel 01 : 17[26000] -> 18[43000] via P2P/IPC comm 0x2badec000ab0 nRanks 96 f14r2n05:26237:29358 [2] NCCL INFO Channel 01 : 26[43000] -> 27[63000] via P2P/IPC comm 0x2b3418000ab0 nRanks 96 f14r2n04:3630:6960 [2] NCCL INFO Channel 00 : 22[43000] -> 23[63000] via P2P/IPC comm 0x2b0d7c000ab0 nRanks 96 f14r2n00:27302:29830 [2] NCCL INFO Channel 01 : 6[43000] -> 7[63000] via P2P/IPC comm 0x2ba3c8000ab0 nRanks 96 f14r2n05:26239:29360 [1] NCCL INFO Channel 01 : 25[26000] -> 26[43000] via P2P/IPC comm 0x2b48ac000ab0 nRanks 96 f14r2n04:3630:6960 [2] NCCL INFO Channel 01 : 22[43000] -> 23[63000] via P2P/IPC comm 0x2b0d7c000ab0 nRanks 96 f14r2n19:10612:13376 [3] NCCL INFO Channel 00/0 : 83[63000] -> 84[4000] [send] via NET/IB/0 comm 0x2b3168000ab0 nRanks 96 f14r1n19:18664:22332 [0] NCCL INFO Channel 01/0 : 95[63000] -> 0[4000] [receive] via NET/IB/0 comm 0x2b09c8000ab0 nRanks 96 f14r1n19:18664:22332 [0] NCCL INFO Channel 00 : 0[4000] -> 1[26000] via P2P/IPC comm 0x2b09c8000ab0 nRanks 96 f14r2n15:32397:3205 [3] NCCL INFO Channel 00/0 : 67[63000] -> 68[4000] [send] via NET/IB/0 comm 0x2b0b30000ab0 nRanks 96 f14r2n15:32396:3203 [0] NCCL INFO Channel 01/0 : 63[63000] -> 64[4000] [receive] via NET/IB/0 comm 0x2afd94000ab0 nRanks 96 f14r2n09:2440:5947 [3] NCCL INFO Channel 00/0 : 43[63000] -> 44[4000] [send] via NET/IB/0 comm 0x2b9ce4000ab0 nRanks 96 f14r2n15:32396:3203 [0] NCCL INFO Channel 00 : 64[4000] -> 65[26000] via P2P/IPC comm 0x2afd94000ab0 nRanks 96 f14r2n09:2438:5948 [0] NCCL INFO Channel 01/0 : 39[63000] -> 40[4000] [receive] via NET/IB/0 comm 0x2ac80c000ab0 nRanks 96 f14r2n09:2438:5948 [0] NCCL INFO Channel 00 : 40[4000] -> 41[26000] via P2P/IPC comm 0x2ac80c000ab0 nRanks 96 f14r3n00:20870:23421 [0] NCCL INFO Channel 01/0 : 83[63000] -> 84[4000] [receive] via NET/IB/0 comm 0x2b4d6c000ab0 nRanks 96 f14r3n00:20870:23421 [0] NCCL INFO Channel 00 : 84[4000] -> 85[26000] via P2P/IPC comm 0x2b4d6c000ab0 nRanks 96 f14r2n03:27607:30911 [3] NCCL INFO Channel 00/0 : 19[63000] -> 20[4000] [send] via NET/IB/0 comm 0x2ac47c000ab0 nRanks 96 f14r2n04:3628:6963 [0] NCCL INFO Channel 01/0 : 19[63000] -> 20[4000] [receive] via NET/IB/0 comm 0x2ac1bc000ab0 nRanks 96 f14r2n03:27606:30913 [0] NCCL INFO Channel 01/0 : 15[63000] -> 16[4000] [receive] via NET/IB/0 comm 0x2ae9e4000ab0 nRanks 96 f14r2n04:3628:6963 [0] NCCL INFO Channel 00 : 20[4000] -> 21[26000] via P2P/IPC comm 0x2ac1bc000ab0 nRanks 96 f14r2n11:16952:20220 [0] NCCL INFO Channel 01/0 : 47[63000] -> 48[4000] [receive] via NET/IB/0 comm 0x2b728c000ab0 nRanks 96 f14r2n11:16952:20220 [0] NCCL INFO Channel 00 : 48[4000] -> 49[26000] via P2P/IPC comm 0x2b728c000ab0 nRanks 96 f14r2n02:18589:21774 [3] NCCL INFO Channel 00/0 : 15[63000] -> 16[4000] [send] via NET/IB/0 comm 0x2b666c000ab0 nRanks 96 f14r2n03:27606:30913 [0] NCCL INFO Channel 00 : 16[4000] -> 17[26000] via P2P/IPC comm 0x2ae9e4000ab0 nRanks 96 f14r2n08:27955:31236 [3] NCCL INFO Channel 00/0 : 39[63000] -> 40[4000] [send] via NET/IB/0 comm 0x2b2a24000ab0 nRanks 96 f14r3n02:32368:2681 [3] NCCL INFO Channel 00/0 : 95[63000] -> 0[4000] [send] via NET/IB/0 comm 0x2ac190000ab0 nRanks 96 f14r2n08:27953:31232 [0] NCCL INFO Channel 01/0 : 35[63000] -> 36[4000] [receive] via NET/IB/0 comm 0x2b6534000ab0 nRanks 96 f14r3n02:32370:2687 [0] NCCL INFO Channel 01/0 : 91[63000] -> 92[4000] [receive] via NET/IB/0 comm 0x2b1058000ab0 nRanks 96 f14r2n02:18587:21776 [0] NCCL INFO Channel 01/0 : 11[63000] -> 12[4000] [receive] via NET/IB/0 comm 0x2b52b8000ab0 nRanks 96 f14r2n18:11305:14583 [3] NCCL INFO Channel 00/0 : 79[63000] -> 80[4000] [send] via NET/IB/0 comm 0x2b8334000ab0 nRanks 96 f14r2n06:8123:10805 [3] NCCL INFO Channel 00/0 : 31[63000] -> 32[4000] [send] via NET/IB/0 comm 0x2af5d4000ab0 nRanks 96 f14r2n15:32396:3203 [0] NCCL INFO Channel 01 : 64[4000] -> 65[26000] via P2P/IPC comm 0x2afd94000ab0 nRanks 96 f14r1n19:18664:22332 [0] NCCL INFO Channel 01 : 0[4000] -> 1[26000] via P2P/IPC comm 0x2b09c8000ab0 nRanks 96 f14r2n08:27953:31232 [0] NCCL INFO Channel 00 : 36[4000] -> 37[26000] via P2P/IPC comm 0x2b6534000ab0 nRanks 96 f14r3n02:32370:2687 [0] NCCL INFO Channel 00 : 92[4000] -> 93[26000] via P2P/IPC comm 0x2b1058000ab0 nRanks 96 f14r2n02:18587:21776 [0] NCCL INFO Channel 00 : 12[4000] -> 13[26000] via P2P/IPC comm 0x2b52b8000ab0 nRanks 96 f14r2n18:11304:14586 [0] NCCL INFO Channel 01/0 : 75[63000] -> 76[4000] [receive] via NET/IB/0 comm 0x2ab8d0000ab0 nRanks 96 f14r2n06:8125:10808 [0] NCCL INFO Channel 01/0 : 27[63000] -> 28[4000] [receive] via NET/IB/0 comm 0x2b7f64000ab0 nRanks 96 f14r2n10:502:3712 [3] NCCL INFO Channel 00/0 : 47[63000] -> 48[4000] [send] via NET/IB/0 comm 0x2af0a8000ab0 nRanks 96 f14r2n07:7788:10495 [3] NCCL INFO Channel 00/0 : 35[63000] -> 36[4000] [send] via NET/IB/0 comm 0x2afce8000ab0 nRanks 96 f14r2n01:16210:19157 [3] NCCL INFO Channel 00/0 : 11[63000] -> 12[4000] [send] via NET/IB/0 comm 0x2b3834000ab0 nRanks 96 f14r2n00:27305:29821 [3] NCCL INFO Channel 00/0 : 7[63000] -> 8[4000] [send] via NET/IB/0 comm 0x2b08e4000ab0 nRanks 96 f14r2n02:18587:21776 [0] NCCL INFO Channel 01 : 12[4000] -> 13[26000] via P2P/IPC comm 0x2b52b8000ab0 nRanks 96 f14r2n18:11304:14586 [0] NCCL INFO Channel 00 : 76[4000] -> 77[26000] via P2P/IPC comm 0x2ab8d0000ab0 nRanks 96 f14r2n06:8125:10808 [0] NCCL INFO Channel 00 : 28[4000] -> 29[26000] via P2P/IPC comm 0x2b7f64000ab0 nRanks 96 f14r2n10:499:3715 [0] NCCL INFO Channel 01/0 : 43[63000] -> 44[4000] [receive] via NET/IB/0 comm 0x2b772c000ab0 nRanks 96 f14r2n07:7791:10497 [0] NCCL INFO Channel 01/0 : 31[63000] -> 32[4000] [receive] via NET/IB/0 comm 0x2bab98000ab0 nRanks 96 f14r2n01:16211:19154 [0] NCCL INFO Channel 01/0 : 7[63000] -> 8[4000] [receive] via NET/IB/0 comm 0x2aff58000ab0 nRanks 96 f14r2n00:27304:29826 [0] NCCL INFO Channel 01/0 : 3[63000] -> 4[4000] [receive] via NET/IB/0 comm 0x2ba47c000ab0 nRanks 96 f14r2n13:20109:23245 [3] NCCL INFO Channel 00/0 : 59[63000] -> 60[4000] [send] via NET/IB/0 comm 0x2b5ff8000ab0 nRanks 96 f14r3n00:20870:23421 [0] NCCL INFO Channel 01 : 84[4000] -> 85[26000] via P2P/IPC comm 0x2b4d6c000ab0 nRanks 96 f14r3n01:7394:10851 [3] NCCL INFO Channel 00/0 : 91[63000] -> 92[4000] [send] via NET/IB/0 comm 0x2aeea8000ab0 nRanks 96 f14r2n11:16952:20220 [0] NCCL INFO Channel 01 : 48[4000] -> 49[26000] via P2P/IPC comm 0x2b728c000ab0 nRanks 96 f14r2n14:4183:7769 [3] NCCL INFO Channel 00/0 : 63[63000] -> 64[4000] [send] via NET/IB/0 comm 0x2b2eb0000ab0 nRanks 96 f14r2n09:2438:5948 [0] NCCL INFO Channel 01 : 40[4000] -> 41[26000] via P2P/IPC comm 0x2ac80c000ab0 nRanks 96 f14r2n03:27606:30913 [0] NCCL INFO Channel 01 : 16[4000] -> 17[26000] via P2P/IPC comm 0x2ae9e4000ab0 nRanks 96 f14r2n04:3628:6963 [0] NCCL INFO Channel 01 : 20[4000] -> 21[26000] via P2P/IPC comm 0x2ac1bc000ab0 nRanks 96 f14r2n16:27452:30017 [3] NCCL INFO Channel 00/0 : 71[63000] -> 72[4000] [send] via NET/IB/0 comm 0x2b6524000ab0 nRanks 96 f14r1n19:18666:22335 [3] NCCL INFO Channel 00/0 : 3[63000] -> 4[4000] [send] via NET/IB/0 comm 0x2b34f4000ab0 nRanks 96 f14r2n18:11304:14586 [0] NCCL INFO Channel 01 : 76[4000] -> 77[26000] via P2P/IPC comm 0x2ab8d0000ab0 nRanks 96 f14r2n06:8125:10808 [0] NCCL INFO Channel 01 : 28[4000] -> 29[26000] via P2P/IPC comm 0x2b7f64000ab0 nRanks 96 f14r2n10:499:3715 [0] NCCL INFO Channel 00 : 44[4000] -> 45[26000] via P2P/IPC comm 0x2b772c000ab0 nRanks 96 f14r2n07:7791:10497 [0] NCCL INFO Channel 00 : 32[4000] -> 33[26000] via P2P/IPC comm 0x2bab98000ab0 nRanks 96 f14r2n01:16211:19154 [0] NCCL INFO Channel 00 : 8[4000] -> 9[26000] via P2P/IPC comm 0x2aff58000ab0 nRanks 96 f14r2n00:27304:29826 [0] NCCL INFO Channel 00 : 4[4000] -> 5[26000] via P2P/IPC comm 0x2ba47c000ab0 nRanks 96 f14r2n13:20108:23249 [0] NCCL INFO Channel 01/0 : 55[63000] -> 56[4000] [receive] via NET/IB/0 comm 0x2b26f4000ab0 nRanks 96 f14r3n01:7396:10852 [0] NCCL INFO Channel 01/0 : 87[63000] -> 88[4000] [receive] via NET/IB/0 comm 0x2b177c000ab0 nRanks 96 f14r2n14:4184:7772 [0] NCCL INFO Channel 01/0 : 59[63000] -> 60[4000] [receive] via NET/IB/0 comm 0x2b9bcc000ab0 nRanks 96 f14r2n16:27453:30013 [0] NCCL INFO Channel 01/0 : 67[63000] -> 68[4000] [receive] via NET/IB/0 comm 0x2ba214000ab0 nRanks 96 f14r2n12:7615:10166 [3] NCCL INFO Channel 00/0 : 55[63000] -> 56[4000] [send] via NET/IB/0 comm 0x2adaf0000ab0 nRanks 96 f14r3n02:32370:2687 [0] NCCL INFO Channel 01 : 92[4000] -> 93[26000] via P2P/IPC comm 0x2b1058000ab0 nRanks 96 f14r2n17:14570:17928 [3] NCCL INFO Channel 00/0 : 75[63000] -> 76[4000] [send] via NET/IB/0 comm 0x2bad58000ab0 nRanks 96 f14r2n19:10613:13379 [0] NCCL INFO Channel 01/0 : 79[63000] -> 80[4000] [receive] via NET/IB/0 comm 0x2b9044000ab0 nRanks 96 f14r2n05:26240:29359 [3] NCCL INFO Channel 00/0 : 27[63000] -> 28[4000] [send] via NET/IB/0 comm 0x2b45e4000ab0 nRanks 96 f14r2n10:499:3715 [0] NCCL INFO Channel 01 : 44[4000] -> 45[26000] via P2P/IPC comm 0x2b772c000ab0 nRanks 96 f14r2n07:7791:10497 [0] NCCL INFO Channel 01 : 32[4000] -> 33[26000] via P2P/IPC comm 0x2bab98000ab0 nRanks 96 f14r2n01:16211:19154 [0] NCCL INFO Channel 01 : 8[4000] -> 9[26000] via P2P/IPC comm 0x2aff58000ab0 nRanks 96 f14r2n00:27304:29826 [0] NCCL INFO Channel 01 : 4[4000] -> 5[26000] via P2P/IPC comm 0x2ba47c000ab0 nRanks 96 f14r2n13:20108:23249 [0] NCCL INFO Channel 00 : 56[4000] -> 57[26000] via P2P/IPC comm 0x2b26f4000ab0 nRanks 96 f14r3n01:7396:10852 [0] NCCL INFO Channel 00 : 88[4000] -> 89[26000] via P2P/IPC comm 0x2b177c000ab0 nRanks 96 f14r2n14:4184:7772 [0] NCCL INFO Channel 00 : 60[4000] -> 61[26000] via P2P/IPC comm 0x2b9bcc000ab0 nRanks 96 f14r2n16:27453:30013 [0] NCCL INFO Channel 00 : 68[4000] -> 69[26000] via P2P/IPC comm 0x2ba214000ab0 nRanks 96 f14r2n12:7614:10170 [0] NCCL INFO Channel 01/0 : 51[63000] -> 52[4000] [receive] via NET/IB/0 comm 0x2b0eb4000ab0 nRanks 96 f14r2n12:7614:10170 [0] NCCL INFO Channel 00 : 52[4000] -> 53[26000] via P2P/IPC comm 0x2b0eb4000ab0 nRanks 96 f14r2n17:14568:17929 [0] NCCL INFO Channel 01/0 : 71[63000] -> 72[4000] [receive] via NET/IB/0 comm 0x2acbd4000ab0 nRanks 96 f14r2n19:10613:13379 [0] NCCL INFO Channel 00 : 80[4000] -> 81[26000] via P2P/IPC comm 0x2b9044000ab0 nRanks 96 f14r2n05:26238:29362 [0] NCCL INFO Channel 01/0 : 23[63000] -> 24[4000] [receive] via NET/IB/0 comm 0x2b57c4000ab0 nRanks 96 f14r2n08:27953:31232 [0] NCCL INFO Channel 01 : 36[4000] -> 37[26000] via P2P/IPC comm 0x2b6534000ab0 nRanks 96 f14r2n11:16953:20216 [3] NCCL INFO Channel 00/0 : 51[63000] -> 52[4000] [send] via NET/IB/0 comm 0x2b9ad8000ab0 nRanks 96 f14r2n04:3627:6959 [3] NCCL INFO Channel 00/0 : 23[63000] -> 24[4000] [send] via NET/IB/0 comm 0x2afafc000ab0 nRanks 96 f14r3n00:20871:23422 [3] NCCL INFO Channel 00/0 : 87[63000] -> 88[4000] [send] via NET/IB/0 comm 0x2b4598000ab0 nRanks 96 f14r2n13:20108:23249 [0] NCCL INFO Channel 01 : 56[4000] -> 57[26000] via P2P/IPC comm 0x2b26f4000ab0 nRanks 96 f14r3n01:7396:10852 [0] NCCL INFO Channel 01 : 88[4000] -> 89[26000] via P2P/IPC comm 0x2b177c000ab0 nRanks 96 f14r2n14:4184:7772 [0] NCCL INFO Channel 01 : 60[4000] -> 61[26000] via P2P/IPC comm 0x2b9bcc000ab0 nRanks 96 f14r2n16:27453:30013 [0] NCCL INFO Channel 01 : 68[4000] -> 69[26000] via P2P/IPC comm 0x2ba214000ab0 nRanks 96 f14r2n12:7614:10170 [0] NCCL INFO Channel 01 : 52[4000] -> 53[26000] via P2P/IPC comm 0x2b0eb4000ab0 nRanks 96 f14r2n17:14568:17929 [0] NCCL INFO Channel 00 : 72[4000] -> 73[26000] via P2P/IPC comm 0x2acbd4000ab0 nRanks 96 f14r2n19:10613:13379 [0] NCCL INFO Channel 01 : 80[4000] -> 81[26000] via P2P/IPC comm 0x2b9044000ab0 nRanks 96 f14r2n05:26238:29362 [0] NCCL INFO Channel 00 : 24[4000] -> 25[26000] via P2P/IPC comm 0x2b57c4000ab0 nRanks 96 f14r2n17:14568:17929 [0] NCCL INFO Channel 01 : 72[4000] -> 73[26000] via P2P/IPC comm 0x2acbd4000ab0 nRanks 96 f14r2n05:26238:29362 [0] NCCL INFO Channel 01 : 24[4000] -> 25[26000] via P2P/IPC comm 0x2b57c4000ab0 nRanks 96 f14r2n03:27605:30914 [1] NCCL INFO Connected all rings comm 0x2badec000ab0 nRanks 96 busId 26000 f14r2n01:16208:19153 [1] NCCL INFO Connected all rings comm 0x2b5610000ab0 nRanks 96 busId 26000 f14r2n18:11306:14587 [1] NCCL INFO Connected all rings comm 0x2b12b4000ab0 nRanks 96 busId 26000 f14r2n15:32398:3207 [1] NCCL INFO Connected all rings comm 0x2b245c000ab0 nRanks 96 busId 26000 f14r3n00:20873:23424 [1] NCCL INFO Connected all rings comm 0x2aff60000ab0 nRanks 96 busId 26000 f14r1n19:18663:22337 [1] NCCL INFO Connected all rings comm 0x2b6dac000ab0 nRanks 96 busId 26000 f14r2n14:4186:7774 [1] NCCL INFO Connected all rings comm 0x2b8980000ab0 nRanks 96 busId 26000 f14r2n04:3629:6961 [1] NCCL INFO Connected all rings comm 0x2ae6b4000ab0 nRanks 96 busId 26000 f14r2n11:16954:20219 [1] NCCL INFO Connected all rings comm 0x2b7474000ab0 nRanks 96 busId 26000 f14r2n09:2437:5949 [1] NCCL INFO Connected all rings comm 0x2b5ac4000ab0 nRanks 96 busId 26000 f14r2n02:18588:21780 [1] NCCL INFO Connected all rings comm 0x2b491c000ab0 nRanks 96 busId 26000 f14r2n03:27605:30914 [1] NCCL INFO Channel 00/0 : 8[4000] -> 17[26000] [receive] via NET/IB/0 comm 0x2badec000ab0 nRanks 96 f14r2n18:11306:14587 [1] NCCL INFO Channel 01/0 : 77[26000] -> 84[4000] [send] via NET/IB/0 comm 0x2b12b4000ab0 nRanks 96 f14r3n02:32369:2684 [1] NCCL INFO Connected all rings comm 0x2ac214000ab0 nRanks 96 busId 26000 f14r2n17:14567:17925 [1] NCCL INFO Connected all rings comm 0x2b0d54000ab0 nRanks 96 busId 26000 f14r3n00:20873:23424 [1] NCCL INFO Channel 01/0 : 85[26000] -> 88[4000] [send] via NET/IB/0 comm 0x2aff60000ab0 nRanks 96 f14r2n16:27455:30012 [1] NCCL INFO Connected all rings comm 0x2b7a34000ab0 nRanks 96 busId 26000 f14r2n01:16208:19153 [1] NCCL INFO Channel 00/0 : 4[4000] -> 9[26000] [receive] via NET/IB/0 comm 0x2b5610000ab0 nRanks 96 f14r2n10:500:3716 [1] NCCL INFO Connected all rings comm 0x2b0dec000ab0 nRanks 96 busId 26000 f14r2n15:32398:3207 [1] NCCL INFO Channel 00/0 : 32[4000] -> 65[26000] [receive] via NET/IB/0 comm 0x2b245c000ab0 nRanks 96 f14r2n07:7790:10503 [1] NCCL INFO Connected all rings comm 0x2b01c8000ab0 nRanks 96 busId 26000 f14r2n08:27952:31231 [1] NCCL INFO Connected all rings comm 0x2b1f80000ab0 nRanks 96 busId 26000 f14r3n01:7395:10848 [1] NCCL INFO Connected all rings comm 0x2b59cc000ab0 nRanks 96 busId 26000 f14r2n14:4186:7774 [1] NCCL INFO Channel 01/0 : 61[26000] -> 76[4000] [send] via NET/IB/0 comm 0x2b8980000ab0 nRanks 96 f14r2n06:8126:10809 [1] NCCL INFO Connected all rings comm 0x2b48fc000ab0 nRanks 96 busId 26000 f14r2n04:3629:6961 [1] NCCL INFO Channel 01/0 : 21[26000] -> 24[4000] [send] via NET/IB/0 comm 0x2ae6b4000ab0 nRanks 96 f14r2n13:20110:23250 [1] NCCL INFO Connected all rings comm 0x2b7058000ab0 nRanks 96 busId 26000 f14r2n00:27303:29827 [1] NCCL INFO Connected all rings comm 0x2b5364000ab0 nRanks 96 busId 26000 f14r2n02:18588:21780 [1] NCCL INFO Channel 01/0 : 13[26000] -> 20[4000] [send] via NET/IB/0 comm 0x2b491c000ab0 nRanks 96 f14r2n11:16954:20219 [1] NCCL INFO Channel 00/0 : 40[4000] -> 49[26000] [receive] via NET/IB/0 comm 0x2b7474000ab0 nRanks 96 f14r2n09:2437:5949 [1] NCCL INFO Channel 00/0 : 36[4000] -> 41[26000] [receive] via NET/IB/0 comm 0x2b5ac4000ab0 nRanks 96 f14r2n12:7612:10171 [1] NCCL INFO Connected all rings comm 0x2b0cdc000ab0 nRanks 96 busId 26000 f14r2n19:10614:13374 [1] NCCL INFO Connected all rings comm 0x2b3c14000ab0 nRanks 96 busId 26000 f14r1n19:18663:22337 [1] NCCL INFO Channel 00 : 1[26000] -> 0[4000] via P2P/IPC comm 0x2b6dac000ab0 nRanks 96 f14r2n10:500:3716 [1] NCCL INFO Channel 01/0 : 45[26000] -> 52[4000] [send] via NET/IB/0 comm 0x2b0dec000ab0 nRanks 96 f14r2n16:27455:30012 [1] NCCL INFO Channel 01/0 : 69[26000] -> 72[4000] [send] via NET/IB/0 comm 0x2b7a34000ab0 nRanks 96 f14r2n17:14567:17925 [1] NCCL INFO Channel 00/0 : 68[4000] -> 73[26000] [receive] via NET/IB/0 comm 0x2b0d54000ab0 nRanks 96 f14r2n08:27952:31231 [1] NCCL INFO Channel 01/0 : 37[26000] -> 40[4000] [send] via NET/IB/0 comm 0x2b1f80000ab0 nRanks 96 f14r2n06:8126:10809 [1] NCCL INFO Channel 01/0 : 29[26000] -> 60[4000] [send] via NET/IB/0 comm 0x2b48fc000ab0 nRanks 96 f14r2n00:27303:29827 [1] NCCL INFO Channel 01/0 : 5[26000] -> 8[4000] [send] via NET/IB/0 comm 0x2b5364000ab0 nRanks 96 f14r2n07:7790:10503 [1] NCCL INFO Channel 00/0 : 16[4000] -> 33[26000] [receive] via NET/IB/0 comm 0x2b01c8000ab0 nRanks 96 f14r3n01:7395:10848 [1] NCCL INFO Channel 00/0 : 84[4000] -> 89[26000] [receive] via NET/IB/0 comm 0x2b59cc000ab0 nRanks 96 f14r1n19:18663:22337 [1] NCCL INFO Channel 01 : 1[26000] -> 0[4000] via P2P/IPC comm 0x2b6dac000ab0 nRanks 96 f14r3n02:32369:2684 [1] NCCL INFO Channel 00 : 93[26000] -> 92[4000] via P2P/IPC comm 0x2ac214000ab0 nRanks 96 f14r2n05:26239:29360 [1] NCCL INFO Connected all rings comm 0x2b48ac000ab0 nRanks 96 busId 26000 f14r2n13:20110:23250 [1] NCCL INFO Channel 00/0 : 52[4000] -> 57[26000] [receive] via NET/IB/0 comm 0x2b7058000ab0 nRanks 96 f14r2n12:7612:10171 [1] NCCL INFO Channel 01/0 : 53[26000] -> 56[4000] [send] via NET/IB/0 comm 0x2b0cdc000ab0 nRanks 96 f14r2n19:10614:13374 [1] NCCL INFO Channel 00/0 : 72[4000] -> 81[26000] [receive] via NET/IB/0 comm 0x2b3c14000ab0 nRanks 96 f14r3n02:32369:2684 [1] NCCL INFO Channel 01 : 93[26000] -> 92[4000] via P2P/IPC comm 0x2ac214000ab0 nRanks 96 f14r2n05:26239:29360 [1] NCCL INFO Channel 00/0 : 20[4000] -> 25[26000] [receive] via NET/IB/0 comm 0x2b48ac000ab0 nRanks 96 f14r2n19:10612:13376 [3] NCCL INFO Channel 01/0 : 83[63000] -> 84[4000] [send] via NET/IB/0 comm 0x2b3168000ab0 nRanks 96 f14r2n15:32397:3205 [3] NCCL INFO Channel 01/0 : 67[63000] -> 68[4000] [send] via NET/IB/0 comm 0x2b0b30000ab0 nRanks 96 f14r2n09:2440:5947 [3] NCCL INFO Channel 01/0 : 43[63000] -> 44[4000] [send] via NET/IB/0 comm 0x2b9ce4000ab0 nRanks 96 f14r2n03:27607:30911 [3] NCCL INFO Channel 01/0 : 19[63000] -> 20[4000] [send] via NET/IB/0 comm 0x2ac47c000ab0 nRanks 96 f14r2n02:18589:21774 [3] NCCL INFO Channel 01/0 : 15[63000] -> 16[4000] [send] via NET/IB/0 comm 0x2b666c000ab0 nRanks 96 f14r2n08:27955:31236 [3] NCCL INFO Channel 01/0 : 39[63000] -> 40[4000] [send] via NET/IB/0 comm 0x2b2a24000ab0 nRanks 96 f14r3n02:32368:2681 [3] NCCL INFO Channel 01/0 : 95[63000] -> 0[4000] [send] via NET/IB/0 comm 0x2ac190000ab0 nRanks 96 f14r2n10:502:3712 [3] NCCL INFO Channel 01/0 : 47[63000] -> 48[4000] [send] via NET/IB/0 comm 0x2af0a8000ab0 nRanks 96 f14r2n18:11305:14583 [3] NCCL INFO Channel 01/0 : 79[63000] -> 80[4000] [send] via NET/IB/0 comm 0x2b8334000ab0 nRanks 96 f14r2n06:8123:10805 [3] NCCL INFO Channel 01/0 : 31[63000] -> 32[4000] [send] via NET/IB/0 comm 0x2af5d4000ab0 nRanks 96 f14r2n01:16210:19157 [3] NCCL INFO Channel 01/0 : 11[63000] -> 12[4000] [send] via NET/IB/0 comm 0x2b3834000ab0 nRanks 96 f14r2n07:7788:10495 [3] NCCL INFO Channel 01/0 : 35[63000] -> 36[4000] [send] via NET/IB/0 comm 0x2afce8000ab0 nRanks 96 f14r2n00:27305:29821 [3] NCCL INFO Channel 01/0 : 7[63000] -> 8[4000] [send] via NET/IB/0 comm 0x2b08e4000ab0 nRanks 96 f14r2n13:20109:23245 [3] NCCL INFO Channel 01/0 : 59[63000] -> 60[4000] [send] via NET/IB/0 comm 0x2b5ff8000ab0 nRanks 96 f14r3n01:7394:10851 [3] NCCL INFO Channel 01/0 : 91[63000] -> 92[4000] [send] via NET/IB/0 comm 0x2aeea8000ab0 nRanks 96 f14r2n14:4183:7769 [3] NCCL INFO Channel 01/0 : 63[63000] -> 64[4000] [send] via NET/IB/0 comm 0x2b2eb0000ab0 nRanks 96 f14r2n12:7615:10166 [3] NCCL INFO Channel 01/0 : 55[63000] -> 56[4000] [send] via NET/IB/0 comm 0x2adaf0000ab0 nRanks 96 f14r2n16:27452:30017 [3] NCCL INFO Channel 01/0 : 71[63000] -> 72[4000] [send] via NET/IB/0 comm 0x2b6524000ab0 nRanks 96 f14r1n19:18666:22335 [3] NCCL INFO Channel 01/0 : 3[63000] -> 4[4000] [send] via NET/IB/0 comm 0x2b34f4000ab0 nRanks 96 f14r2n17:14570:17928 [3] NCCL INFO Channel 01/0 : 75[63000] -> 76[4000] [send] via NET/IB/0 comm 0x2bad58000ab0 nRanks 96 f14r2n05:26240:29359 [3] NCCL INFO Channel 01/0 : 27[63000] -> 28[4000] [send] via NET/IB/0 comm 0x2b45e4000ab0 nRanks 96 f14r3n00:20871:23422 [3] NCCL INFO Channel 01/0 : 87[63000] -> 88[4000] [send] via NET/IB/0 comm 0x2b4598000ab0 nRanks 96 f14r2n11:16953:20216 [3] NCCL INFO Channel 01/0 : 51[63000] -> 52[4000] [send] via NET/IB/0 comm 0x2b9ad8000ab0 nRanks 96 f14r2n04:3627:6959 [3] NCCL INFO Channel 01/0 : 23[63000] -> 24[4000] [send] via NET/IB/0 comm 0x2afafc000ab0 nRanks 96 f14r2n19:10615:13378 [2] NCCL INFO Connected all rings comm 0x2b17c0000ab0 nRanks 96 busId 43000 f14r2n09:2439:5946 [2] NCCL INFO Connected all rings comm 0x2b6820000ab0 nRanks 96 busId 43000 f14r2n03:27608:30915 [2] NCCL INFO Connected all rings comm 0x2ac810000ab0 nRanks 96 busId 43000 f14r2n02:18586:21777 [2] NCCL INFO Connected all rings comm 0x2b4838000ab0 nRanks 96 busId 43000 f14r2n08:27954:31230 [2] NCCL INFO Connected all rings comm 0x2ae6a0000ab0 nRanks 96 busId 43000 f14r2n01:16209:19158 [2] NCCL INFO Connected all rings comm 0x2b4a28000ab0 nRanks 96 busId 43000 f14r2n15:32395:3202 [2] NCCL INFO Connected all rings comm 0x2b9a60000ab0 nRanks 96 busId 43000 f14r2n06:8124:10806 [2] NCCL INFO Connected all rings comm 0x2b16dc000ab0 nRanks 96 busId 43000 f14r2n16:27454:30011 [2] NCCL INFO Connected all rings comm 0x2b3674000ab0 nRanks 96 busId 43000 f14r2n19:10615:13378 [2] NCCL INFO Channel 00 : 82[43000] -> 81[26000] via P2P/IPC comm 0x2b17c0000ab0 nRanks 96 f14r2n03:27608:30915 [2] NCCL INFO Channel 00 : 18[43000] -> 17[26000] via P2P/IPC comm 0x2ac810000ab0 nRanks 96 f14r2n02:18586:21777 [2] NCCL INFO Channel 00 : 14[43000] -> 13[26000] via P2P/IPC comm 0x2b4838000ab0 nRanks 96 f14r2n07:7789:10505 [2] NCCL INFO Connected all rings comm 0x2b5270000ab0 nRanks 96 busId 43000 f14r3n02:32367:2683 [2] NCCL INFO Connected all rings comm 0x2ac7f0000ab0 nRanks 96 busId 43000 f14r2n18:11303:14585 [2] NCCL INFO Connected all rings comm 0x2b6a28000ab0 nRanks 96 busId 43000 f14r1n19:18665:22334 [2] NCCL INFO Connected all rings comm 0x2aeba0000ab0 nRanks 96 busId 43000 f14r2n12:7613:10167 [2] NCCL INFO Connected all rings comm 0x2b5bbc000ab0 nRanks 96 busId 43000 f14r2n10:498:3713 [2] NCCL INFO Connected all rings comm 0x2addbc000ab0 nRanks 96 busId 43000 f14r2n09:2439:5946 [2] NCCL INFO Channel 00 : 42[43000] -> 41[26000] via P2P/IPC comm 0x2b6820000ab0 nRanks 96 f14r2n08:27954:31230 [2] NCCL INFO Channel 00 : 38[43000] -> 37[26000] via P2P/IPC comm 0x2ae6a0000ab0 nRanks 96 f14r3n00:20872:23420 [2] NCCL INFO Connected all rings comm 0x2b3600000ab0 nRanks 96 busId 43000 f14r2n05:26237:29358 [2] NCCL INFO Connected all rings comm 0x2b3418000ab0 nRanks 96 busId 43000 f14r2n02:18586:21777 [2] NCCL INFO Channel 01 : 14[43000] -> 13[26000] via P2P/IPC comm 0x2b4838000ab0 nRanks 96 f14r2n13:20107:23246 [2] NCCL INFO Connected all rings comm 0x2bae54000ab0 nRanks 96 busId 43000 f14r2n00:27302:29830 [2] NCCL INFO Connected all rings comm 0x2ba3c8000ab0 nRanks 96 busId 43000 f14r2n03:27608:30915 [2] NCCL INFO Channel 01 : 18[43000] -> 17[26000] via P2P/IPC comm 0x2ac810000ab0 nRanks 96 f14r2n14:4185:7771 [2] NCCL INFO Connected all rings comm 0x2b2b50000ab0 nRanks 96 busId 43000 f14r2n06:8124:10806 [2] NCCL INFO Channel 00 : 30[43000] -> 29[26000] via P2P/IPC comm 0x2b16dc000ab0 nRanks 96 f14r3n01:7397:10847 [2] NCCL INFO Connected all rings comm 0x2ac210000ab0 nRanks 96 busId 43000 f14r2n15:32395:3202 [2] NCCL INFO Channel 00 : 66[43000] -> 65[26000] via P2P/IPC comm 0x2b9a60000ab0 nRanks 96 f14r2n01:16209:19158 [2] NCCL INFO Channel 00 : 10[43000] -> 9[26000] via P2P/IPC comm 0x2b4a28000ab0 nRanks 96 f14r2n09:2439:5946 [2] NCCL INFO Channel 01 : 42[43000] -> 41[26000] via P2P/IPC comm 0x2b6820000ab0 nRanks 96 f14r2n08:27954:31230 [2] NCCL INFO Channel 01 : 38[43000] -> 37[26000] via P2P/IPC comm 0x2ae6a0000ab0 nRanks 96 f14r2n17:14569:17924 [2] NCCL INFO Connected all rings comm 0x2b9384000ab0 nRanks 96 busId 43000 f14r2n15:32395:3202 [2] NCCL INFO Channel 01 : 66[43000] -> 65[26000] via P2P/IPC comm 0x2b9a60000ab0 nRanks 96 f14r2n07:7789:10505 [2] NCCL INFO Channel 00 : 34[43000] -> 33[26000] via P2P/IPC comm 0x2b5270000ab0 nRanks 96 f14r2n18:11303:14585 [2] NCCL INFO Channel 00 : 78[43000] -> 77[26000] via P2P/IPC comm 0x2b6a28000ab0 nRanks 96 f14r2n01:16209:19158 [2] NCCL INFO Channel 01 : 10[43000] -> 9[26000] via P2P/IPC comm 0x2b4a28000ab0 nRanks 96 f14r3n02:32367:2683 [2] NCCL INFO Channel 00 : 94[43000] -> 93[26000] via P2P/IPC comm 0x2ac7f0000ab0 nRanks 96 f14r2n06:8124:10806 [2] NCCL INFO Channel 01 : 30[43000] -> 29[26000] via P2P/IPC comm 0x2b16dc000ab0 nRanks 96 f14r2n16:27454:30011 [2] NCCL INFO Channel 00 : 70[43000] -> 69[26000] via P2P/IPC comm 0x2b3674000ab0 nRanks 96 f14r2n11:16951:20218 [2] NCCL INFO Connected all rings comm 0x2ab858000ab0 nRanks 96 busId 43000 f14r2n12:7613:10167 [2] NCCL INFO Channel 00 : 54[43000] -> 53[26000] via P2P/IPC comm 0x2b5bbc000ab0 nRanks 96 f14r1n19:18665:22334 [2] NCCL INFO Channel 00 : 2[43000] -> 1[26000] via P2P/IPC comm 0x2aeba0000ab0 nRanks 96 f14r2n00:27302:29830 [2] NCCL INFO Channel 00 : 6[43000] -> 5[26000] via P2P/IPC comm 0x2ba3c8000ab0 nRanks 96 f14r2n04:3630:6960 [2] NCCL INFO Connected all rings comm 0x2b0d7c000ab0 nRanks 96 busId 43000 f14r2n10:498:3713 [2] NCCL INFO Channel 00 : 46[43000] -> 45[26000] via P2P/IPC comm 0x2addbc000ab0 nRanks 96 f14r2n18:11303:14585 [2] NCCL INFO Channel 01 : 78[43000] -> 77[26000] via P2P/IPC comm 0x2b6a28000ab0 nRanks 96 f14r2n05:26237:29358 [2] NCCL INFO Channel 00 : 26[43000] -> 25[26000] via P2P/IPC comm 0x2b3418000ab0 nRanks 96 f14r3n02:32367:2683 [2] NCCL INFO Channel 01 : 94[43000] -> 93[26000] via P2P/IPC comm 0x2ac7f0000ab0 nRanks 96 f14r2n07:7789:10505 [2] NCCL INFO Channel 01 : 34[43000] -> 33[26000] via P2P/IPC comm 0x2b5270000ab0 nRanks 96 f14r3n00:20872:23420 [2] NCCL INFO Channel 00 : 86[43000] -> 85[26000] via P2P/IPC comm 0x2b3600000ab0 nRanks 96 f14r2n16:27454:30011 [2] NCCL INFO Channel 01 : 70[43000] -> 69[26000] via P2P/IPC comm 0x2b3674000ab0 nRanks 96 f14r2n14:4185:7771 [2] NCCL INFO Channel 00 : 62[43000] -> 61[26000] via P2P/IPC comm 0x2b2b50000ab0 nRanks 96 f14r2n12:7613:10167 [2] NCCL INFO Channel 01 : 54[43000] -> 53[26000] via P2P/IPC comm 0x2b5bbc000ab0 nRanks 96 f14r1n19:18665:22334 [2] NCCL INFO Channel 01 : 2[43000] -> 1[26000] via P2P/IPC comm 0x2aeba0000ab0 nRanks 96 f14r2n17:14569:17924 [2] NCCL INFO Channel 00 : 74[43000] -> 73[26000] via P2P/IPC comm 0x2b9384000ab0 nRanks 96 f14r2n00:27302:29830 [2] NCCL INFO Channel 01 : 6[43000] -> 5[26000] via P2P/IPC comm 0x2ba3c8000ab0 nRanks 96 f14r2n10:498:3713 [2] NCCL INFO Channel 01 : 46[43000] -> 45[26000] via P2P/IPC comm 0x2addbc000ab0 nRanks 96 f14r3n01:7397:10847 [2] NCCL INFO Channel 00 : 90[43000] -> 89[26000] via P2P/IPC comm 0x2ac210000ab0 nRanks 96 f14r2n13:20107:23246 [2] NCCL INFO Channel 00 : 58[43000] -> 57[26000] via P2P/IPC comm 0x2bae54000ab0 nRanks 96 f14r2n05:26237:29358 [2] NCCL INFO Channel 01 : 26[43000] -> 25[26000] via P2P/IPC comm 0x2b3418000ab0 nRanks 96 f14r3n00:20872:23420 [2] NCCL INFO Channel 01 : 86[43000] -> 85[26000] via P2P/IPC comm 0x2b3600000ab0 nRanks 96 f14r2n14:4185:7771 [2] NCCL INFO Channel 01 : 62[43000] -> 61[26000] via P2P/IPC comm 0x2b2b50000ab0 nRanks 96 f14r2n17:14569:17924 [2] NCCL INFO Channel 01 : 74[43000] -> 73[26000] via P2P/IPC comm 0x2b9384000ab0 nRanks 96 f14r3n01:7397:10847 [2] NCCL INFO Channel 01 : 90[43000] -> 89[26000] via P2P/IPC comm 0x2ac210000ab0 nRanks 96 f14r2n13:20107:23246 [2] NCCL INFO Channel 01 : 58[43000] -> 57[26000] via P2P/IPC comm 0x2bae54000ab0 nRanks 96 f14r2n19:10615:13378 [2] NCCL INFO Channel 01 : 82[43000] -> 81[26000] via P2P/IPC comm 0x2b17c0000ab0 nRanks 96 f14r2n11:16951:20218 [2] NCCL INFO Channel 00 : 50[43000] -> 49[26000] via P2P/IPC comm 0x2ab858000ab0 nRanks 96 f14r2n04:3630:6960 [2] NCCL INFO Channel 00 : 22[43000] -> 21[26000] via P2P/IPC comm 0x2b0d7c000ab0 nRanks 96 f14r2n11:16951:20218 [2] NCCL INFO Channel 01 : 50[43000] -> 49[26000] via P2P/IPC comm 0x2ab858000ab0 nRanks 96 f14r2n04:3630:6960 [2] NCCL INFO Channel 01 : 22[43000] -> 21[26000] via P2P/IPC comm 0x2b0d7c000ab0 nRanks 96 f14r2n19:10612:13376 [3] NCCL INFO Connected all rings comm 0x2b3168000ab0 nRanks 96 busId 63000 f14r2n19:10612:13376 [3] NCCL INFO Channel 00 : 83[63000] -> 82[43000] via P2P/IPC comm 0x2b3168000ab0 nRanks 96 f14r2n03:27607:30911 [3] NCCL INFO Connected all rings comm 0x2ac47c000ab0 nRanks 96 busId 63000 f14r2n03:27607:30911 [3] NCCL INFO Channel 00 : 19[63000] -> 18[43000] via P2P/IPC comm 0x2ac47c000ab0 nRanks 96 f14r2n19:10612:13376 [3] NCCL INFO Channel 01 : 83[63000] -> 82[43000] via P2P/IPC comm 0x2b3168000ab0 nRanks 96 f14r2n03:27607:30911 [3] NCCL INFO Channel 01 : 19[63000] -> 18[43000] via P2P/IPC comm 0x2ac47c000ab0 nRanks 96 f14r2n15:32397:3205 [3] NCCL INFO Connected all rings comm 0x2b0b30000ab0 nRanks 96 busId 63000 f14r2n15:32397:3205 [3] NCCL INFO Channel 00 : 67[63000] -> 66[43000] via P2P/IPC comm 0x2b0b30000ab0 nRanks 96 f14r2n02:18589:21774 [3] NCCL INFO Connected all rings comm 0x2b666c000ab0 nRanks 96 busId 63000 f14r2n13:20109:23245 [3] NCCL INFO Connected all rings comm 0x2b5ff8000ab0 nRanks 96 busId 63000 f14r2n13:20109:23245 [3] NCCL INFO Channel 00 : 59[63000] -> 58[43000] via P2P/IPC comm 0x2b5ff8000ab0 nRanks 96 f14r2n02:18589:21774 [3] NCCL INFO Channel 00 : 15[63000] -> 14[43000] via P2P/IPC comm 0x2b666c000ab0 nRanks 96 f14r2n09:2440:5947 [3] NCCL INFO Connected all rings comm 0x2b9ce4000ab0 nRanks 96 busId 63000 f14r2n18:11305:14583 [3] NCCL INFO Connected all rings comm 0x2b8334000ab0 nRanks 96 busId 63000 f14r2n09:2440:5947 [3] NCCL INFO Channel 00 : 43[63000] -> 42[43000] via P2P/IPC comm 0x2b9ce4000ab0 nRanks 96 f14r2n18:11305:14583 [3] NCCL INFO Channel 00 : 79[63000] -> 78[43000] via P2P/IPC comm 0x2b8334000ab0 nRanks 96 f14r2n17:14570:17928 [3] NCCL INFO Connected all rings comm 0x2bad58000ab0 nRanks 96 busId 63000 f14r2n08:27955:31236 [3] NCCL INFO Connected all rings comm 0x2b2a24000ab0 nRanks 96 busId 63000 f14r2n17:14570:17928 [3] NCCL INFO Channel 00 : 75[63000] -> 74[43000] via P2P/IPC comm 0x2bad58000ab0 nRanks 96 f14r2n08:27955:31236 [3] NCCL INFO Channel 00 : 39[63000] -> 38[43000] via P2P/IPC comm 0x2b2a24000ab0 nRanks 96 f14r2n15:32397:3205 [3] NCCL INFO Channel 01 : 67[63000] -> 66[43000] via P2P/IPC comm 0x2b0b30000ab0 nRanks 96 f14r2n13:20109:23245 [3] NCCL INFO Channel 01 : 59[63000] -> 58[43000] via P2P/IPC comm 0x2b5ff8000ab0 nRanks 96 f14r2n02:18589:21774 [3] NCCL INFO Channel 01 : 15[63000] -> 14[43000] via P2P/IPC comm 0x2b666c000ab0 nRanks 96 f14r2n09:2440:5947 [3] NCCL INFO Channel 01 : 43[63000] -> 42[43000] via P2P/IPC comm 0x2b9ce4000ab0 nRanks 96 f14r2n00:27305:29821 [3] NCCL INFO Connected all rings comm 0x2b08e4000ab0 nRanks 96 busId 63000 f14r2n00:27305:29821 [3] NCCL INFO Channel 00 : 7[63000] -> 6[43000] via P2P/IPC comm 0x2b08e4000ab0 nRanks 96 f14r2n06:8123:10805 [3] NCCL INFO Connected all rings comm 0x2af5d4000ab0 nRanks 96 busId 63000 f14r2n11:16953:20216 [3] NCCL INFO Connected all rings comm 0x2b9ad8000ab0 nRanks 96 busId 63000 f14r2n06:8123:10805 [3] NCCL INFO Channel 00 : 31[63000] -> 30[43000] via P2P/IPC comm 0x2af5d4000ab0 nRanks 96 f14r2n11:16953:20216 [3] NCCL INFO Channel 00 : 51[63000] -> 50[43000] via P2P/IPC comm 0x2b9ad8000ab0 nRanks 96 f14r2n08:27955:31236 [3] NCCL INFO Channel 01 : 39[63000] -> 38[43000] via P2P/IPC comm 0x2b2a24000ab0 nRanks 96 f14r2n17:14570:17928 [3] NCCL INFO Channel 01 : 75[63000] -> 74[43000] via P2P/IPC comm 0x2bad58000ab0 nRanks 96 f14r2n18:11305:14583 [3] NCCL INFO Channel 01 : 79[63000] -> 78[43000] via P2P/IPC comm 0x2b8334000ab0 nRanks 96 f14r2n05:26240:29359 [3] NCCL INFO Connected all rings comm 0x2b45e4000ab0 nRanks 96 busId 63000 f14r2n00:27305:29821 [3] NCCL INFO Channel 01 : 7[63000] -> 6[43000] via P2P/IPC comm 0x2b08e4000ab0 nRanks 96 f14r2n05:26240:29359 [3] NCCL INFO Channel 00 : 27[63000] -> 26[43000] via P2P/IPC comm 0x2b45e4000ab0 nRanks 96 f14r3n01:7394:10851 [3] NCCL INFO Connected all rings comm 0x2aeea8000ab0 nRanks 96 busId 63000 f14r3n01:7394:10851 [3] NCCL INFO Channel 00 : 91[63000] -> 90[43000] via P2P/IPC comm 0x2aeea8000ab0 nRanks 96 f14r2n06:8123:10805 [3] NCCL INFO Channel 01 : 31[63000] -> 30[43000] via P2P/IPC comm 0x2af5d4000ab0 nRanks 96 f14r2n11:16953:20216 [3] NCCL INFO Channel 01 : 51[63000] -> 50[43000] via P2P/IPC comm 0x2b9ad8000ab0 nRanks 96 f14r2n16:27452:30017 [3] NCCL INFO Connected all rings comm 0x2b6524000ab0 nRanks 96 busId 63000 f14r2n16:27452:30017 [3] NCCL INFO Channel 00 : 71[63000] -> 70[43000] via P2P/IPC comm 0x2b6524000ab0 nRanks 96 f14r2n12:7615:10166 [3] NCCL INFO Connected all rings comm 0x2adaf0000ab0 nRanks 96 busId 63000 f14r1n19:18666:22335 [3] NCCL INFO Connected all rings comm 0x2b34f4000ab0 nRanks 96 busId 63000 f14r1n19:18666:22335 [3] NCCL INFO Channel 00 : 3[63000] -> 2[43000] via P2P/IPC comm 0x2b34f4000ab0 nRanks 96 f14r2n12:7615:10166 [3] NCCL INFO Channel 00 : 55[63000] -> 54[43000] via P2P/IPC comm 0x2adaf0000ab0 nRanks 96 f14r2n04:3627:6959 [3] NCCL INFO Connected all rings comm 0x2afafc000ab0 nRanks 96 busId 63000 f14r2n05:26240:29359 [3] NCCL INFO Channel 01 : 27[63000] -> 26[43000] via P2P/IPC comm 0x2b45e4000ab0 nRanks 96 f14r2n04:3627:6959 [3] NCCL INFO Channel 00 : 23[63000] -> 22[43000] via P2P/IPC comm 0x2afafc000ab0 nRanks 96 f14r3n01:7394:10851 [3] NCCL INFO Channel 01 : 91[63000] -> 90[43000] via P2P/IPC comm 0x2aeea8000ab0 nRanks 96 f14r2n16:27452:30017 [3] NCCL INFO Channel 01 : 71[63000] -> 70[43000] via P2P/IPC comm 0x2b6524000ab0 nRanks 96 f14r3n00:20871:23422 [3] NCCL INFO Connected all rings comm 0x2b4598000ab0 nRanks 96 busId 63000 f14r2n12:7615:10166 [3] NCCL INFO Channel 01 : 55[63000] -> 54[43000] via P2P/IPC comm 0x2adaf0000ab0 nRanks 96 f14r3n00:20871:23422 [3] NCCL INFO Channel 00 : 87[63000] -> 86[43000] via P2P/IPC comm 0x2b4598000ab0 nRanks 96 f14r1n19:18666:22335 [3] NCCL INFO Channel 01 : 3[63000] -> 2[43000] via P2P/IPC comm 0x2b34f4000ab0 nRanks 96 f14r2n14:4183:7769 [3] NCCL INFO Connected all rings comm 0x2b2eb0000ab0 nRanks 96 busId 63000 f14r2n07:7788:10495 [3] NCCL INFO Connected all rings comm 0x2afce8000ab0 nRanks 96 busId 63000 f14r2n07:7788:10495 [3] NCCL INFO Channel 00 : 35[63000] -> 34[43000] via P2P/IPC comm 0x2afce8000ab0 nRanks 96 f14r2n14:4183:7769 [3] NCCL INFO Channel 00 : 63[63000] -> 62[43000] via P2P/IPC comm 0x2b2eb0000ab0 nRanks 96 f14r2n01:16210:19157 [3] NCCL INFO Connected all rings comm 0x2b3834000ab0 nRanks 96 busId 63000 f14r2n01:16210:19157 [3] NCCL INFO Channel 00 : 11[63000] -> 10[43000] via P2P/IPC comm 0x2b3834000ab0 nRanks 96 f14r2n04:3627:6959 [3] NCCL INFO Channel 01 : 23[63000] -> 22[43000] via P2P/IPC comm 0x2afafc000ab0 nRanks 96 f14r3n02:32368:2681 [3] NCCL INFO Connected all rings comm 0x2ac190000ab0 nRanks 96 busId 63000 f14r2n10:502:3712 [3] NCCL INFO Connected all rings comm 0x2af0a8000ab0 nRanks 96 busId 63000 f14r3n02:32368:2681 [3] NCCL INFO Channel 00 : 95[63000] -> 94[43000] via P2P/IPC comm 0x2ac190000ab0 nRanks 96 f14r2n10:502:3712 [3] NCCL INFO Channel 00 : 47[63000] -> 46[43000] via P2P/IPC comm 0x2af0a8000ab0 nRanks 96 f14r3n00:20871:23422 [3] NCCL INFO Channel 01 : 87[63000] -> 86[43000] via P2P/IPC comm 0x2b4598000ab0 nRanks 96 f14r2n14:4183:7769 [3] NCCL INFO Channel 01 : 63[63000] -> 62[43000] via P2P/IPC comm 0x2b2eb0000ab0 nRanks 96 f14r2n07:7788:10495 [3] NCCL INFO Channel 01 : 35[63000] -> 34[43000] via P2P/IPC comm 0x2afce8000ab0 nRanks 96 f14r2n19:10612:13376 [3] NCCL INFO Connected all trees comm 0x2b3168000ab0 nRanks 96 busId 63000 f14r2n19:10612:13376 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n19:10612:13376 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n01:16210:19157 [3] NCCL INFO Channel 01 : 11[63000] -> 10[43000] via P2P/IPC comm 0x2b3834000ab0 nRanks 96 f14r3n02:32368:2681 [3] NCCL INFO Channel 01 : 95[63000] -> 94[43000] via P2P/IPC comm 0x2ac190000ab0 nRanks 96 f14r2n10:502:3712 [3] NCCL INFO Channel 01 : 47[63000] -> 46[43000] via P2P/IPC comm 0x2af0a8000ab0 nRanks 96 f14r3n02:32370:2687 [0] NCCL INFO Connected all rings comm 0x2b1058000ab0 nRanks 96 busId 4000 f14r2n15:32397:3205 [3] NCCL INFO Connected all trees comm 0x2b0b30000ab0 nRanks 96 busId 63000 f14r2n09:2440:5947 [3] NCCL INFO Connected all trees comm 0x2b9ce4000ab0 nRanks 96 busId 63000 f14r2n13:20109:23245 [3] NCCL INFO Connected all trees comm 0x2b5ff8000ab0 nRanks 96 busId 63000 f14r2n09:2440:5947 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n09:2440:5947 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n13:20109:23245 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n13:20109:23245 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n15:32397:3205 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n15:32397:3205 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n03:27606:30913 [0] NCCL INFO Connected all rings comm 0x2ae9e4000ab0 nRanks 96 busId 4000 f14r2n03:27607:30911 [3] NCCL INFO Connected all trees comm 0x2ac47c000ab0 nRanks 96 busId 63000 f14r2n03:27607:30911 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n03:27607:30911 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n17:14570:17928 [3] NCCL INFO Connected all trees comm 0x2bad58000ab0 nRanks 96 busId 63000 f14r2n17:14570:17928 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n17:14570:17928 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n16:27453:30013 [0] NCCL INFO Connected all rings comm 0x2ba214000ab0 nRanks 96 busId 4000 f14r2n19:10613:13379 [0] NCCL INFO Connected all rings comm 0x2b9044000ab0 nRanks 96 busId 4000 f14r2n06:8125:10808 [0] NCCL INFO Connected all rings comm 0x2b7f64000ab0 nRanks 96 busId 4000 f14r2n18:11304:14586 [0] NCCL INFO Connected all rings comm 0x2ab8d0000ab0 nRanks 96 busId 4000 f14r1n19:18664:22332 [0] NCCL INFO Connected all rings comm 0x2b09c8000ab0 nRanks 96 busId 4000 f14r2n11:16953:20216 [3] NCCL INFO Connected all trees comm 0x2b9ad8000ab0 nRanks 96 busId 63000 f14r2n02:18589:21774 [3] NCCL INFO Connected all trees comm 0x2b666c000ab0 nRanks 96 busId 63000 f14r2n02:18587:21776 [0] NCCL INFO Connected all rings comm 0x2b52b8000ab0 nRanks 96 busId 4000 f14r2n00:27304:29826 [0] NCCL INFO Connected all rings comm 0x2ba47c000ab0 nRanks 96 busId 4000 f14r2n11:16953:20216 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n11:16953:20216 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n02:18589:21774 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n02:18589:21774 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n12:7614:10170 [0] NCCL INFO Connected all rings comm 0x2b0eb4000ab0 nRanks 96 busId 4000 f14r2n06:8123:10805 [3] NCCL INFO Connected all trees comm 0x2af5d4000ab0 nRanks 96 busId 63000 f14r3n00:20870:23421 [0] NCCL INFO Connected all rings comm 0x2b4d6c000ab0 nRanks 96 busId 4000 f14r2n09:2438:5948 [0] NCCL INFO Connected all rings comm 0x2ac80c000ab0 nRanks 96 busId 4000 f14r2n18:11305:14583 [3] NCCL INFO Connected all trees comm 0x2b8334000ab0 nRanks 96 busId 63000 f14r2n06:8123:10805 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n18:11305:14583 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n18:11305:14583 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n08:27953:31232 [0] NCCL INFO Connected all rings comm 0x2b6534000ab0 nRanks 96 busId 4000 f14r2n16:27452:30017 [3] NCCL INFO Connected all trees comm 0x2b6524000ab0 nRanks 96 busId 63000 f14r2n06:8123:10805 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n08:27955:31236 [3] NCCL INFO Connected all trees comm 0x2b2a24000ab0 nRanks 96 busId 63000 f14r2n16:27452:30017 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n15:32396:3203 [0] NCCL INFO Connected all rings comm 0x2afd94000ab0 nRanks 96 busId 4000 f14r1n19:18666:22335 [3] NCCL INFO Connected all trees comm 0x2b34f4000ab0 nRanks 96 busId 63000 f14r2n08:27955:31236 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n16:27452:30017 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n00:27305:29821 [3] NCCL INFO Connected all trees comm 0x2b08e4000ab0 nRanks 96 busId 63000 f14r1n19:18666:22335 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r1n19:18666:22335 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n08:27955:31236 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n00:27305:29821 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r3n01:7394:10851 [3] NCCL INFO Connected all trees comm 0x2aeea8000ab0 nRanks 96 busId 63000 f14r2n01:16211:19154 [0] NCCL INFO Connected all rings comm 0x2aff58000ab0 nRanks 96 busId 4000 f14r2n10:499:3715 [0] NCCL INFO Connected all rings comm 0x2b772c000ab0 nRanks 96 busId 4000 f14r2n05:26238:29362 [0] NCCL INFO Connected all rings comm 0x2b57c4000ab0 nRanks 96 busId 4000 f14r2n00:27305:29821 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r3n01:7394:10851 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n17:14568:17929 [0] NCCL INFO Connected all rings comm 0x2acbd4000ab0 nRanks 96 busId 4000 f14r2n07:7791:10497 [0] NCCL INFO Connected all rings comm 0x2bab98000ab0 nRanks 96 busId 4000 f14r2n14:4184:7772 [0] NCCL INFO Connected all rings comm 0x2b9bcc000ab0 nRanks 96 busId 4000 f14r3n00:20871:23422 [3] NCCL INFO Connected all trees comm 0x2b4598000ab0 nRanks 96 busId 63000 f14r3n01:7394:10851 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n07:7788:10495 [3] NCCL INFO Connected all trees comm 0x2afce8000ab0 nRanks 96 busId 63000 f14r2n14:4183:7769 [3] NCCL INFO Connected all trees comm 0x2b2eb0000ab0 nRanks 96 busId 63000 f14r3n00:20871:23422 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n05:26240:29359 [3] NCCL INFO Connected all trees comm 0x2b45e4000ab0 nRanks 96 busId 63000 f14r2n04:3628:6963 [0] NCCL INFO Connected all rings comm 0x2ac1bc000ab0 nRanks 96 busId 4000 f14r3n01:7396:10852 [0] NCCL INFO Connected all rings comm 0x2b177c000ab0 nRanks 96 busId 4000 f14r2n07:7788:10495 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n14:4183:7769 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r3n00:20871:23422 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n05:26240:29359 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n04:3627:6959 [3] NCCL INFO Connected all trees comm 0x2afafc000ab0 nRanks 96 busId 63000 f14r2n01:16210:19157 [3] NCCL INFO Connected all trees comm 0x2b3834000ab0 nRanks 96 busId 63000 f14r2n12:7615:10166 [3] NCCL INFO Connected all trees comm 0x2adaf0000ab0 nRanks 96 busId 63000 f14r2n11:16952:20220 [0] NCCL INFO Connected all rings comm 0x2b728c000ab0 nRanks 96 busId 4000 f14r3n02:32368:2681 [3] NCCL INFO Connected all trees comm 0x2ac190000ab0 nRanks 96 busId 63000 f14r2n10:502:3712 [3] NCCL INFO Connected all trees comm 0x2af0a8000ab0 nRanks 96 busId 63000 f14r2n07:7788:10495 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n14:4183:7769 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n05:26240:29359 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n04:3627:6959 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n01:16210:19157 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n01:16210:19157 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n12:7615:10166 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n12:7615:10166 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r3n02:32368:2681 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r3n02:32368:2681 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n10:502:3712 [3] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n13:20108:23249 [0] NCCL INFO Connected all rings comm 0x2b26f4000ab0 nRanks 96 busId 4000 f14r1n19:18665:22334 [2] NCCL INFO Connected all trees comm 0x2aeba0000ab0 nRanks 96 busId 43000 f14r1n19:18665:22334 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r1n19:18665:22334 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n04:3627:6959 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r3n02:32367:2683 [2] NCCL INFO Connected all trees comm 0x2ac7f0000ab0 nRanks 96 busId 43000 f14r2n10:502:3712 [3] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r3n02:32367:2683 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r3n02:32367:2683 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n03:27606:30913 [0] NCCL INFO Channel 01/0 : 16[4000] -> 20[4000] [send] via NET/IB/0 comm 0x2ae9e4000ab0 nRanks 96 f14r2n02:18587:21776 [0] NCCL INFO Channel 00/0 : 8[4000] -> 12[4000] [receive] via NET/IB/0 comm 0x2b52b8000ab0 nRanks 96 f14r3n02:32370:2687 [0] NCCL INFO Channel 00/0 : 88[4000] -> 92[4000] [receive] via NET/IB/0 comm 0x2b1058000ab0 nRanks 96 f14r2n18:11304:14586 [0] NCCL INFO Channel 00/0 : 72[4000] -> 76[4000] [receive] via NET/IB/0 comm 0x2ab8d0000ab0 nRanks 96 f14r2n06:8125:10808 [0] NCCL INFO Channel 00/0 : 24[4000] -> 28[4000] [receive] via NET/IB/0 comm 0x2b7f64000ab0 nRanks 96 f14r2n00:27304:29826 [0] NCCL INFO Channel 01/0 : 0[4000] -> 4[4000] [receive] via NET/IB/0 comm 0x2ba47c000ab0 nRanks 96 f14r1n19:18664:22332 [0] NCCL INFO Channel 01/0 : 0[4000] -> 4[4000] [send] via NET/IB/0 comm 0x2b09c8000ab0 nRanks 96 f14r2n12:7614:10170 [0] NCCL INFO Channel 01/0 : 48[4000] -> 52[4000] [receive] via NET/IB/0 comm 0x2b0eb4000ab0 nRanks 96 f14r2n16:27453:30013 [0] NCCL INFO Channel 01/0 : 64[4000] -> 68[4000] [receive] via NET/IB/0 comm 0x2ba214000ab0 nRanks 96 f14r2n19:10613:13379 [0] NCCL INFO Channel 01/0 : 80[4000] -> 84[4000] [send] via NET/IB/0 comm 0x2b9044000ab0 nRanks 96 f14r2n15:32396:3203 [0] NCCL INFO Channel 01/0 : 64[4000] -> 68[4000] [send] via NET/IB/0 comm 0x2afd94000ab0 nRanks 96 f14r2n17:14568:17929 [0] NCCL INFO Channel 01/0 : 69[26000] -> 72[4000] [receive] via NET/IB/0 comm 0x2acbd4000ab0 nRanks 96 f14r2n09:2438:5948 [0] NCCL INFO Channel 01/0 : 37[26000] -> 40[4000] [receive] via NET/IB/0 comm 0x2ac80c000ab0 nRanks 96 f14r2n05:26238:29362 [0] NCCL INFO Channel 01/0 : 21[26000] -> 24[4000] [receive] via NET/IB/0 comm 0x2b57c4000ab0 nRanks 96 f14r3n00:20870:23421 [0] NCCL INFO Channel 01/0 : 80[4000] -> 84[4000] [receive] via NET/IB/0 comm 0x2b4d6c000ab0 nRanks 96 f14r2n04:3628:6963 [0] NCCL INFO Channel 01/0 : 16[4000] -> 20[4000] [receive] via NET/IB/0 comm 0x2ac1bc000ab0 nRanks 96 f14r2n08:27953:31232 [0] NCCL INFO Channel 01/0 : 32[4000] -> 36[4000] [receive] via NET/IB/0 comm 0x2b6534000ab0 nRanks 96 f14r2n07:7791:10497 [0] NCCL INFO Channel 01/0 : 32[4000] -> 36[4000] [send] via NET/IB/0 comm 0x2bab98000ab0 nRanks 96 f14r2n10:499:3715 [0] NCCL INFO Channel 00/0 : 40[4000] -> 44[4000] [receive] via NET/IB/0 comm 0x2b772c000ab0 nRanks 96 f14r2n01:16211:19154 [0] NCCL INFO Channel 01/0 : 5[26000] -> 8[4000] [receive] via NET/IB/0 comm 0x2aff58000ab0 nRanks 96 f14r2n13:20108:23249 [0] NCCL INFO Channel 01/0 : 53[26000] -> 56[4000] [receive] via NET/IB/0 comm 0x2b26f4000ab0 nRanks 96 f14r3n01:7396:10852 [0] NCCL INFO Channel 01/0 : 85[26000] -> 88[4000] [receive] via NET/IB/0 comm 0x2b177c000ab0 nRanks 96 f14r2n14:4184:7772 [0] NCCL INFO Channel 00/0 : 56[4000] -> 60[4000] [receive] via NET/IB/0 comm 0x2b9bcc000ab0 nRanks 96 f14r2n11:16952:20220 [0] NCCL INFO Channel 01/0 : 48[4000] -> 52[4000] [send] via NET/IB/0 comm 0x2b728c000ab0 nRanks 96 f14r2n16:27455:30012 [1] NCCL INFO Channel 01/0 : 72[4000] -> 69[26000] [receive] via NET/IB/0 comm 0x2b7a34000ab0 nRanks 96 f14r2n15:32396:3203 [0] NCCL INFO Channel 00/0 : 64[4000] -> 80[4000] [send] via NET/IB/0 comm 0x2afd94000ab0 nRanks 96 f14r1n19:18664:22332 [0] NCCL INFO Channel 00/0 : 64[4000] -> 0[4000] [receive] via NET/IB/0 comm 0x2b09c8000ab0 nRanks 96 f14r2n03:27606:30913 [0] NCCL INFO Channel 00/0 : 16[4000] -> 24[4000] [send] via NET/IB/0 comm 0x2ae9e4000ab0 nRanks 96 f14r2n04:3629:6961 [1] NCCL INFO Channel 01/0 : 24[4000] -> 21[26000] [receive] via NET/IB/0 comm 0x2ae6b4000ab0 nRanks 96 f14r2n08:27952:31231 [1] NCCL INFO Channel 01/0 : 40[4000] -> 37[26000] [receive] via NET/IB/0 comm 0x2b1f80000ab0 nRanks 96 f14r2n07:7791:10497 [0] NCCL INFO Channel 00/0 : 32[4000] -> 48[4000] [send] via NET/IB/0 comm 0x2bab98000ab0 nRanks 96 f14r2n00:27303:29827 [1] NCCL INFO Channel 01/0 : 8[4000] -> 5[26000] [receive] via NET/IB/0 comm 0x2b5364000ab0 nRanks 96 f14r2n12:7612:10171 [1] NCCL INFO Channel 01/0 : 56[4000] -> 53[26000] [receive] via NET/IB/0 comm 0x2b0cdc000ab0 nRanks 96 f14r2n19:10613:13379 [0] NCCL INFO Channel 00/0 : 80[4000] -> 88[4000] [send] via NET/IB/0 comm 0x2b9044000ab0 nRanks 96 f14r2n11:16952:20220 [0] NCCL INFO Channel 00/0 : 48[4000] -> 56[4000] [send] via NET/IB/0 comm 0x2b728c000ab0 nRanks 96 f14r3n00:20873:23424 [1] NCCL INFO Channel 01/0 : 88[4000] -> 85[26000] [receive] via NET/IB/0 comm 0x2aff60000ab0 nRanks 96 f14r3n00:20870:23421 [0] NCCL INFO Channel 00/0 : 84[4000] -> 89[26000] [send] via NET/IB/0 comm 0x2b4d6c000ab0 nRanks 96 f14r2n04:3628:6963 [0] NCCL INFO Channel 00/0 : 20[4000] -> 25[26000] [send] via NET/IB/0 comm 0x2ac1bc000ab0 nRanks 96 f14r2n08:27953:31232 [0] NCCL INFO Channel 00/0 : 36[4000] -> 41[26000] [send] via NET/IB/0 comm 0x2b6534000ab0 nRanks 96 f14r2n00:27304:29826 [0] NCCL INFO Channel 00/0 : 4[4000] -> 9[26000] [send] via NET/IB/0 comm 0x2ba47c000ab0 nRanks 96 f14r2n12:7614:10170 [0] NCCL INFO Channel 00/0 : 52[4000] -> 57[26000] [send] via NET/IB/0 comm 0x2b0eb4000ab0 nRanks 96 f14r2n16:27453:30013 [0] NCCL INFO Channel 00/0 : 68[4000] -> 73[26000] [send] via NET/IB/0 comm 0x2ba214000ab0 nRanks 96 f14r2n09:2438:5948 [0] NCCL INFO Channel 00/0 : 40[4000] -> 44[4000] [send] via NET/IB/0 comm 0x2ac80c000ab0 nRanks 96 f14r2n17:14568:17929 [0] NCCL INFO Channel 00/0 : 72[4000] -> 76[4000] [send] via NET/IB/0 comm 0x2acbd4000ab0 nRanks 96 f14r2n01:16211:19154 [0] NCCL INFO Channel 00/0 : 8[4000] -> 12[4000] [send] via NET/IB/0 comm 0x2aff58000ab0 nRanks 96 f14r2n13:20108:23249 [0] NCCL INFO Channel 00/0 : 56[4000] -> 60[4000] [send] via NET/IB/0 comm 0x2b26f4000ab0 nRanks 96 f14r3n01:7396:10852 [0] NCCL INFO Channel 00/0 : 88[4000] -> 92[4000] [send] via NET/IB/0 comm 0x2b177c000ab0 nRanks 96 f14r2n05:26238:29362 [0] NCCL INFO Channel 00/0 : 24[4000] -> 28[4000] [send] via NET/IB/0 comm 0x2b57c4000ab0 nRanks 96 f14r3n00:20870:23421 [0] NCCL INFO Channel 01/0 : 77[26000] -> 84[4000] [receive] via NET/IB/0 comm 0x2b4d6c000ab0 nRanks 96 f14r2n04:3628:6963 [0] NCCL INFO Channel 01/0 : 13[26000] -> 20[4000] [receive] via NET/IB/0 comm 0x2ac1bc000ab0 nRanks 96 f14r2n08:27953:31232 [0] NCCL INFO Channel 01/0 : 36[4000] -> 44[4000] [send] via NET/IB/0 comm 0x2b6534000ab0 nRanks 96 f14r2n00:27304:29826 [0] NCCL INFO Channel 01/0 : 4[4000] -> 12[4000] [send] via NET/IB/0 comm 0x2ba47c000ab0 nRanks 96 f14r2n16:27453:30013 [0] NCCL INFO Channel 01/0 : 68[4000] -> 76[4000] [send] via NET/IB/0 comm 0x2ba214000ab0 nRanks 96 f14r2n12:7614:10170 [0] NCCL INFO Channel 01/0 : 45[26000] -> 52[4000] [receive] via NET/IB/0 comm 0x2b0eb4000ab0 nRanks 96 f14r2n09:2438:5948 [0] NCCL INFO Channel 00/0 : 40[4000] -> 49[26000] [send] via NET/IB/0 comm 0x2ac80c000ab0 nRanks 96 f14r2n17:14568:17929 [0] NCCL INFO Channel 00/0 : 72[4000] -> 81[26000] [send] via NET/IB/0 comm 0x2acbd4000ab0 nRanks 96 f14r2n01:16211:19154 [0] NCCL INFO Channel 00/0 : 8[4000] -> 17[26000] [send] via NET/IB/0 comm 0x2aff58000ab0 nRanks 96 f14r2n13:20108:23249 [0] NCCL INFO Channel 00/0 : 48[4000] -> 56[4000] [receive] via NET/IB/0 comm 0x2b26f4000ab0 nRanks 96 f14r3n01:7396:10852 [0] NCCL INFO Channel 00/0 : 80[4000] -> 88[4000] [receive] via NET/IB/0 comm 0x2b177c000ab0 nRanks 96 f14r2n17:14567:17925 [1] NCCL INFO Channel 00/0 : 73[26000] -> 68[4000] [send] via NET/IB/0 comm 0x2b0d54000ab0 nRanks 96 f14r2n05:26239:29360 [1] NCCL INFO Channel 00/0 : 25[26000] -> 20[4000] [send] via NET/IB/0 comm 0x2b48ac000ab0 nRanks 96 f14r2n05:26238:29362 [0] NCCL INFO Channel 00/0 : 16[4000] -> 24[4000] [receive] via NET/IB/0 comm 0x2b57c4000ab0 nRanks 96 f14r2n01:16208:19153 [1] NCCL INFO Channel 00/0 : 9[26000] -> 4[4000] [send] via NET/IB/0 comm 0x2b5610000ab0 nRanks 96 f14r2n13:20110:23250 [1] NCCL INFO Channel 00/0 : 57[26000] -> 52[4000] [send] via NET/IB/0 comm 0x2b7058000ab0 nRanks 96 f14r3n01:7395:10848 [1] NCCL INFO Channel 00/0 : 89[26000] -> 84[4000] [send] via NET/IB/0 comm 0x2b59cc000ab0 nRanks 96 f14r2n09:2437:5949 [1] NCCL INFO Channel 00/0 : 41[26000] -> 36[4000] [send] via NET/IB/0 comm 0x2b5ac4000ab0 nRanks 96 f14r2n18:11304:14586 [0] NCCL INFO Channel 01/0 : 68[4000] -> 76[4000] [receive] via NET/IB/0 comm 0x2ab8d0000ab0 nRanks 96 f14r2n10:499:3715 [0] NCCL INFO Channel 01/0 : 36[4000] -> 44[4000] [receive] via NET/IB/0 comm 0x2b772c000ab0 nRanks 96 f14r3n02:32370:2687 [0] NCCL INFO Channel 01/0 : 92[4000] -> 28[4000] [send] via NET/IB/0 comm 0x2b1058000ab0 nRanks 96 f14r2n02:18587:21776 [0] NCCL INFO Channel 01/0 : 4[4000] -> 12[4000] [receive] via NET/IB/0 comm 0x2b52b8000ab0 nRanks 96 f14r2n06:8125:10808 [0] NCCL INFO Channel 01/0 : 12[4000] -> 28[4000] [receive] via NET/IB/0 comm 0x2b7f64000ab0 nRanks 96 f14r2n14:4184:7772 [0] NCCL INFO Channel 01/0 : 44[4000] -> 60[4000] [receive] via NET/IB/0 comm 0x2b9bcc000ab0 nRanks 96 f14r2n18:11306:14587 [1] NCCL INFO Channel 01/0 : 84[4000] -> 77[26000] [receive] via NET/IB/0 comm 0x2b12b4000ab0 nRanks 96 f14r2n10:500:3716 [1] NCCL INFO Channel 01/0 : 52[4000] -> 45[26000] [receive] via NET/IB/0 comm 0x2b0dec000ab0 nRanks 96 f14r2n02:18588:21780 [1] NCCL INFO Channel 01/0 : 20[4000] -> 13[26000] [receive] via NET/IB/0 comm 0x2b491c000ab0 nRanks 96 f14r2n09:2438:5948 [0] NCCL INFO Channel 00/0 : 49[26000] -> 40[4000] [receive] via NET/IB/0 comm 0x2ac80c000ab0 nRanks 96 f14r2n17:14568:17929 [0] NCCL INFO Channel 00/0 : 81[26000] -> 72[4000] [receive] via NET/IB/0 comm 0x2acbd4000ab0 nRanks 96 f14r2n01:16211:19154 [0] NCCL INFO Channel 00/0 : 17[26000] -> 8[4000] [receive] via NET/IB/0 comm 0x2aff58000ab0 nRanks 96 f14r2n19:10613:13379 [0] NCCL INFO Channel 00/0 : 64[4000] -> 80[4000] [receive] via NET/IB/0 comm 0x2b9044000ab0 nRanks 96 f14r2n03:27606:30913 [0] NCCL INFO Channel 00/0 : 16[4000] -> 33[26000] [send] via NET/IB/0 comm 0x2ae9e4000ab0 nRanks 96 f14r2n11:16952:20220 [0] NCCL INFO Channel 00/0 : 32[4000] -> 48[4000] [receive] via NET/IB/0 comm 0x2b728c000ab0 nRanks 96 f14r2n12:7614:10170 [0] NCCL INFO Channel 01/0 : 52[4000] -> 45[26000] [send] via NET/IB/0 comm 0x2b0eb4000ab0 nRanks 96 f14r3n00:20870:23421 [0] NCCL INFO Channel 01/0 : 84[4000] -> 77[26000] [send] via NET/IB/0 comm 0x2b4d6c000ab0 nRanks 96 f14r2n04:3628:6963 [0] NCCL INFO Channel 01/0 : 20[4000] -> 13[26000] [send] via NET/IB/0 comm 0x2ac1bc000ab0 nRanks 96 f14r2n19:10614:13374 [1] NCCL INFO Channel 00/0 : 81[26000] -> 72[4000] [send] via NET/IB/0 comm 0x2b3c14000ab0 nRanks 96 f14r2n11:16954:20219 [1] NCCL INFO Channel 00/0 : 49[26000] -> 40[4000] [send] via NET/IB/0 comm 0x2b7474000ab0 nRanks 96 f14r2n03:27605:30914 [1] NCCL INFO Channel 00/0 : 17[26000] -> 8[4000] [send] via NET/IB/0 comm 0x2badec000ab0 nRanks 96 f14r2n08:27953:31232 [0] NCCL INFO Channel 01/0 : 44[4000] -> 36[4000] [receive] via NET/IB/0 comm 0x2b6534000ab0 nRanks 96 f14r2n13:20108:23249 [0] NCCL INFO Channel 00/0 : 56[4000] -> 48[4000] [send] via NET/IB/0 comm 0x2b26f4000ab0 nRanks 96 f14r3n01:7396:10852 [0] NCCL INFO Channel 00/0 : 88[4000] -> 80[4000] [send] via NET/IB/0 comm 0x2b177c000ab0 nRanks 96 f14r2n16:27453:30013 [0] NCCL INFO Channel 01/0 : 76[4000] -> 68[4000] [receive] via NET/IB/0 comm 0x2ba214000ab0 nRanks 96 f14r2n05:26238:29362 [0] NCCL INFO Channel 00/0 : 24[4000] -> 16[4000] [send] via NET/IB/0 comm 0x2b57c4000ab0 nRanks 96 f14r2n00:27304:29826 [0] NCCL INFO Channel 01/0 : 12[4000] -> 4[4000] [receive] via NET/IB/0 comm 0x2ba47c000ab0 nRanks 96 f14r2n18:11304:14586 [0] NCCL INFO Channel 01/0 : 61[26000] -> 76[4000] [receive] via NET/IB/0 comm 0x2ab8d0000ab0 nRanks 96 f14r2n02:18587:21776 [0] NCCL INFO Channel 01/0 : 12[4000] -> 28[4000] [send] via NET/IB/0 comm 0x2b52b8000ab0 nRanks 96 f14r2n10:499:3715 [0] NCCL INFO Channel 01/0 : 44[4000] -> 60[4000] [send] via NET/IB/0 comm 0x2b772c000ab0 nRanks 96 f14r2n11:16954:20219 [1] NCCL INFO Channel 00 : 49[26000] -> 48[4000] via P2P/IPC comm 0x2b7474000ab0 nRanks 96 f14r2n19:10614:13374 [1] NCCL INFO Channel 00 : 81[26000] -> 80[4000] via P2P/IPC comm 0x2b3c14000ab0 nRanks 96 f14r2n03:27605:30914 [1] NCCL INFO Channel 00 : 17[26000] -> 16[4000] via P2P/IPC comm 0x2badec000ab0 nRanks 96 f14r2n11:16954:20219 [1] NCCL INFO Channel 01 : 49[26000] -> 48[4000] via P2P/IPC comm 0x2b7474000ab0 nRanks 96 f14r2n19:10614:13374 [1] NCCL INFO Channel 01 : 81[26000] -> 80[4000] via P2P/IPC comm 0x2b3c14000ab0 nRanks 96 f14r2n03:27605:30914 [1] NCCL INFO Channel 01 : 17[26000] -> 16[4000] via P2P/IPC comm 0x2badec000ab0 nRanks 96 f14r2n11:16951:20218 [2] NCCL INFO Connected all trees comm 0x2ab858000ab0 nRanks 96 busId 43000 f14r2n11:16951:20218 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n11:16951:20218 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n18:11306:14587 [1] NCCL INFO Channel 00 : 77[26000] -> 76[4000] via P2P/IPC comm 0x2b12b4000ab0 nRanks 96 f14r2n02:18588:21780 [1] NCCL INFO Channel 00 : 13[26000] -> 12[4000] via P2P/IPC comm 0x2b491c000ab0 nRanks 96 f14r2n18:11306:14587 [1] NCCL INFO Channel 01 : 77[26000] -> 76[4000] via P2P/IPC comm 0x2b12b4000ab0 nRanks 96 f14r2n19:10615:13378 [2] NCCL INFO Connected all trees comm 0x2b17c0000ab0 nRanks 96 busId 43000 f14r2n19:10615:13378 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n19:10615:13378 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n02:18588:21780 [1] NCCL INFO Channel 01 : 13[26000] -> 12[4000] via P2P/IPC comm 0x2b491c000ab0 nRanks 96 f14r2n10:500:3716 [1] NCCL INFO Channel 00 : 45[26000] -> 44[4000] via P2P/IPC comm 0x2b0dec000ab0 nRanks 96 f14r2n03:27608:30915 [2] NCCL INFO Connected all trees comm 0x2ac810000ab0 nRanks 96 busId 43000 f14r2n03:27608:30915 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n03:27608:30915 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n10:500:3716 [1] NCCL INFO Channel 01 : 45[26000] -> 44[4000] via P2P/IPC comm 0x2b0dec000ab0 nRanks 96 f14r2n02:18586:21777 [2] NCCL INFO Connected all trees comm 0x2b4838000ab0 nRanks 96 busId 43000 f14r2n02:18586:21777 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n02:18586:21777 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n18:11303:14585 [2] NCCL INFO Connected all trees comm 0x2b6a28000ab0 nRanks 96 busId 43000 f14r2n18:11303:14585 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n18:11303:14585 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n10:498:3713 [2] NCCL INFO Connected all trees comm 0x2addbc000ab0 nRanks 96 busId 43000 f14r2n10:498:3713 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n10:498:3713 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n12:7614:10170 [0] NCCL INFO Channel 00/0 : 57[26000] -> 52[4000] [receive] via NET/IB/0 comm 0x2b0eb4000ab0 nRanks 96 f14r2n15:32396:3203 [0] NCCL INFO Channel 00/0 : 64[4000] -> 0[4000] [send] via NET/IB/0 comm 0x2afd94000ab0 nRanks 96 f14r3n00:20870:23421 [0] NCCL INFO Channel 00/0 : 89[26000] -> 84[4000] [receive] via NET/IB/0 comm 0x2b4d6c000ab0 nRanks 96 f14r2n04:3628:6963 [0] NCCL INFO Channel 00/0 : 25[26000] -> 20[4000] [receive] via NET/IB/0 comm 0x2ac1bc000ab0 nRanks 96 f14r2n03:27606:30913 [0] NCCL INFO Channel 00/0 : 33[26000] -> 16[4000] [receive] via NET/IB/0 comm 0x2ae9e4000ab0 nRanks 96 f14r2n07:7791:10497 [0] NCCL INFO Channel 00/0 : 32[4000] -> 65[26000] [send] via NET/IB/0 comm 0x2bab98000ab0 nRanks 96 f14r2n11:16952:20220 [0] NCCL INFO Channel 00/0 : 48[4000] -> 32[4000] [send] via NET/IB/0 comm 0x2b728c000ab0 nRanks 96 f14r2n07:7790:10503 [1] NCCL INFO Channel 00/0 : 33[26000] -> 16[4000] [send] via NET/IB/0 comm 0x2b01c8000ab0 nRanks 96 f14r2n19:10613:13379 [0] NCCL INFO Channel 00/0 : 80[4000] -> 64[4000] [send] via NET/IB/0 comm 0x2b9044000ab0 nRanks 96 f14r2n02:18587:21776 [0] NCCL INFO Channel 01/0 : 28[4000] -> 12[4000] [receive] via NET/IB/0 comm 0x2b52b8000ab0 nRanks 96 f14r2n10:499:3715 [0] NCCL INFO Channel 01/0 : 60[4000] -> 44[4000] [receive] via NET/IB/0 comm 0x2b772c000ab0 nRanks 96 f14r2n01:16211:19154 [0] NCCL INFO Channel 00/0 : 12[4000] -> 8[4000] [receive] via NET/IB/0 comm 0x2aff58000ab0 nRanks 96 f14r2n09:2438:5948 [0] NCCL INFO Channel 00/0 : 44[4000] -> 40[4000] [receive] via NET/IB/0 comm 0x2ac80c000ab0 nRanks 96 f14r2n17:14568:17929 [0] NCCL INFO Channel 00/0 : 76[4000] -> 72[4000] [receive] via NET/IB/0 comm 0x2acbd4000ab0 nRanks 96 f14r2n14:4186:7774 [1] NCCL INFO Channel 01/0 : 76[4000] -> 61[26000] [receive] via NET/IB/0 comm 0x2b8980000ab0 nRanks 96 f14r2n18:11304:14586 [0] NCCL INFO Channel 01/0 : 76[4000] -> 61[26000] [send] via NET/IB/0 comm 0x2ab8d0000ab0 nRanks 96 f14r2n14:4184:7772 [0] NCCL INFO Channel 01/0 : 29[26000] -> 60[4000] [receive] via NET/IB/0 comm 0x2b9bcc000ab0 nRanks 96 f14r2n06:8125:10808 [0] NCCL INFO Channel 01/0 : 92[4000] -> 28[4000] [receive] via NET/IB/0 comm 0x2b7f64000ab0 nRanks 96 f14r2n13:20110:23250 [1] NCCL INFO Channel 00 : 57[26000] -> 56[4000] via P2P/IPC comm 0x2b7058000ab0 nRanks 96 f14r2n13:20110:23250 [1] NCCL INFO Channel 01 : 57[26000] -> 56[4000] via P2P/IPC comm 0x2b7058000ab0 nRanks 96 f14r2n05:26239:29360 [1] NCCL INFO Channel 00 : 25[26000] -> 24[4000] via P2P/IPC comm 0x2b48ac000ab0 nRanks 96 f14r2n07:7790:10503 [1] NCCL INFO Channel 00 : 33[26000] -> 32[4000] via P2P/IPC comm 0x2b01c8000ab0 nRanks 96 f14r3n01:7395:10848 [1] NCCL INFO Channel 00 : 89[26000] -> 88[4000] via P2P/IPC comm 0x2b59cc000ab0 nRanks 96 f14r2n05:26239:29360 [1] NCCL INFO Channel 01 : 25[26000] -> 24[4000] via P2P/IPC comm 0x2b48ac000ab0 nRanks 96 f14r2n07:7790:10503 [1] NCCL INFO Channel 01 : 33[26000] -> 32[4000] via P2P/IPC comm 0x2b01c8000ab0 nRanks 96 f14r3n01:7395:10848 [1] NCCL INFO Channel 01 : 89[26000] -> 88[4000] via P2P/IPC comm 0x2b59cc000ab0 nRanks 96 f14r2n13:20107:23246 [2] NCCL INFO Connected all trees comm 0x2bae54000ab0 nRanks 96 busId 43000 f14r2n13:20107:23246 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n13:20107:23246 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n05:26237:29358 [2] NCCL INFO Connected all trees comm 0x2b3418000ab0 nRanks 96 busId 43000 f14r2n07:7789:10505 [2] NCCL INFO Connected all trees comm 0x2b5270000ab0 nRanks 96 busId 43000 f14r2n07:7789:10505 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n07:7789:10505 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n05:26237:29358 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n05:26237:29358 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r3n01:7397:10847 [2] NCCL INFO Connected all trees comm 0x2ac210000ab0 nRanks 96 busId 43000 f14r3n01:7397:10847 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r3n01:7397:10847 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n14:4186:7774 [1] NCCL INFO Channel 00 : 61[26000] -> 60[4000] via P2P/IPC comm 0x2b8980000ab0 nRanks 96 f14r2n14:4186:7774 [1] NCCL INFO Channel 01 : 61[26000] -> 60[4000] via P2P/IPC comm 0x2b8980000ab0 nRanks 96 f14r2n14:4185:7771 [2] NCCL INFO Connected all trees comm 0x2b2b50000ab0 nRanks 96 busId 43000 f14r2n14:4185:7771 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n14:4185:7771 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n15:32396:3203 [0] NCCL INFO Channel 00/0 : 0[4000] -> 64[4000] [receive] via NET/IB/0 comm 0x2afd94000ab0 nRanks 96 f14r2n07:7791:10497 [0] NCCL INFO Channel 00/0 : 65[26000] -> 32[4000] [receive] via NET/IB/0 comm 0x2bab98000ab0 nRanks 96 f14r2n15:32398:3207 [1] NCCL INFO Channel 00/0 : 65[26000] -> 32[4000] [send] via NET/IB/0 comm 0x2b245c000ab0 nRanks 96 f14r2n12:7614:10170 [0] NCCL INFO Channel 01/0 : 52[4000] -> 48[4000] [send] via NET/IB/0 comm 0x2b0eb4000ab0 nRanks 96 f14r3n00:20870:23421 [0] NCCL INFO Channel 01/0 : 84[4000] -> 80[4000] [send] via NET/IB/0 comm 0x2b4d6c000ab0 nRanks 96 f14r2n03:27606:30913 [0] NCCL INFO Channel 00/0 : 24[4000] -> 16[4000] [receive] via NET/IB/0 comm 0x2ae9e4000ab0 nRanks 96 f14r2n04:3628:6963 [0] NCCL INFO Channel 01/0 : 20[4000] -> 16[4000] [send] via NET/IB/0 comm 0x2ac1bc000ab0 nRanks 96 f14r1n19:18664:22332 [0] NCCL INFO Channel 00/0 : 0[4000] -> 64[4000] [send] via NET/IB/0 comm 0x2b09c8000ab0 nRanks 96 f14r2n18:11304:14586 [0] NCCL INFO Channel 01/0 : 76[4000] -> 68[4000] [send] via NET/IB/0 comm 0x2ab8d0000ab0 nRanks 96 f14r2n06:8126:10809 [1] NCCL INFO Channel 01/0 : 60[4000] -> 29[26000] [receive] via NET/IB/0 comm 0x2b48fc000ab0 nRanks 96 f14r3n02:32370:2687 [0] NCCL INFO Channel 01/0 : 28[4000] -> 92[4000] [receive] via NET/IB/0 comm 0x2b1058000ab0 nRanks 96 f14r2n14:4184:7772 [0] NCCL INFO Channel 01/0 : 60[4000] -> 29[26000] [send] via NET/IB/0 comm 0x2b9bcc000ab0 nRanks 96 f14r2n06:8125:10808 [0] NCCL INFO Channel 01/0 : 28[4000] -> 92[4000] [send] via NET/IB/0 comm 0x2b7f64000ab0 nRanks 96 f14r2n15:32398:3207 [1] NCCL INFO Channel 00 : 65[26000] -> 64[4000] via P2P/IPC comm 0x2b245c000ab0 nRanks 96 f14r2n15:32398:3207 [1] NCCL INFO Channel 01 : 65[26000] -> 64[4000] via P2P/IPC comm 0x2b245c000ab0 nRanks 96 f14r2n15:32395:3202 [2] NCCL INFO Connected all trees comm 0x2b9a60000ab0 nRanks 96 busId 43000 f14r2n15:32395:3202 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n15:32395:3202 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n06:8126:10809 [1] NCCL INFO Channel 00 : 29[26000] -> 28[4000] via P2P/IPC comm 0x2b48fc000ab0 nRanks 96 f14r2n06:8126:10809 [1] NCCL INFO Channel 01 : 29[26000] -> 28[4000] via P2P/IPC comm 0x2b48fc000ab0 nRanks 96 f14r2n06:8124:10806 [2] NCCL INFO Connected all trees comm 0x2b16dc000ab0 nRanks 96 busId 43000 f14r2n06:8124:10806 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n06:8124:10806 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n05:26238:29362 [0] NCCL INFO Channel 00/0 : 28[4000] -> 24[4000] [receive] via NET/IB/0 comm 0x2b57c4000ab0 nRanks 96 f14r1n19:18664:22332 [0] NCCL INFO Channel 01/0 : 4[4000] -> 0[4000] [receive] via NET/IB/0 comm 0x2b09c8000ab0 nRanks 96 f14r2n18:11304:14586 [0] NCCL INFO Channel 00/0 : 76[4000] -> 72[4000] [send] via NET/IB/0 comm 0x2ab8d0000ab0 nRanks 96 f14r2n07:7791:10497 [0] NCCL INFO Channel 00/0 : 48[4000] -> 32[4000] [receive] via NET/IB/0 comm 0x2bab98000ab0 nRanks 96 f14r2n03:27606:30913 [0] NCCL INFO Channel 01/0 : 20[4000] -> 16[4000] [receive] via NET/IB/0 comm 0x2ae9e4000ab0 nRanks 96 f14r2n14:4184:7772 [0] NCCL INFO Channel 01/0 : 60[4000] -> 44[4000] [send] via NET/IB/0 comm 0x2b9bcc000ab0 nRanks 96 f14r2n15:32396:3203 [0] NCCL INFO Channel 00/0 : 80[4000] -> 64[4000] [receive] via NET/IB/0 comm 0x2afd94000ab0 nRanks 96 f14r2n06:8125:10808 [0] NCCL INFO Channel 01/0 : 28[4000] -> 12[4000] [send] via NET/IB/0 comm 0x2b7f64000ab0 nRanks 96 f14r2n16:27453:30013 [0] NCCL INFO Channel 00/0 : 73[26000] -> 68[4000] [receive] via NET/IB/0 comm 0x2ba214000ab0 nRanks 96 f14r3n02:32370:2687 [0] NCCL INFO Channel 00/0 : 92[4000] -> 88[4000] [send] via NET/IB/0 comm 0x2b1058000ab0 nRanks 96 f14r2n18:11304:14586 [0] NCCL INFO Connected all trees comm 0x2ab8d0000ab0 nRanks 96 busId 4000 f14r2n18:11306:14587 [1] NCCL INFO Connected all trees comm 0x2b12b4000ab0 nRanks 96 busId 26000 f14r2n18:11304:14586 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n18:11306:14587 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n18:11306:14587 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n18:11304:14586 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n17:14567:17925 [1] NCCL INFO Channel 00 : 73[26000] -> 72[4000] via P2P/IPC comm 0x2b0d54000ab0 nRanks 96 f14r2n17:14567:17925 [1] NCCL INFO Channel 01 : 73[26000] -> 72[4000] via P2P/IPC comm 0x2b0d54000ab0 nRanks 96 f14r2n03:27606:30913 [0] NCCL INFO Connected all trees comm 0x2ae9e4000ab0 nRanks 96 busId 4000 f14r2n03:27606:30913 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n03:27606:30913 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n03:27605:30914 [1] NCCL INFO Connected all trees comm 0x2badec000ab0 nRanks 96 busId 26000 f14r2n03:27605:30914 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n03:27605:30914 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n17:14569:17924 [2] NCCL INFO Connected all trees comm 0x2b9384000ab0 nRanks 96 busId 43000 f14r2n17:14569:17924 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n17:14569:17924 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n11:16952:20220 [0] NCCL INFO Channel 00/0 : 56[4000] -> 48[4000] [receive] via NET/IB/0 comm 0x2b728c000ab0 nRanks 96 f14r2n07:7791:10497 [0] NCCL INFO Channel 01/0 : 36[4000] -> 32[4000] [receive] via NET/IB/0 comm 0x2bab98000ab0 nRanks 96 f14r2n14:4184:7772 [0] NCCL INFO Channel 00/0 : 60[4000] -> 56[4000] [send] via NET/IB/0 comm 0x2b9bcc000ab0 nRanks 96 f14r2n17:14568:17929 [0] NCCL INFO Channel 01/0 : 72[4000] -> 69[26000] [send] via NET/IB/0 comm 0x2acbd4000ab0 nRanks 96 f14r2n19:10613:13379 [0] NCCL INFO Channel 00/0 : 88[4000] -> 80[4000] [receive] via NET/IB/0 comm 0x2b9044000ab0 nRanks 96 f14r2n06:8125:10808 [0] NCCL INFO Channel 00/0 : 28[4000] -> 24[4000] [send] via NET/IB/0 comm 0x2b7f64000ab0 nRanks 96 f14r2n10:499:3715 [0] NCCL INFO Channel 01/0 : 44[4000] -> 36[4000] [send] via NET/IB/0 comm 0x2b772c000ab0 nRanks 96 f14r2n16:27453:30013 [0] NCCL INFO Channel 01/0 : 68[4000] -> 64[4000] [send] via NET/IB/0 comm 0x2ba214000ab0 nRanks 96 f14r2n15:32396:3203 [0] NCCL INFO Channel 01/0 : 68[4000] -> 64[4000] [receive] via NET/IB/0 comm 0x2afd94000ab0 nRanks 96 f14r2n02:18587:21776 [0] NCCL INFO Channel 01/0 : 12[4000] -> 4[4000] [send] via NET/IB/0 comm 0x2b52b8000ab0 nRanks 96 f14r2n17:14568:17929 [0] NCCL INFO Connected all trees comm 0x2acbd4000ab0 nRanks 96 busId 4000 f14r2n17:14568:17929 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n17:14568:17929 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n17:14567:17925 [1] NCCL INFO Connected all trees comm 0x2b0d54000ab0 nRanks 96 busId 26000 f14r2n17:14567:17925 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n17:14567:17925 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n06:8125:10808 [0] NCCL INFO Connected all trees comm 0x2b7f64000ab0 nRanks 96 busId 4000 f14r2n06:8125:10808 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n06:8125:10808 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n06:8126:10809 [1] NCCL INFO Connected all trees comm 0x2b48fc000ab0 nRanks 96 busId 26000 f14r2n06:8126:10809 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n06:8126:10809 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n16:27455:30012 [1] NCCL INFO Channel 00 : 69[26000] -> 68[4000] via P2P/IPC comm 0x2b7a34000ab0 nRanks 96 f14r2n16:27455:30012 [1] NCCL INFO Channel 01 : 69[26000] -> 68[4000] via P2P/IPC comm 0x2b7a34000ab0 nRanks 96 f14r2n16:27453:30013 [0] NCCL INFO Connected all trees comm 0x2ba214000ab0 nRanks 96 busId 4000 f14r2n16:27453:30013 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n16:27453:30013 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n16:27454:30011 [2] NCCL INFO Connected all trees comm 0x2b3674000ab0 nRanks 96 busId 43000 f14r2n16:27454:30011 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n16:27454:30011 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n16:27455:30012 [1] NCCL INFO Connected all trees comm 0x2b7a34000ab0 nRanks 96 busId 26000 f14r2n16:27455:30012 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n16:27455:30012 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n15:32398:3207 [1] NCCL INFO Connected all trees comm 0x2b245c000ab0 nRanks 96 busId 26000 f14r2n15:32396:3203 [0] NCCL INFO Connected all trees comm 0x2afd94000ab0 nRanks 96 busId 4000 f14r2n15:32398:3207 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n15:32398:3207 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n15:32396:3203 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n15:32396:3203 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n13:20108:23249 [0] NCCL INFO Channel 00/0 : 60[4000] -> 56[4000] [receive] via NET/IB/0 comm 0x2b26f4000ab0 nRanks 96 f14r2n11:16952:20220 [0] NCCL INFO Channel 01/0 : 52[4000] -> 48[4000] [receive] via NET/IB/0 comm 0x2b728c000ab0 nRanks 96 f14r3n01:7396:10852 [0] NCCL INFO Channel 00/0 : 92[4000] -> 88[4000] [receive] via NET/IB/0 comm 0x2b177c000ab0 nRanks 96 f14r2n10:499:3715 [0] NCCL INFO Channel 00/0 : 44[4000] -> 40[4000] [send] via NET/IB/0 comm 0x2b772c000ab0 nRanks 96 f14r2n02:18587:21776 [0] NCCL INFO Channel 00/0 : 12[4000] -> 8[4000] [send] via NET/IB/0 comm 0x2b52b8000ab0 nRanks 96 f14r2n05:26238:29362 [0] NCCL INFO Channel 01/0 : 24[4000] -> 21[26000] [send] via NET/IB/0 comm 0x2b57c4000ab0 nRanks 96 f14r2n19:10613:13379 [0] NCCL INFO Channel 01/0 : 84[4000] -> 80[4000] [receive] via NET/IB/0 comm 0x2b9044000ab0 nRanks 96 f14r2n18:11303:14585 [2] NCCL INFO comm 0x2b6a28000ab0 rank 78 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n18:11304:14586 [0] NCCL INFO comm 0x2ab8d0000ab0 rank 76 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n18:11306:14587 [1] NCCL INFO comm 0x2b12b4000ab0 rank 77 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n18:11305:14583 [3] NCCL INFO comm 0x2b8334000ab0 rank 79 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n08:27953:31232 [0] NCCL INFO Channel 00/0 : 41[26000] -> 36[4000] [receive] via NET/IB/0 comm 0x2b6534000ab0 nRanks 96 f14r2n00:27304:29826 [0] NCCL INFO Channel 00/0 : 9[26000] -> 4[4000] [receive] via NET/IB/0 comm 0x2ba47c000ab0 nRanks 96 f14r2n03:27608:30915 [2] NCCL INFO comm 0x2ac810000ab0 rank 18 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n03:27606:30913 [0] NCCL INFO comm 0x2ae9e4000ab0 rank 16 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n03:27607:30911 [3] NCCL INFO comm 0x2ac47c000ab0 rank 19 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n03:27605:30914 [1] NCCL INFO comm 0x2badec000ab0 rank 17 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n14:4184:7772 [0] NCCL INFO Connected all trees comm 0x2b9bcc000ab0 nRanks 96 busId 4000 f14r2n14:4184:7772 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n14:4184:7772 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n14:4186:7774 [1] NCCL INFO Connected all trees comm 0x2b8980000ab0 nRanks 96 busId 26000 f14r2n14:4186:7774 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n14:4186:7774 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r3n02:32370:2687 [0] NCCL INFO Connected all trees comm 0x2b1058000ab0 nRanks 96 busId 4000 f14r3n02:32370:2687 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r3n02:32370:2687 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n10:499:3715 [0] NCCL INFO Connected all trees comm 0x2b772c000ab0 nRanks 96 busId 4000 f14r2n10:499:3715 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n10:499:3715 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r3n02:32369:2684 [1] NCCL INFO Connected all trees comm 0x2ac214000ab0 nRanks 96 busId 26000 f14r3n02:32369:2684 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r3n02:32369:2684 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n10:500:3716 [1] NCCL INFO Connected all trees comm 0x2b0dec000ab0 nRanks 96 busId 26000 f14r2n10:500:3716 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n10:500:3716 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n11:16952:20220 [0] NCCL INFO Connected all trees comm 0x2b728c000ab0 nRanks 96 busId 4000 f14r2n11:16952:20220 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n11:16952:20220 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n11:16954:20219 [1] NCCL INFO Connected all trees comm 0x2b7474000ab0 nRanks 96 busId 26000 f14r2n11:16954:20219 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n11:16954:20219 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n02:18588:21780 [1] NCCL INFO Connected all trees comm 0x2b491c000ab0 nRanks 96 busId 26000 f14r2n02:18587:21776 [0] NCCL INFO Connected all trees comm 0x2b52b8000ab0 nRanks 96 busId 4000 f14r2n02:18588:21780 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n02:18588:21780 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n02:18587:21776 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n02:18587:21776 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n05:26238:29362 [0] NCCL INFO Connected all trees comm 0x2b57c4000ab0 nRanks 96 busId 4000 f14r2n05:26238:29362 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n05:26238:29362 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n05:26239:29360 [1] NCCL INFO Connected all trees comm 0x2b48ac000ab0 nRanks 96 busId 26000 f14r2n05:26239:29360 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n05:26239:29360 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n09:2437:5949 [1] NCCL INFO Channel 00 : 41[26000] -> 40[4000] via P2P/IPC comm 0x2b5ac4000ab0 nRanks 96 f14r2n09:2437:5949 [1] NCCL INFO Channel 01 : 41[26000] -> 40[4000] via P2P/IPC comm 0x2b5ac4000ab0 nRanks 96 f14r2n04:3629:6961 [1] NCCL INFO Channel 00 : 21[26000] -> 20[4000] via P2P/IPC comm 0x2ae6b4000ab0 nRanks 96 f14r2n04:3629:6961 [1] NCCL INFO Channel 01 : 21[26000] -> 20[4000] via P2P/IPC comm 0x2ae6b4000ab0 nRanks 96 f14r2n01:16208:19153 [1] NCCL INFO Channel 00 : 9[26000] -> 8[4000] via P2P/IPC comm 0x2b5610000ab0 nRanks 96 f14r2n01:16208:19153 [1] NCCL INFO Channel 01 : 9[26000] -> 8[4000] via P2P/IPC comm 0x2b5610000ab0 nRanks 96 f14r2n04:3628:6963 [0] NCCL INFO Connected all trees comm 0x2ac1bc000ab0 nRanks 96 busId 4000 f14r2n04:3628:6963 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n04:3628:6963 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n09:2439:5946 [2] NCCL INFO Connected all trees comm 0x2b6820000ab0 nRanks 96 busId 43000 f14r2n09:2439:5946 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n09:2439:5946 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n04:3630:6960 [2] NCCL INFO Connected all trees comm 0x2b0d7c000ab0 nRanks 96 busId 43000 f14r2n04:3629:6961 [1] NCCL INFO Connected all trees comm 0x2ae6b4000ab0 nRanks 96 busId 26000 f14r2n04:3629:6961 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n04:3630:6960 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n04:3630:6960 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n04:3629:6961 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n19:10613:13379 [0] NCCL INFO Connected all trees comm 0x2b9044000ab0 nRanks 96 busId 4000 f14r2n19:10613:13379 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n19:10613:13379 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n19:10614:13374 [1] NCCL INFO Connected all trees comm 0x2b3c14000ab0 nRanks 96 busId 26000 f14r2n19:10614:13374 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n19:10614:13374 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n01:16209:19158 [2] NCCL INFO Connected all trees comm 0x2b4a28000ab0 nRanks 96 busId 43000 f14r2n01:16209:19158 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n01:16209:19158 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n13:20108:23249 [0] NCCL INFO Channel 01/0 : 56[4000] -> 53[26000] [send] via NET/IB/0 comm 0x2b26f4000ab0 nRanks 96 f14r3n01:7396:10852 [0] NCCL INFO Channel 01/0 : 88[4000] -> 85[26000] [send] via NET/IB/0 comm 0x2b177c000ab0 nRanks 96 f14r2n09:2438:5948 [0] NCCL INFO Channel 01/0 : 40[4000] -> 37[26000] [send] via NET/IB/0 comm 0x2ac80c000ab0 nRanks 96 f14r2n01:16211:19154 [0] NCCL INFO Channel 01/0 : 8[4000] -> 5[26000] [send] via NET/IB/0 comm 0x2aff58000ab0 nRanks 96 f14r2n17:14568:17929 [0] NCCL INFO comm 0x2acbd4000ab0 rank 72 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n17:14569:17924 [2] NCCL INFO comm 0x2b9384000ab0 rank 74 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n17:14567:17925 [1] NCCL INFO comm 0x2b0d54000ab0 rank 73 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n08:27953:31232 [0] NCCL INFO Channel 01/0 : 36[4000] -> 32[4000] [send] via NET/IB/0 comm 0x2b6534000ab0 nRanks 96 f14r2n17:14570:17928 [3] NCCL INFO comm 0x2bad58000ab0 rank 75 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n06:8125:10808 [0] NCCL INFO comm 0x2b7f64000ab0 rank 28 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n06:8124:10806 [2] NCCL INFO comm 0x2b16dc000ab0 rank 30 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n00:27304:29826 [0] NCCL INFO Channel 01/0 : 4[4000] -> 0[4000] [send] via NET/IB/0 comm 0x2ba47c000ab0 nRanks 96 f14r2n06:8126:10809 [1] NCCL INFO comm 0x2b48fc000ab0 rank 29 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n16:27452:30017 [3] NCCL INFO comm 0x2b6524000ab0 rank 71 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n16:27455:30012 [1] NCCL INFO comm 0x2b7a34000ab0 rank 69 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n16:27454:30011 [2] NCCL INFO comm 0x2b3674000ab0 rank 70 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n15:32395:3202 [2] NCCL INFO comm 0x2b9a60000ab0 rank 66 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n15:32398:3207 [1] NCCL INFO comm 0x2b245c000ab0 rank 65 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n15:32397:3205 [3] NCCL INFO comm 0x2b0b30000ab0 rank 67 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n15:32396:3203 [0] NCCL INFO comm 0x2afd94000ab0 rank 64 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n06:8123:10805 [3] NCCL INFO comm 0x2af5d4000ab0 rank 31 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n16:27453:30013 [0] NCCL INFO comm 0x2ba214000ab0 rank 68 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n13:20108:23249 [0] NCCL INFO Connected all trees comm 0x2b26f4000ab0 nRanks 96 busId 4000 f14r2n13:20108:23249 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n13:20108:23249 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n13:20110:23250 [1] NCCL INFO Connected all trees comm 0x2b7058000ab0 nRanks 96 busId 26000 f14r2n13:20110:23250 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n13:20110:23250 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n12:7612:10171 [1] NCCL INFO Channel 00 : 53[26000] -> 52[4000] via P2P/IPC comm 0x2b0cdc000ab0 nRanks 96 f14r2n12:7612:10171 [1] NCCL INFO Channel 01 : 53[26000] -> 52[4000] via P2P/IPC comm 0x2b0cdc000ab0 nRanks 96 f14r2n12:7614:10170 [0] NCCL INFO Connected all trees comm 0x2b0eb4000ab0 nRanks 96 busId 4000 f14r2n12:7614:10170 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n12:7614:10170 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r3n01:7396:10852 [0] NCCL INFO Connected all trees comm 0x2b177c000ab0 nRanks 96 busId 4000 f14r2n12:7612:10171 [1] NCCL INFO Connected all trees comm 0x2b0cdc000ab0 nRanks 96 busId 26000 f14r3n01:7396:10852 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r3n01:7396:10852 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n12:7612:10171 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n12:7612:10171 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r3n01:7395:10848 [1] NCCL INFO Connected all trees comm 0x2b59cc000ab0 nRanks 96 busId 26000 f14r2n12:7613:10167 [2] NCCL INFO Connected all trees comm 0x2b5bbc000ab0 nRanks 96 busId 43000 f14r2n12:7613:10167 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r3n01:7395:10848 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n12:7613:10167 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r3n01:7395:10848 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n09:2438:5948 [0] NCCL INFO Connected all trees comm 0x2ac80c000ab0 nRanks 96 busId 4000 f14r2n09:2438:5948 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n09:2438:5948 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r3n00:20873:23424 [1] NCCL INFO Channel 00 : 85[26000] -> 84[4000] via P2P/IPC comm 0x2aff60000ab0 nRanks 96 f14r3n00:20873:23424 [1] NCCL INFO Channel 01 : 85[26000] -> 84[4000] via P2P/IPC comm 0x2aff60000ab0 nRanks 96 f14r2n09:2437:5949 [1] NCCL INFO Connected all trees comm 0x2b5ac4000ab0 nRanks 96 busId 26000 f14r2n09:2437:5949 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n09:2437:5949 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n01:16211:19154 [0] NCCL INFO Connected all trees comm 0x2aff58000ab0 nRanks 96 busId 4000 f14r2n01:16211:19154 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n01:16211:19154 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n08:27952:31231 [1] NCCL INFO Channel 00 : 37[26000] -> 36[4000] via P2P/IPC comm 0x2b1f80000ab0 nRanks 96 f14r2n01:16208:19153 [1] NCCL INFO Connected all trees comm 0x2b5610000ab0 nRanks 96 busId 26000 f14r2n01:16208:19153 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n01:16208:19153 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r3n00:20870:23421 [0] NCCL INFO Connected all trees comm 0x2b4d6c000ab0 nRanks 96 busId 4000 f14r3n00:20870:23421 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r3n00:20870:23421 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n08:27952:31231 [1] NCCL INFO Channel 01 : 37[26000] -> 36[4000] via P2P/IPC comm 0x2b1f80000ab0 nRanks 96 f14r3n00:20873:23424 [1] NCCL INFO Connected all trees comm 0x2aff60000ab0 nRanks 96 busId 26000 f14r3n00:20873:23424 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r3n00:20873:23424 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r3n00:20872:23420 [2] NCCL INFO Connected all trees comm 0x2b3600000ab0 nRanks 96 busId 43000 f14r3n00:20872:23420 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r3n00:20872:23420 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n00:27303:29827 [1] NCCL INFO Channel 00 : 5[26000] -> 4[4000] via P2P/IPC comm 0x2b5364000ab0 nRanks 96 f14r2n00:27303:29827 [1] NCCL INFO Channel 01 : 5[26000] -> 4[4000] via P2P/IPC comm 0x2b5364000ab0 nRanks 96 f14r2n08:27953:31232 [0] NCCL INFO Connected all trees comm 0x2b6534000ab0 nRanks 96 busId 4000 f14r2n08:27953:31232 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n08:27953:31232 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n08:27954:31230 [2] NCCL INFO Connected all trees comm 0x2ae6a0000ab0 nRanks 96 busId 43000 f14r2n08:27952:31231 [1] NCCL INFO Connected all trees comm 0x2b1f80000ab0 nRanks 96 busId 26000 f14r2n08:27954:31230 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n08:27954:31230 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n08:27952:31231 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n08:27952:31231 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n00:27304:29826 [0] NCCL INFO Connected all trees comm 0x2ba47c000ab0 nRanks 96 busId 4000 f14r2n00:27304:29826 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n00:27304:29826 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n00:27302:29830 [2] NCCL INFO Connected all trees comm 0x2ba3c8000ab0 nRanks 96 busId 43000 f14r2n00:27302:29830 [2] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n00:27302:29830 [2] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n00:27303:29827 [1] NCCL INFO Connected all trees comm 0x2b5364000ab0 nRanks 96 busId 26000 f14r2n00:27303:29827 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n00:27303:29827 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n07:7791:10497 [0] NCCL INFO Connected all trees comm 0x2bab98000ab0 nRanks 96 busId 4000 f14r2n07:7791:10497 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n07:7791:10497 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n07:7790:10503 [1] NCCL INFO Connected all trees comm 0x2b01c8000ab0 nRanks 96 busId 26000 f14r2n07:7790:10503 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r2n07:7790:10503 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r1n19:18664:22332 [0] NCCL INFO Connected all trees comm 0x2b09c8000ab0 nRanks 96 busId 4000 f14r1n19:18664:22332 [0] NCCL INFO Using tuning table 0 with LL128 disabled f14r1n19:18664:22332 [0] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r1n19:18664:22332 [0] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r1n19:18663:22337 [1] NCCL INFO Connected all trees comm 0x2b6dac000ab0 nRanks 96 busId 26000 f14r1n19:18663:22337 [1] NCCL INFO threadThresholds 8/8/64 | 768/8/64 | 8/8/256 f14r1n19:18663:22337 [1] NCCL INFO 2 coll channels, 2 p2p channels, 1 p2p channels per peer f14r2n14:4185:7771 [2] NCCL INFO comm 0x2b2b50000ab0 rank 62 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n14:4186:7774 [1] NCCL INFO comm 0x2b8980000ab0 rank 61 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n14:4183:7769 [3] NCCL INFO comm 0x2b2eb0000ab0 rank 63 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r3n02:32367:2683 [2] NCCL INFO comm 0x2ac7f0000ab0 rank 94 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r3n02:32370:2687 [0] NCCL INFO comm 0x2b1058000ab0 rank 92 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n10:498:3713 [2] NCCL INFO comm 0x2addbc000ab0 rank 46 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n10:499:3715 [0] NCCL INFO comm 0x2b772c000ab0 rank 44 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n11:16951:20218 [2] NCCL INFO comm 0x2ab858000ab0 rank 50 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r3n02:32369:2684 [1] NCCL INFO comm 0x2ac214000ab0 rank 93 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r3n02:32368:2681 [3] NCCL INFO comm 0x2ac190000ab0 rank 95 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n10:500:3716 [1] NCCL INFO comm 0x2b0dec000ab0 rank 45 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n10:502:3712 [3] NCCL INFO comm 0x2af0a8000ab0 rank 47 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n05:26237:29358 [2] NCCL INFO comm 0x2b3418000ab0 rank 26 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n05:26238:29362 [0] NCCL INFO comm 0x2b57c4000ab0 rank 24 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n02:18587:21776 [0] NCCL INFO comm 0x2b52b8000ab0 rank 12 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n02:18586:21777 [2] NCCL INFO comm 0x2b4838000ab0 rank 14 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n05:26239:29360 [1] NCCL INFO comm 0x2b48ac000ab0 rank 25 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n05:26240:29359 [3] NCCL INFO comm 0x2b45e4000ab0 rank 27 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n02:18589:21774 [3] NCCL INFO comm 0x2b666c000ab0 rank 15 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n02:18588:21780 [1] NCCL INFO comm 0x2b491c000ab0 rank 13 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n14:4184:7772 [0] NCCL INFO comm 0x2b9bcc000ab0 rank 60 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n19:10615:13378 [2] NCCL INFO comm 0x2b17c0000ab0 rank 82 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n04:3627:6959 [3] NCCL INFO comm 0x2afafc000ab0 rank 23 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n19:10614:13374 [1] NCCL INFO comm 0x2b3c14000ab0 rank 81 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n04:3628:6963 [0] NCCL INFO comm 0x2ac1bc000ab0 rank 20 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n04:3630:6960 [2] NCCL INFO comm 0x2b0d7c000ab0 rank 22 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n19:10612:13376 [3] NCCL INFO comm 0x2b3168000ab0 rank 83 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n11:16952:20220 [0] NCCL INFO comm 0x2b728c000ab0 rank 48 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n11:16954:20219 [1] NCCL INFO comm 0x2b7474000ab0 rank 49 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n11:16953:20216 [3] NCCL INFO comm 0x2b9ad8000ab0 rank 51 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n19:10613:13379 [0] NCCL INFO comm 0x2b9044000ab0 rank 80 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n04:3629:6961 [1] NCCL INFO comm 0x2ae6b4000ab0 rank 21 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n13:20108:23249 [0] NCCL INFO comm 0x2b26f4000ab0 rank 56 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n13:20107:23246 [2] NCCL INFO comm 0x2bae54000ab0 rank 58 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n13:20109:23245 [3] NCCL INFO comm 0x2b5ff8000ab0 rank 59 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n13:20110:23250 [1] NCCL INFO comm 0x2b7058000ab0 rank 57 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n12:7612:10171 [1] NCCL INFO comm 0x2b0cdc000ab0 rank 53 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n12:7615:10166 [3] NCCL INFO comm 0x2adaf0000ab0 rank 55 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r3n01:7397:10847 [2] NCCL INFO comm 0x2ac210000ab0 rank 90 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r3n01:7395:10848 [1] NCCL INFO comm 0x2b59cc000ab0 rank 89 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r3n01:7394:10851 [3] NCCL INFO comm 0x2aeea8000ab0 rank 91 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n09:2438:5948 [0] NCCL INFO comm 0x2ac80c000ab0 rank 40 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n09:2440:5947 [3] NCCL INFO comm 0x2b9ce4000ab0 rank 43 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n01:16211:19154 [0] NCCL INFO comm 0x2aff58000ab0 rank 8 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n01:16209:19158 [2] NCCL INFO comm 0x2b4a28000ab0 rank 10 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n01:16208:19153 [1] NCCL INFO comm 0x2b5610000ab0 rank 9 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n01:16210:19157 [3] NCCL INFO comm 0x2b3834000ab0 rank 11 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r3n00:20871:23422 [3] NCCL INFO comm 0x2b4598000ab0 rank 87 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n08:27952:31231 [1] NCCL INFO comm 0x2b1f80000ab0 rank 37 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n08:27955:31236 [3] NCCL INFO comm 0x2b2a24000ab0 rank 39 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n08:27954:31230 [2] NCCL INFO comm 0x2ae6a0000ab0 rank 38 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n00:27304:29826 [0] NCCL INFO comm 0x2ba47c000ab0 rank 4 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n00:27302:29830 [2] NCCL INFO comm 0x2ba3c8000ab0 rank 6 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n07:7789:10505 [2] NCCL INFO comm 0x2b5270000ab0 rank 34 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n07:7790:10503 [1] NCCL INFO comm 0x2b01c8000ab0 rank 33 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r1n19:18664:22332 [0] NCCL INFO comm 0x2b09c8000ab0 rank 0 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n07:7788:10495 [3] NCCL INFO comm 0x2afce8000ab0 rank 35 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r1n19:18663:22337 [1] NCCL INFO comm 0x2b6dac000ab0 rank 1 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r1n19:18666:22335 [3] NCCL INFO comm 0x2b34f4000ab0 rank 3 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r3n01:7396:10852 [0] NCCL INFO comm 0x2b177c000ab0 rank 88 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n12:7614:10170 [0] NCCL INFO comm 0x2b0eb4000ab0 rank 52 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n09:2439:5946 [2] NCCL INFO comm 0x2b6820000ab0 rank 42 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n09:2437:5949 [1] NCCL INFO comm 0x2b5ac4000ab0 rank 41 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r3n00:20873:23424 [1] NCCL INFO comm 0x2aff60000ab0 rank 85 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r3n00:20872:23420 [2] NCCL INFO comm 0x2b3600000ab0 rank 86 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r3n00:20870:23421 [0] NCCL INFO comm 0x2b4d6c000ab0 rank 84 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n08:27953:31232 [0] NCCL INFO comm 0x2b6534000ab0 rank 36 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n00:27303:29827 [1] NCCL INFO comm 0x2b5364000ab0 rank 5 nranks 96 cudaDev 1 busId 26000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n00:27305:29821 [3] NCCL INFO comm 0x2b08e4000ab0 rank 7 nranks 96 cudaDev 3 busId 63000 localSize 404 used 21107856 bytes - Init COMPLETE f14r2n12:7613:10167 [2] NCCL INFO comm 0x2b5bbc000ab0 rank 54 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE f14r2n07:7791:10497 [0] NCCL INFO comm 0x2bab98000ab0 rank 32 nranks 96 cudaDev 0 busId 4000 localSize 404 used 21107856 bytes - Init COMPLETE f14r1n19:18665:22334 [2] NCCL INFO comm 0x2aeba0000ab0 rank 2 nranks 96 cudaDev 2 busId 43000 localSize 404 used 37885072 bytes - Init COMPLETE Parameter Offload: Total persistent parameters: 790528 in 129 params {'loss': 2.6326, 'learning_rate': 1e-05, 'epoch': 0.01} {'loss': 2.6326, 'learning_rate': 1e-05, 'epoch': 0.01} {'loss': 2.6326, 'learning_rate': 1e-05, 'epoch': 0.01} {'loss': 2.6326, 'learning_rate': 1e-05, 'epoch': 0.01} {'loss': 2.6326, 'learning_rate': 1e-05, 'epoch': 0.01} {'loss': 2.6326, 'learning_rate': 1e-05, 'epoch': 0.01} {'loss': 2.6326, 'learning_rate': 1e-05, 'epoch': 0.01} {'loss': 2.6326, 'learning_rate': 1e-05, 'epoch': 0.01} {'loss': 2.6326, 'learning_rate': 1e-05, 'epoch': 0.01} {'loss': 2.6326, 'learning_rate': 1e-05, 'epoch': 0.01} {'loss': 2.6326, 'learning_rate': 1e-05, 'epoch': 0.01} {'loss': 2.6326, 'learning_rate': 1e-05, 'epoch': 0.01} {'loss': 2.6326, 'learning_rate': 1e-05, 'epoch': 0.01} {'loss': 2.6326, 'learning_rate': 1e-05, 'epoch': 0.01} {'loss': 2.6326, 'learning_rate': 1e-05, 'epoch': 0.01} {'loss': 2.6326, 'learning_rate': 1e-05, 'epoch': 0.01} {'loss': 2.6326, 'learning_rate': 1e-05, 'epoch': 0.01} {'loss': 2.6326, 'learning_rate': 1e-05, 'epoch': 0.01} {'loss': 2.6326, 'learning_rate': 1e-05, 'epoch': 0.01} {'loss': 2.6326, 'learning_rate': 1e-05, 'epoch': 0.01} {'loss': 2.6326, 'learning_rate': 1e-05, 'epoch': 0.01} {'loss': 2.6326, 'learning_rate': 1e-05, 'epoch': 0.01} {'loss': 2.6326, 'learning_rate': 1e-05, 'epoch': 0.01} {'loss': 2.6326, 'learning_rate': 1e-05, 'epoch': 0.01} {'loss': 2.5452, 'learning_rate': 1e-05, 'epoch': 0.02} {'loss': 2.5452, 'learning_rate': 1e-05, 'epoch': 0.02} {'loss': 2.5452, 'learning_rate': 1e-05, 'epoch': 0.02} {'loss': 2.5452, 'learning_rate': 1e-05, 'epoch': 0.02} {'loss': 2.5452, 'learning_rate': 1e-05, 'epoch': 0.02} {'loss': 2.5452, 'learning_rate': 1e-05, 'epoch': 0.02} {'loss': 2.5452, 'learning_rate': 1e-05, 'epoch': 0.02} {'loss': 2.5452, 'learning_rate': 1e-05, 'epoch': 0.02} {'loss': 2.5452, 'learning_rate': 1e-05, 'epoch': 0.02} {'loss': 2.5452, 'learning_rate': 1e-05, 'epoch': 0.02} {'loss': 2.5452, 'learning_rate': 1e-05, 'epoch': 0.02} {'loss': 2.5452, 'learning_rate': 1e-05, 'epoch': 0.02} {'loss': 2.5452, 'learning_rate': 1e-05, 'epoch': 0.02} {'loss': 2.5452, 'learning_rate': 1e-05, 'epoch': 0.02} {'loss': 2.5452, 'learning_rate': 1e-05, 'epoch': 0.02} {'loss': 2.5452, 'learning_rate': 1e-05, 'epoch': 0.02} {'loss': 2.5452, 'learning_rate': 1e-05, 'epoch': 0.02} {'loss': 2.5452, 'learning_rate': 1e-05, 'epoch': 0.02} {'loss': 2.5452, 'learning_rate': 1e-05, 'epoch': 0.02} {'loss': 2.5452, 'learning_rate': 1e-05, 'epoch': 0.02} {'loss': 2.5452, 'learning_rate': 1e-05, 'epoch': 0.02} {'loss': 2.5452, 'learning_rate': 1e-05, 'epoch': 0.02} {'loss': 2.5452, 'learning_rate': 1e-05, 'epoch': 0.02} {'loss': 2.5452, 'learning_rate': 1e-05, 'epoch': 0.02} {'loss': 2.6242, 'learning_rate': 1e-05, 'epoch': 0.03} {'loss': 2.6242, 'learning_rate': 1e-05, 'epoch': 0.03} {'loss': 2.6242, 'learning_rate': 1e-05, 'epoch': 0.03} {'loss': 2.6242, 'learning_rate': 1e-05, 'epoch': 0.03} {'loss': 2.6242, 'learning_rate': 1e-05, 'epoch': 0.03} {'loss': 2.6242, 'learning_rate': 1e-05, 'epoch': 0.03} {'loss': 2.6242, 'learning_rate': 1e-05, 'epoch': 0.03} {'loss': 2.6242, 'learning_rate': 1e-05, 'epoch': 0.03} {'loss': 2.6242, 'learning_rate': 1e-05, 'epoch': 0.03} {'loss': 2.6242, 'learning_rate': 1e-05, 'epoch': 0.03} {'loss': 2.6242, 'learning_rate': 1e-05, 'epoch': 0.03} {'loss': 2.6242, 'learning_rate': 1e-05, 'epoch': 0.03} {'loss': 2.6242, 'learning_rate': 1e-05, 'epoch': 0.03} {'loss': 2.6242, 'learning_rate': 1e-05, 'epoch': 0.03} {'loss': 2.6242, 'learning_rate': 1e-05, 'epoch': 0.03} {'loss': 2.6242, 'learning_rate': 1e-05, 'epoch': 0.03} {'loss': 2.6242, 'learning_rate': 1e-05, 'epoch': 0.03} {'loss': 2.6242, 'learning_rate': 1e-05, 'epoch': 0.03} {'loss': 2.6242, 'learning_rate': 1e-05, 'epoch': 0.03} {'loss': 2.6242, 'learning_rate': 1e-05, 'epoch': 0.03} {'loss': 2.6242, 'learning_rate': 1e-05, 'epoch': 0.03} {'loss': 2.6242, 'learning_rate': 1e-05, 'epoch': 0.03} {'loss': 2.6242, 'learning_rate': 1e-05, 'epoch': 0.03} {'loss': 2.6242, 'learning_rate': 1e-05, 'epoch': 0.03} {'loss': 2.6705, 'learning_rate': 1e-05, 'epoch': 0.04} {'loss': 2.6705, 'learning_rate': 1e-05, 'epoch': 0.04} {'loss': 2.6705, 'learning_rate': 1e-05, 'epoch': 0.04} {'loss': 2.6705, 'learning_rate': 1e-05, 'epoch': 0.04} {'loss': 2.6705, 'learning_rate': 1e-05, 'epoch': 0.04} {'loss': 2.6705, 'learning_rate': 1e-05, 'epoch': 0.04} {'loss': 2.6705, 'learning_rate': 1e-05, 'epoch': 0.04} {'loss': 2.6705, 'learning_rate': 1e-05, 'epoch': 0.04} {'loss': 2.6705, 'learning_rate': 1e-05, 'epoch': 0.04} {'loss': 2.6705, 'learning_rate': 1e-05, 'epoch': 0.04} {'loss': 2.6705, 'learning_rate': 1e-05, 'epoch': 0.04} {'loss': 2.6705, 'learning_rate': 1e-05, 'epoch': 0.04} {'loss': 2.6705, 'learning_rate': 1e-05, 'epoch': 0.04} {'loss': 2.6705, 'learning_rate': 1e-05, 'epoch': 0.04} {'loss': 2.6705, 'learning_rate': 1e-05, 'epoch': 0.04} {'loss': 2.6705, 'learning_rate': 1e-05, 'epoch': 0.04} {'loss': 2.6705, 'learning_rate': 1e-05, 'epoch': 0.04} {'loss': 2.6705, 'learning_rate': 1e-05, 'epoch': 0.04} {'loss': 2.6705, 'learning_rate': 1e-05, 'epoch': 0.04} {'loss': 2.6705, 'learning_rate': 1e-05, 'epoch': 0.04} {'loss': 2.6705, 'learning_rate': 1e-05, 'epoch': 0.04} {'loss': 2.6705, 'learning_rate': 1e-05, 'epoch': 0.04} {'loss': 2.6705, 'learning_rate': 1e-05, 'epoch': 0.04} {'loss': 2.6705, 'learning_rate': 1e-05, 'epoch': 0.04} {'loss': 2.5831, 'learning_rate': 1e-05, 'epoch': 0.05} {'loss': 2.5831, 'learning_rate': 1e-05, 'epoch': 0.05} {'loss': 2.5831, 'learning_rate': 1e-05, 'epoch': 0.05} {'loss': 2.5831, 'learning_rate': 1e-05, 'epoch': 0.05} {'loss': 2.5831, 'learning_rate': 1e-05, 'epoch': 0.05} {'loss': 2.5831, 'learning_rate': 1e-05, 'epoch': 0.05} {'loss': 2.5831, 'learning_rate': 1e-05, 'epoch': 0.05} {'loss': 2.5831, 'learning_rate': 1e-05, 'epoch': 0.05} {'loss': 2.5831, 'learning_rate': 1e-05, 'epoch': 0.05} {'loss': 2.5831, 'learning_rate': 1e-05, 'epoch': 0.05} {'loss': 2.5831, 'learning_rate': 1e-05, 'epoch': 0.05} {'loss': 2.5831, 'learning_rate': 1e-05, 'epoch': 0.05} {'loss': 2.5831, 'learning_rate': 1e-05, 'epoch': 0.05} {'loss': 2.5831, 'learning_rate': 1e-05, 'epoch': 0.05} {'loss': 2.5831, 'learning_rate': 1e-05, 'epoch': 0.05} {'loss': 2.5831, 'learning_rate': 1e-05, 'epoch': 0.05} {'loss': 2.5831, 'learning_rate': 1e-05, 'epoch': 0.05} {'loss': 2.5831, 'learning_rate': 1e-05, 'epoch': 0.05} {'loss': 2.5831, 'learning_rate': 1e-05, 'epoch': 0.05} {'loss': 2.5831, 'learning_rate': 1e-05, 'epoch': 0.05} {'loss': 2.5831, 'learning_rate': 1e-05, 'epoch': 0.05} {'loss': 2.5831, 'learning_rate': 1e-05, 'epoch': 0.05} {'loss': 2.5831, 'learning_rate': 1e-05, 'epoch': 0.05} {'loss': 2.5831, 'learning_rate': 1e-05, 'epoch': 0.05} {'loss': 2.6016, 'learning_rate': 1e-05, 'epoch': 0.06} {'loss': 2.6016, 'learning_rate': 1e-05, 'epoch': 0.06} {'loss': 2.6016, 'learning_rate': 1e-05, 'epoch': 0.06} {'loss': 2.6016, 'learning_rate': 1e-05, 'epoch': 0.06} {'loss': 2.6016, 'learning_rate': 1e-05, 'epoch': 0.06} {'loss': 2.6016, 'learning_rate': 1e-05, 'epoch': 0.06} {'loss': 2.6016, 'learning_rate': 1e-05, 'epoch': 0.06} {'loss': 2.6016, 'learning_rate': 1e-05, 'epoch': 0.06} {'loss': 2.6016, 'learning_rate': 1e-05, 'epoch': 0.06} {'loss': 2.6016, 'learning_rate': 1e-05, 'epoch': 0.06} {'loss': 2.6016, 'learning_rate': 1e-05, 'epoch': 0.06} {'loss': 2.6016, 'learning_rate': 1e-05, 'epoch': 0.06} {'loss': 2.6016, 'learning_rate': 1e-05, 'epoch': 0.06} {'loss': 2.6016, 'learning_rate': 1e-05, 'epoch': 0.06} {'loss': 2.6016, 'learning_rate': 1e-05, 'epoch': 0.06} {'loss': 2.6016, 'learning_rate': 1e-05, 'epoch': 0.06} {'loss': 2.6016, 'learning_rate': 1e-05, 'epoch': 0.06} {'loss': 2.6016, 'learning_rate': 1e-05, 'epoch': 0.06} {'loss': 2.6016, 'learning_rate': 1e-05, 'epoch': 0.06} {'loss': 2.6016, 'learning_rate': 1e-05, 'epoch': 0.06} {'loss': 2.6016, 'learning_rate': 1e-05, 'epoch': 0.06} {'loss': 2.6016, 'learning_rate': 1e-05, 'epoch': 0.06} {'loss': 2.6016, 'learning_rate': 1e-05, 'epoch': 0.06} {'loss': 2.6016, 'learning_rate': 1e-05, 'epoch': 0.06} {'loss': 2.5952, 'learning_rate': 1e-05, 'epoch': 0.07} {'loss': 2.5952, 'learning_rate': 1e-05, 'epoch': 0.07} {'loss': 2.5952, 'learning_rate': 1e-05, 'epoch': 0.07} {'loss': 2.5952, 'learning_rate': 1e-05, 'epoch': 0.07} {'loss': 2.5952, 'learning_rate': 1e-05, 'epoch': 0.07} {'loss': 2.5952, 'learning_rate': 1e-05, 'epoch': 0.07} {'loss': 2.5952, 'learning_rate': 1e-05, 'epoch': 0.07} {'loss': 2.5952, 'learning_rate': 1e-05, 'epoch': 0.07} {'loss': 2.5952, 'learning_rate': 1e-05, 'epoch': 0.07} {'loss': 2.5952, 'learning_rate': 1e-05, 'epoch': 0.07} {'loss': 2.5952, 'learning_rate': 1e-05, 'epoch': 0.07} {'loss': 2.5952, 'learning_rate': 1e-05, 'epoch': 0.07} {'loss': 2.5952, 'learning_rate': 1e-05, 'epoch': 0.07} {'loss': 2.5952, 'learning_rate': 1e-05, 'epoch': 0.07} {'loss': 2.5952, 'learning_rate': 1e-05, 'epoch': 0.07} {'loss': 2.5952, 'learning_rate': 1e-05, 'epoch': 0.07} {'loss': 2.5952, 'learning_rate': 1e-05, 'epoch': 0.07} {'loss': 2.5952, 'learning_rate': 1e-05, 'epoch': 0.07} {'loss': 2.5952, 'learning_rate': 1e-05, 'epoch': 0.07} {'loss': 2.5952, 'learning_rate': 1e-05, 'epoch': 0.07} {'loss': 2.5952, 'learning_rate': 1e-05, 'epoch': 0.07} {'loss': 2.5952, 'learning_rate': 1e-05, 'epoch': 0.07} {'loss': 2.5952, 'learning_rate': 1e-05, 'epoch': 0.07} {'loss': 2.5952, 'learning_rate': 1e-05, 'epoch': 0.07} {'loss': 2.7224, 'learning_rate': 1e-05, 'epoch': 0.08} {'loss': 2.7224, 'learning_rate': 1e-05, 'epoch': 0.08} {'loss': 2.7224, 'learning_rate': 1e-05, 'epoch': 0.08} {'loss': 2.7224, 'learning_rate': 1e-05, 'epoch': 0.08} {'loss': 2.7224, 'learning_rate': 1e-05, 'epoch': 0.08} {'loss': 2.7224, 'learning_rate': 1e-05, 'epoch': 0.08} {'loss': 2.7224, 'learning_rate': 1e-05, 'epoch': 0.08} {'loss': 2.7224, 'learning_rate': 1e-05, 'epoch': 0.08} {'loss': 2.7224, 'learning_rate': 1e-05, 'epoch': 0.08} {'loss': 2.7224, 'learning_rate': 1e-05, 'epoch': 0.08} {'loss': 2.7224, 'learning_rate': 1e-05, 'epoch': 0.08} {'loss': 2.7224, 'learning_rate': 1e-05, 'epoch': 0.08} {'loss': 2.7224, 'learning_rate': 1e-05, 'epoch': 0.08} {'loss': 2.7224, 'learning_rate': 1e-05, 'epoch': 0.08} {'loss': 2.7224, 'learning_rate': 1e-05, 'epoch': 0.08} {'loss': 2.7224, 'learning_rate': 1e-05, 'epoch': 0.08} {'loss': 2.7224, 'learning_rate': 1e-05, 'epoch': 0.08} {'loss': 2.7224, 'learning_rate': 1e-05, 'epoch': 0.08} {'loss': 2.7224, 'learning_rate': 1e-05, 'epoch': 0.08} {'loss': 2.7224, 'learning_rate': 1e-05, 'epoch': 0.08} {'loss': 2.7224, 'learning_rate': 1e-05, 'epoch': 0.08} {'loss': 2.7224, 'learning_rate': 1e-05, 'epoch': 0.08} {'loss': 2.7224, 'learning_rate': 1e-05, 'epoch': 0.08} {'loss': 2.7224, 'learning_rate': 1e-05, 'epoch': 0.08} {'loss': 2.7286, 'learning_rate': 1e-05, 'epoch': 0.09} {'loss': 2.7286, 'learning_rate': 1e-05, 'epoch': 0.09} {'loss': 2.7286, 'learning_rate': 1e-05, 'epoch': 0.09} {'loss': 2.7286, 'learning_rate': 1e-05, 'epoch': 0.09} {'loss': 2.7286, 'learning_rate': 1e-05, 'epoch': 0.09} {'loss': 2.7286, 'learning_rate': 1e-05, 'epoch': 0.09} {'loss': 2.7286, 'learning_rate': 1e-05, 'epoch': 0.09} {'loss': 2.7286, 'learning_rate': 1e-05, 'epoch': 0.09} {'loss': 2.7286, 'learning_rate': 1e-05, 'epoch': 0.09} {'loss': 2.7286, 'learning_rate': 1e-05, 'epoch': 0.09} {'loss': 2.7286, 'learning_rate': 1e-05, 'epoch': 0.09} {'loss': 2.7286, 'learning_rate': 1e-05, 'epoch': 0.09} {'loss': 2.7286, 'learning_rate': 1e-05, 'epoch': 0.09} {'loss': 2.7286, 'learning_rate': 1e-05, 'epoch': 0.09} {'loss': 2.7286, 'learning_rate': 1e-05, 'epoch': 0.09} {'loss': 2.7286, 'learning_rate': 1e-05, 'epoch': 0.09} {'loss': 2.7286, 'learning_rate': 1e-05, 'epoch': 0.09} {'loss': 2.7286, 'learning_rate': 1e-05, 'epoch': 0.09} {'loss': 2.7286, 'learning_rate': 1e-05, 'epoch': 0.09} {'loss': 2.7286, 'learning_rate': 1e-05, 'epoch': 0.09} {'loss': 2.7286, 'learning_rate': 1e-05, 'epoch': 0.09} {'loss': 2.7286, 'learning_rate': 1e-05, 'epoch': 0.09} {'loss': 2.7286, 'learning_rate': 1e-05, 'epoch': 0.09} {'loss': 2.7286, 'learning_rate': 1e-05, 'epoch': 0.09} {'loss': 2.7344, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.7344, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.7344, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.7344, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.7344, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.7344, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.7344, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.7344, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.7344, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.7344, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.7344, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.7344, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.7344, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.7344, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.7344, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.7344, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.7344, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.7344, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.7344, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.7344, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.7344, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.7344, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.7344, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.7344, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.6484, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.6484, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.6484, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.6484, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.6484, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.6484, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.6484, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.6484, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.6484, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.6484, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.6484, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.6484, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.6484, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.6484, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.6484, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.6484, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.6484, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.6484, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.6484, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.6484, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.6484, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.6484, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.6484, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.6484, 'learning_rate': 1e-05, 'epoch': 0.1} {'loss': 2.6567, 'learning_rate': 1e-05, 'epoch': 0.11} {'loss': 2.6567, 'learning_rate': 1e-05, 'epoch': 0.11} {'loss': 2.6567, 'learning_rate': 1e-05, 'epoch': 0.11} {'loss': 2.6567, 'learning_rate': 1e-05, 'epoch': 0.11} {'loss': 2.6567, 'learning_rate': 1e-05, 'epoch': 0.11} {'loss': 2.6567, 'learning_rate': 1e-05, 'epoch': 0.11} {'loss': 2.6567, 'learning_rate': 1e-05, 'epoch': 0.11} {'loss': 2.6567, 'learning_rate': 1e-05, 'epoch': 0.11} {'loss': 2.6567, 'learning_rate': 1e-05, 'epoch': 0.11} {'loss': 2.6567, 'learning_rate': 1e-05, 'epoch': 0.11} {'loss': 2.6567, 'learning_rate': 1e-05, 'epoch': 0.11} {'loss': 2.6567, 'learning_rate': 1e-05, 'epoch': 0.11} {'loss': 2.6567, 'learning_rate': 1e-05, 'epoch': 0.11} {'loss': 2.6567, 'learning_rate': 1e-05, 'epoch': 0.11} {'loss': 2.6567, 'learning_rate': 1e-05, 'epoch': 0.11} {'loss': 2.6567, 'learning_rate': 1e-05, 'epoch': 0.11} {'loss': 2.6567, 'learning_rate': 1e-05, 'epoch': 0.11} {'loss': 2.6567, 'learning_rate': 1e-05, 'epoch': 0.11} {'loss': 2.6567, 'learning_rate': 1e-05, 'epoch': 0.11} {'loss': 2.6567, 'learning_rate': 1e-05, 'epoch': 0.11} {'loss': 2.6567, 'learning_rate': 1e-05, 'epoch': 0.11} {'loss': 2.6567, 'learning_rate': 1e-05, 'epoch': 0.11} {'loss': 2.6567, 'learning_rate': 1e-05, 'epoch': 0.11} {'loss': 2.6567, 'learning_rate': 1e-05, 'epoch': 0.11} {'loss': 2.5977, 'learning_rate': 1e-05, 'epoch': 0.12} {'loss': 2.5977, 'learning_rate': 1e-05, 'epoch': 0.12} {'loss': 2.5977, 'learning_rate': 1e-05, 'epoch': 0.12} {'loss': 2.5977, 'learning_rate': 1e-05, 'epoch': 0.12} {'loss': 2.5977, 'learning_rate': 1e-05, 'epoch': 0.12} {'loss': 2.5977, 'learning_rate': 1e-05, 'epoch': 0.12} {'loss': 2.5977, 'learning_rate': 1e-05, 'epoch': 0.12} {'loss': 2.5977, 'learning_rate': 1e-05, 'epoch': 0.12} {'loss': 2.5977, 'learning_rate': 1e-05, 'epoch': 0.12} {'loss': 2.5977, 'learning_rate': 1e-05, 'epoch': 0.12} {'loss': 2.5977, 'learning_rate': 1e-05, 'epoch': 0.12} {'loss': 2.5977, 'learning_rate': 1e-05, 'epoch': 0.12} {'loss': 2.5977, 'learning_rate': 1e-05, 'epoch': 0.12} {'loss': 2.5977, 'learning_rate': 1e-05, 'epoch': 0.12} {'loss': 2.5977, 'learning_rate': 1e-05, 'epoch': 0.12} {'loss': 2.5977, 'learning_rate': 1e-05, 'epoch': 0.12} {'loss': 2.5977, 'learning_rate': 1e-05, 'epoch': 0.12} {'loss': 2.5977, 'learning_rate': 1e-05, 'epoch': 0.12} {'loss': 2.5977, 'learning_rate': 1e-05, 'epoch': 0.12} {'loss': 2.5977, 'learning_rate': 1e-05, 'epoch': 0.12} {'loss': 2.5977, 'learning_rate': 1e-05, 'epoch': 0.12} {'loss': 2.5977, 'learning_rate': 1e-05, 'epoch': 0.12} {'loss': 2.5977, 'learning_rate': 1e-05, 'epoch': 0.12} {'loss': 2.5977, 'learning_rate': 1e-05, 'epoch': 0.12} {'loss': 2.5899, 'learning_rate': 1e-05, 'epoch': 0.13} {'loss': 2.5899, 'learning_rate': 1e-05, 'epoch': 0.13} {'loss': 2.5899, 'learning_rate': 1e-05, 'epoch': 0.13} {'loss': 2.5899, 'learning_rate': 1e-05, 'epoch': 0.13} {'loss': 2.5899, 'learning_rate': 1e-05, 'epoch': 0.13} {'loss': 2.5899, 'learning_rate': 1e-05, 'epoch': 0.13} {'loss': 2.5899, 'learning_rate': 1e-05, 'epoch': 0.13} {'loss': 2.5899, 'learning_rate': 1e-05, 'epoch': 0.13} {'loss': 2.5899, 'learning_rate': 1e-05, 'epoch': 0.13} {'loss': 2.5899, 'learning_rate': 1e-05, 'epoch': 0.13} {'loss': 2.5899, 'learning_rate': 1e-05, 'epoch': 0.13} {'loss': 2.5899, 'learning_rate': 1e-05, 'epoch': 0.13} {'loss': 2.5899, 'learning_rate': 1e-05, 'epoch': 0.13} {'loss': 2.5899, 'learning_rate': 1e-05, 'epoch': 0.13} {'loss': 2.5899, 'learning_rate': 1e-05, 'epoch': 0.13} {'loss': 2.5899, 'learning_rate': 1e-05, 'epoch': 0.13} {'loss': 2.5899, 'learning_rate': 1e-05, 'epoch': 0.13} {'loss': 2.5899, 'learning_rate': 1e-05, 'epoch': 0.13} {'loss': 2.5899, 'learning_rate': 1e-05, 'epoch': 0.13} {'loss': 2.5899, 'learning_rate': 1e-05, 'epoch': 0.13} {'loss': 2.5899, 'learning_rate': 1e-05, 'epoch': 0.13} {'loss': 2.5899, 'learning_rate': 1e-05, 'epoch': 0.13} {'loss': 2.5899, 'learning_rate': 1e-05, 'epoch': 0.13} {'loss': 2.5899, 'learning_rate': 1e-05, 'epoch': 0.13} {'loss': 2.6501, 'learning_rate': 1e-05, 'epoch': 0.14} {'loss': 2.6501, 'learning_rate': 1e-05, 'epoch': 0.14} {'loss': 2.6501, 'learning_rate': 1e-05, 'epoch': 0.14} {'loss': 2.6501, 'learning_rate': 1e-05, 'epoch': 0.14} {'loss': 2.6501, 'learning_rate': 1e-05, 'epoch': 0.14} {'loss': 2.6501, 'learning_rate': 1e-05, 'epoch': 0.14} {'loss': 2.6501, 'learning_rate': 1e-05, 'epoch': 0.14} {'loss': 2.6501, 'learning_rate': 1e-05, 'epoch': 0.14} {'loss': 2.6501, 'learning_rate': 1e-05, 'epoch': 0.14} {'loss': 2.6501, 'learning_rate': 1e-05, 'epoch': 0.14} {'loss': 2.6501, 'learning_rate': 1e-05, 'epoch': 0.14} {'loss': 2.6501, 'learning_rate': 1e-05, 'epoch': 0.14} {'loss': 2.6501, 'learning_rate': 1e-05, 'epoch': 0.14} {'loss': 2.6501, 'learning_rate': 1e-05, 'epoch': 0.14} {'loss': 2.6501, 'learning_rate': 1e-05, 'epoch': 0.14} {'loss': 2.6501, 'learning_rate': 1e-05, 'epoch': 0.14} {'loss': 2.6501, 'learning_rate': 1e-05, 'epoch': 0.14} {'loss': 2.6501, 'learning_rate': 1e-05, 'epoch': 0.14} {'loss': 2.6501, 'learning_rate': 1e-05, 'epoch': 0.14} {'loss': 2.6501, 'learning_rate': 1e-05, 'epoch': 0.14} {'loss': 2.6501, 'learning_rate': 1e-05, 'epoch': 0.14} {'loss': 2.6501, 'learning_rate': 1e-05, 'epoch': 0.14} {'loss': 2.6501, 'learning_rate': 1e-05, 'epoch': 0.14} {'loss': 2.6501, 'learning_rate': 1e-05, 'epoch': 0.14} {'loss': 2.6471, 'learning_rate': 1e-05, 'epoch': 0.15} {'loss': 2.6471, 'learning_rate': 1e-05, 'epoch': 0.15} {'loss': 2.6471, 'learning_rate': 1e-05, 'epoch': 0.15} {'loss': 2.6471, 'learning_rate': 1e-05, 'epoch': 0.15} {'loss': 2.6471, 'learning_rate': 1e-05, 'epoch': 0.15} {'loss': 2.6471, 'learning_rate': 1e-05, 'epoch': 0.15} {'loss': 2.6471, 'learning_rate': 1e-05, 'epoch': 0.15} {'loss': 2.6471, 'learning_rate': 1e-05, 'epoch': 0.15} {'loss': 2.6471, 'learning_rate': 1e-05, 'epoch': 0.15} {'loss': 2.6471, 'learning_rate': 1e-05, 'epoch': 0.15} {'loss': 2.6471, 'learning_rate': 1e-05, 'epoch': 0.15} {'loss': 2.6471, 'learning_rate': 1e-05, 'epoch': 0.15} {'loss': 2.6471, 'learning_rate': 1e-05, 'epoch': 0.15} {'loss': 2.6471, 'learning_rate': 1e-05, 'epoch': 0.15} {'loss': 2.6471, 'learning_rate': 1e-05, 'epoch': 0.15} {'loss': 2.6471, 'learning_rate': 1e-05, 'epoch': 0.15} {'loss': 2.6471, 'learning_rate': 1e-05, 'epoch': 0.15} {'loss': 2.6471, 'learning_rate': 1e-05, 'epoch': 0.15} {'loss': 2.6471, 'learning_rate': 1e-05, 'epoch': 0.15} {'loss': 2.6471, 'learning_rate': 1e-05, 'epoch': 0.15} {'loss': 2.6471, 'learning_rate': 1e-05, 'epoch': 0.15} {'loss': 2.6471, 'learning_rate': 1e-05, 'epoch': 0.15} {'loss': 2.6471, 'learning_rate': 1e-05, 'epoch': 0.15} {'loss': 2.6471, 'learning_rate': 1e-05, 'epoch': 0.15} {'loss': 2.6358, 'learning_rate': 1e-05, 'epoch': 0.16} {'loss': 2.6358, 'learning_rate': 1e-05, 'epoch': 0.16} {'loss': 2.6358, 'learning_rate': 1e-05, 'epoch': 0.16} {'loss': 2.6358, 'learning_rate': 1e-05, 'epoch': 0.16} {'loss': 2.6358, 'learning_rate': 1e-05, 'epoch': 0.16} {'loss': 2.6358, 'learning_rate': 1e-05, 'epoch': 0.16} {'loss': 2.6358, 'learning_rate': 1e-05, 'epoch': 0.16} {'loss': 2.6358, 'learning_rate': 1e-05, 'epoch': 0.16} {'loss': 2.6358, 'learning_rate': 1e-05, 'epoch': 0.16} {'loss': 2.6358, 'learning_rate': 1e-05, 'epoch': 0.16} {'loss': 2.6358, 'learning_rate': 1e-05, 'epoch': 0.16} {'loss': 2.6358, 'learning_rate': 1e-05, 'epoch': 0.16} {'loss': 2.6358, 'learning_rate': 1e-05, 'epoch': 0.16} {'loss': 2.6358, 'learning_rate': 1e-05, 'epoch': 0.16} {'loss': 2.6358, 'learning_rate': 1e-05, 'epoch': 0.16} {'loss': 2.6358, 'learning_rate': 1e-05, 'epoch': 0.16} {'loss': 2.6358, 'learning_rate': 1e-05, 'epoch': 0.16} {'loss': 2.6358, 'learning_rate': 1e-05, 'epoch': 0.16} {'loss': 2.6358, 'learning_rate': 1e-05, 'epoch': 0.16} {'loss': 2.6358, 'learning_rate': 1e-05, 'epoch': 0.16} {'loss': 2.6358, 'learning_rate': 1e-05, 'epoch': 0.16} {'loss': 2.6358, 'learning_rate': 1e-05, 'epoch': 0.16} {'loss': 2.6358, 'learning_rate': 1e-05, 'epoch': 0.16} {'loss': 2.6358, 'learning_rate': 1e-05, 'epoch': 0.16} {'loss': 2.6562, 'learning_rate': 1e-05, 'epoch': 0.17} {'loss': 2.6562, 'learning_rate': 1e-05, 'epoch': 0.17} {'loss': 2.6562, 'learning_rate': 1e-05, 'epoch': 0.17} {'loss': 2.6562, 'learning_rate': 1e-05, 'epoch': 0.17} {'loss': 2.6562, 'learning_rate': 1e-05, 'epoch': 0.17} {'loss': 2.6562, 'learning_rate': 1e-05, 'epoch': 0.17} {'loss': 2.6562, 'learning_rate': 1e-05, 'epoch': 0.17} {'loss': 2.6562, 'learning_rate': 1e-05, 'epoch': 0.17} {'loss': 2.6562, 'learning_rate': 1e-05, 'epoch': 0.17} {'loss': 2.6562, 'learning_rate': 1e-05, 'epoch': 0.17} {'loss': 2.6562, 'learning_rate': 1e-05, 'epoch': 0.17} {'loss': 2.6562, 'learning_rate': 1e-05, 'epoch': 0.17} {'loss': 2.6562, 'learning_rate': 1e-05, 'epoch': 0.17} {'loss': 2.6562, 'learning_rate': 1e-05, 'epoch': 0.17} {'loss': 2.6562, 'learning_rate': 1e-05, 'epoch': 0.17} {'loss': 2.6562, 'learning_rate': 1e-05, 'epoch': 0.17} {'loss': 2.6562, 'learning_rate': 1e-05, 'epoch': 0.17} {'loss': 2.6562, 'learning_rate': 1e-05, 'epoch': 0.17} {'loss': 2.6562, 'learning_rate': 1e-05, 'epoch': 0.17} {'loss': 2.6562, 'learning_rate': 1e-05, 'epoch': 0.17} {'loss': 2.6562, 'learning_rate': 1e-05, 'epoch': 0.17} {'loss': 2.6562, 'learning_rate': 1e-05, 'epoch': 0.17} {'loss': 2.6562, 'learning_rate': 1e-05, 'epoch': 0.17} {'loss': 2.6562, 'learning_rate': 1e-05, 'epoch': 0.17} {'loss': 2.6333, 'learning_rate': 1e-05, 'epoch': 0.18} {'loss': 2.6333, 'learning_rate': 1e-05, 'epoch': 0.18} {'loss': 2.6333, 'learning_rate': 1e-05, 'epoch': 0.18} {'loss': 2.6333, 'learning_rate': 1e-05, 'epoch': 0.18} {'loss': 2.6333, 'learning_rate': 1e-05, 'epoch': 0.18} {'loss': 2.6333, 'learning_rate': 1e-05, 'epoch': 0.18} {'loss': 2.6333, 'learning_rate': 1e-05, 'epoch': 0.18} {'loss': 2.6333, 'learning_rate': 1e-05, 'epoch': 0.18} {'loss': 2.6333, 'learning_rate': 1e-05, 'epoch': 0.18} {'loss': 2.6333, 'learning_rate': 1e-05, 'epoch': 0.18} {'loss': 2.6333, 'learning_rate': 1e-05, 'epoch': 0.18} {'loss': 2.6333, 'learning_rate': 1e-05, 'epoch': 0.18} {'loss': 2.6333, 'learning_rate': 1e-05, 'epoch': 0.18} {'loss': 2.6333, 'learning_rate': 1e-05, 'epoch': 0.18} {'loss': 2.6333, 'learning_rate': 1e-05, 'epoch': 0.18} {'loss': 2.6333, 'learning_rate': 1e-05, 'epoch': 0.18} {'loss': 2.6333, 'learning_rate': 1e-05, 'epoch': 0.18} {'loss': 2.6333, 'learning_rate': 1e-05, 'epoch': 0.18} {'loss': 2.6333, 'learning_rate': 1e-05, 'epoch': 0.18} {'loss': 2.6333, 'learning_rate': 1e-05, 'epoch': 0.18} {'loss': 2.6333, 'learning_rate': 1e-05, 'epoch': 0.18} {'loss': 2.6333, 'learning_rate': 1e-05, 'epoch': 0.18} {'loss': 2.6333, 'learning_rate': 1e-05, 'epoch': 0.18} {'loss': 2.6333, 'learning_rate': 1e-05, 'epoch': 0.18} {'loss': 2.628, 'learning_rate': 1e-05, 'epoch': 0.19} {'loss': 2.628, 'learning_rate': 1e-05, 'epoch': 0.19} {'loss': 2.628, 'learning_rate': 1e-05, 'epoch': 0.19} {'loss': 2.628, 'learning_rate': 1e-05, 'epoch': 0.19} {'loss': 2.628, 'learning_rate': 1e-05, 'epoch': 0.19} {'loss': 2.628, 'learning_rate': 1e-05, 'epoch': 0.19} {'loss': 2.628, 'learning_rate': 1e-05, 'epoch': 0.19} {'loss': 2.628, 'learning_rate': 1e-05, 'epoch': 0.19} {'loss': 2.628, 'learning_rate': 1e-05, 'epoch': 0.19} {'loss': 2.628, 'learning_rate': 1e-05, 'epoch': 0.19} {'loss': 2.628, 'learning_rate': 1e-05, 'epoch': 0.19} {'loss': 2.628, 'learning_rate': 1e-05, 'epoch': 0.19} {'loss': 2.628, 'learning_rate': 1e-05, 'epoch': 0.19} {'loss': 2.628, 'learning_rate': 1e-05, 'epoch': 0.19} {'loss': 2.628, 'learning_rate': 1e-05, 'epoch': 0.19} {'loss': 2.628, 'learning_rate': 1e-05, 'epoch': 0.19} {'loss': 2.628, 'learning_rate': 1e-05, 'epoch': 0.19} {'loss': 2.628, 'learning_rate': 1e-05, 'epoch': 0.19} {'loss': 2.628, 'learning_rate': 1e-05, 'epoch': 0.19} {'loss': 2.628, 'learning_rate': 1e-05, 'epoch': 0.19} {'loss': 2.628, 'learning_rate': 1e-05, 'epoch': 0.19} {'loss': 2.628, 'learning_rate': 1e-05, 'epoch': 0.19} {'loss': 2.628, 'learning_rate': 1e-05, 'epoch': 0.19} {'loss': 2.628, 'learning_rate': 1e-05, 'epoch': 0.19} {'loss': 2.5594, 'learning_rate': 1e-05, 'epoch': 0.2} {'loss': 2.5594, 'learning_rate': 1e-05, 'epoch': 0.2} {'loss': 2.5594, 'learning_rate': 1e-05, 'epoch': 0.2} {'loss': 2.5594, 'learning_rate': 1e-05, 'epoch': 0.2} {'loss': 2.5594, 'learning_rate': 1e-05, 'epoch': 0.2} {'loss': 2.5594, 'learning_rate': 1e-05, 'epoch': 0.2} {'loss': 2.5594, 'learning_rate': 1e-05, 'epoch': 0.2} {'loss': 2.5594, 'learning_rate': 1e-05, 'epoch': 0.2} {'loss': 2.5594, 'learning_rate': 1e-05, 'epoch': 0.2} {'loss': 2.5594, 'learning_rate': 1e-05, 'epoch': 0.2} {'loss': 2.5594, 'learning_rate': 1e-05, 'epoch': 0.2} {'loss': 2.5594, 'learning_rate': 1e-05, 'epoch': 0.2} {'loss': 2.5594, 'learning_rate': 1e-05, 'epoch': 0.2} {'loss': 2.5594, 'learning_rate': 1e-05, 'epoch': 0.2} {'loss': 2.5594, 'learning_rate': 1e-05, 'epoch': 0.2} {'loss': 2.5594, 'learning_rate': 1e-05, 'epoch': 0.2} {'loss': 2.5594, 'learning_rate': 1e-05, 'epoch': 0.2} {'loss': 2.5594, 'learning_rate': 1e-05, 'epoch': 0.2} {'loss': 2.5594, 'learning_rate': 1e-05, 'epoch': 0.2} {'loss': 2.5594, 'learning_rate': 1e-05, 'epoch': 0.2} {'loss': 2.5594, 'learning_rate': 1e-05, 'epoch': 0.2} {'loss': 2.5594, 'learning_rate': 1e-05, 'epoch': 0.2} {'loss': 2.5594, 'learning_rate': 1e-05, 'epoch': 0.2} {'loss': 2.5594, 'learning_rate': 1e-05, 'epoch': 0.2}