src/ParaMEDMEMTest/test_MPI_Access_ISend_IRecv_Length_1.cxx

   1 // Copyright (C) 2007-2020  CEA/DEN, EDF R&D
   2 //
   3 // This library is free software; you can redistribute it and/or
   4 // modify it under the terms of the GNU Lesser General Public
   5 // License as published by the Free Software Foundation; either
   6 // version 2.1 of the License, or (at your option) any later version.
   7 //
   8 // This library is distributed in the hope that it will be useful,
   9 // but WITHOUT ANY WARRANTY; without even the implied warranty of
  10 // MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU
  11 // Lesser General Public License for more details.
  12 //
  13 // You should have received a copy of the GNU Lesser General Public
  14 // License along with this library; if not, write to the Free Software
  15 // Foundation, Inc., 59 Temple Place, Suite 330, Boston, MA  02111-1307 USA
  16 //
  17 // See http://www.salome-platform.org/ or email : webmaster.salome@opencascade.com
  18 //
  19
  20 #include <string>
  21 #include <vector>
  22 #include <map>
  23 #include <iostream>
  24 #include <mpi.h>
  25
  26 #include "MPIAccessTest.hxx"
  27 #include <cppunit/TestAssert.h>
  28
  29 //#include "CommInterface.hxx"
  30 //#include "ProcessorGroup.hxx"
  31 //#include "MPIProcessorGroup.hxx"
  32 #include "MPIAccess.hxx"
  33
  34 // use this define to enable lines, execution of which leads to Segmentation Fault
  35 #define ENABLE_FAULTS
  36
  37 // use this define to enable CPPUNIT asserts and fails, showing bugs
  38 #define ENABLE_FORCED_FAILURES
  39
  40 using namespace std;
  41 using namespace MEDCoupling;
  42
  43 void MPIAccessTest::test_MPI_Access_ISend_IRecv_Length_1() {
  44
  45   //  MPI_Init(&argc, &argv) ;
  46
  47   int size ;
  48   int myrank ;
  49   MPI_Comm_size(MPI_COMM_WORLD,&size) ;
  50   MPI_Comm_rank(MPI_COMM_WORLD,&myrank) ;
  51
  52   if ( size < 2 ) {
  53     ostringstream strstream ;
  54     strstream << "test_MPI_Access_ISend_IRecv_Length_1 must be run with 2 procs" << endl ;
  55     cerr << strstream.str() << endl ;
  56     //CPPUNIT_FAIL( strstream.str() ) ;
  57     return;
  58   }
  59
  60   debugStream << "test_MPI_Access_ISend_IRecv_Length_1" << myrank << endl ;
  61
  62   MEDCoupling::CommInterface interface ;
  63
  64   MEDCoupling::MPIProcessorGroup* group = new MEDCoupling::MPIProcessorGroup(interface) ;
  65
  66   MEDCoupling::MPIAccess mpi_access( group ) ;
  67
  68 #define maxreq 10
  69
  70   if ( myrank >= 2 ) {
  71     mpi_access.barrier() ;
  72     delete group ;
  73     return ;
  74   }
  75
  76   int target = 1 - myrank ;
  77   int SendRequestId[maxreq] ;
  78   int RecvRequestId[maxreq] ;
  79   int sts ;
  80   int sendbuf[1000*(maxreq-1)] ;
  81   int recvbuf[maxreq][1000*(maxreq-1)] ;
  82   int maxirecv = 1 ;
  83   int i ;
  84   RecvRequestId[0] = -1 ;
  85   for ( i = 0 ; i < 1000*(maxreq-1) ; i++ ) {
  86     sendbuf[i] = i ;
  87   }
  88   for ( i = 0 ; i < maxreq ; i++ ) {
  89     sts = MPI_SUCCESS ;
  90     if ( myrank == 0 ) {
  91       sts = mpi_access.ISend( sendbuf, 1000*i, MPI_INT, target, SendRequestId[i] ) ;
  92       debugStream << "test" << myrank << " ISend RequestId " << SendRequestId[i]
  93            << " tag " << mpi_access.sendMPITag(target) << endl ;
  94     }
  95     int j ;
  96     for (j = 1 ; j <= i ; j++) {
  97       int source = 0;
  98       MPI_Datatype datatype = 0;
  99       int outcount = 0;
 100       int flag ;
 101       if ( myrank == 0 ) {
 102         mpi_access.test( SendRequestId[j], flag ) ;
 103       }
 104       else {
 105         int MPITag ;
 106         sts = mpi_access.IProbe( target , source, MPITag, datatype,
 107                                  outcount, flag) ;
 108         char msgerr[MPI_MAX_ERROR_STRING] ;
 109         int lenerr ;
 110         mpi_access.errorString(sts, msgerr, &lenerr) ;
 111         debugStream << "test" << myrank << " IProbe lenerr " << lenerr << " "
 112              << msgerr << endl ;
 113         if ( sts != MPI_SUCCESS ) {
 114           ostringstream strstream ;
 115           strstream << "==========================================================="
 116                     << "test" << myrank << " IProbe KO"
 117                     << "==========================================================="
 118                     << endl ;
 119           debugStream << strstream.str() << endl ;
 120           CPPUNIT_FAIL( strstream.str() ) ;
 121         }
 122         debugStream << "test" << myrank << " IProbe i/j " << i << "/" << j
 123              << " MPITag " << MPITag << " datatype " << datatype
 124              << " outcount " << outcount << " flag " << flag << endl ;
 125       }
 126       if ( flag ) {
 127         if ( myrank == 0 ) {
 128           int tag, error ;
 129           mpi_access.status( SendRequestId[j], target, tag, error, outcount,
 130                              true ) ;
 131           debugStream << "test" << myrank << " Test(Send RequestId " << SendRequestId[j]
 132                << ") : target " << target << " tag " << tag << " error " << error
 133                << " flag " << flag << endl ;
 134         }
 135         else {
 136           sts = mpi_access.IRecv( recvbuf[maxirecv], outcount, datatype, source,
 137                                   RecvRequestId[maxirecv] ) ;
 138           debugStream << "test" << myrank << " maxirecv " << maxirecv << " IRecv RequestId "
 139                << RecvRequestId[maxirecv] << " source " << source
 140                << " outcount " << outcount << " tag "
 141                << mpi_access.recvMPITag(target) << endl ;
 142           maxirecv = maxirecv + 1 ;
 143         }
 144       }
 145       else if ( myrank == 1 && i == maxreq-1 && j >= maxirecv ) {
 146         sts = mpi_access.IRecv( recvbuf[j], 1000*j, MPI_INT, target,
 147                                 RecvRequestId[j] ) ;
 148         debugStream << "test" << myrank << " maxirecv " << maxirecv << " IRecv RequestId "
 149              << RecvRequestId[j] << " target " << target << " length " << 1000*j
 150              << " tag " << mpi_access.recvMPITag(target) << endl ;
 151         maxirecv = maxirecv + 1 ;
 152       }
 153     }
 154     char msgerr[MPI_MAX_ERROR_STRING] ;
 155     int lenerr ;
 156     mpi_access.errorString(sts, msgerr, &lenerr) ;
 157     debugStream << "test" << myrank << " lenerr " << lenerr << " "
 158          << msgerr << endl ;
 159
 160     if ( sts != MPI_SUCCESS ) {
 161       ostringstream strstream ;
 162       strstream << "==========================================================="
 163                 << endl << "test" << myrank << " KO" << endl
 164                 << "==========================================================="
 165                 << endl ;
 166       debugStream << strstream.str() << endl ;
 167       CPPUNIT_FAIL( strstream.str() ) ;
 168     }
 169   }
 170
 171   if(MPI_ACCESS_VERBOSE) mpi_access.check() ;
 172   int flag ;
 173   if ( myrank == 0 ) {
 174     mpi_access.testAll( maxreq, SendRequestId, flag ) ;
 175     debugStream << "test" << myrank << " TestAll SendRequest flag " << flag << endl ;
 176   }
 177   else {
 178     int source ;
 179     int outcount ;
 180     if ( maxirecv != maxreq ) {
 181       ostringstream strstream ;
 182       strstream << "==========================================================="
 183                 << endl << "test" << myrank << " KO" << " maxirecv " << maxirecv
 184                 << " != maxreq " << maxreq << endl
 185                 << "==========================================================="
 186                 << endl ;
 187       debugStream << strstream.str() << endl ;
 188       CPPUNIT_FAIL( strstream.str() ) ;
 189     }
 190     while ( maxirecv > 0 ) {
 191       for ( i = 1 ; i < maxreq ; i++ ) {
 192         debugStream << "test" << myrank << " IProbe : " << endl ;
 193         sts = mpi_access.test( RecvRequestId[i] , flag ) ;
 194         char msgerr[MPI_MAX_ERROR_STRING] ;
 195         int lenerr ;
 196         mpi_access.errorString(sts, msgerr, &lenerr) ;
 197         debugStream << "test" << myrank << " flag " << flag << " lenerr "
 198              << lenerr << " " << msgerr << " maxirecv " << maxirecv << endl ;
 199         if ( sts != MPI_SUCCESS ) {
 200           ostringstream strstream ;
 201           strstream << "==========================================================="
 202                     << "test" << myrank << " KO"
 203                     << "==========================================================="
 204                     << endl ;
 205           debugStream << strstream.str() << endl ;
 206           CPPUNIT_FAIL( strstream.str() ) ;
 207         }
 208         debugStream << "test" << myrank << " Test flag " << flag << endl ;
 209         if ( flag ) {
 210           int tag, error ;
 211           mpi_access.status( RecvRequestId[i] , source , tag , error ,
 212                              outcount ) ;
 213           if ( i != 0 ) {
 214             if (( outcount != 1000*i ) ||
 215                 ((recvbuf[i][outcount-1] != (outcount-1)))) {
 216               ostringstream strstream ;
 217               strstream << "========================================================"
 218                         << endl << "test" << myrank << " outcount " << outcount
 219                         << " KO" << " i " << i
 220                         << " recvbuf " << recvbuf[i][outcount-1] << endl
 221                         << "========================================================"
 222                         << endl ;
 223               debugStream << strstream.str() << endl ;
 224               CPPUNIT_FAIL( strstream.str() ) ;
 225             }
 226           }
 227           else if ( outcount != 0 ) {
 228             ostringstream strstream ;
 229             strstream << "========================================================"
 230                       << endl << "test" << myrank << " outcount " << outcount
 231                       << " KO" << " i " << i << endl
 232                       << "========================================================"
 233                       << endl ;
 234             debugStream << strstream.str() << endl ;
 235             CPPUNIT_FAIL( strstream.str() ) ;
 236           }
 237           maxirecv = maxirecv - 1 ;
 238         }
 239       }
 240     }
 241     mpi_access.testAll( maxreq, RecvRequestId, flag ) ;
 242     debugStream << "test" << myrank << " TestAll RecvRequest flag " << flag << endl ;
 243   }
 244   if(MPI_ACCESS_VERBOSE) mpi_access.check() ;
 245   debugStream << "test" << myrank << " WaitAll :" << endl ;
 246   if ( myrank == 0 ) {
 247     mpi_access.waitAll( maxreq, SendRequestId ) ;
 248     mpi_access.deleteRequests( maxreq, SendRequestId ) ;
 249   }
 250   else {
 251     mpi_access.waitAll( maxreq, RecvRequestId ) ;
 252     mpi_access.deleteRequests( maxreq, RecvRequestId ) ;
 253   }
 254
 255   if ( myrank == 0 ) {
 256     int sendrequests[maxreq] ;
 257     int sendreqsize = mpi_access.sendRequestIds( target , maxreq , sendrequests ) ;
 258     sendreqsize = mpi_access.sendRequestIds( target , maxreq , sendrequests ) ;
 259     if ( sendreqsize != 0 ) {
 260       ostringstream strstream ;
 261       strstream << "=========================================================" << endl
 262                 << "test" << myrank << " sendreqsize " << sendreqsize << " KO" << endl
 263                 << "=========================================================" << endl ;
 264       debugStream << strstream.str() << endl ;
 265       CPPUNIT_FAIL( strstream.str() ) ;
 266     }
 267     else {
 268       debugStream << "=========================================================" << endl
 269            << "test" << myrank << " sendreqsize " << sendreqsize << " OK" << endl
 270            << "=========================================================" << endl ;
 271     }
 272   }
 273   else {
 274     int recvrequests[maxreq] ;
 275     int recvreqsize = mpi_access.sendRequestIds( target , maxreq , recvrequests ) ;
 276     if ( recvreqsize != 0 ) {
 277       ostringstream strstream ;
 278       strstream << "=========================================================" << endl
 279                 << "test" << myrank << " recvreqsize " << recvreqsize << " KO" << endl
 280                 << "=========================================================" << endl ;
 281       debugStream << strstream.str() << endl ;
 282       CPPUNIT_FAIL( strstream.str() ) ;
 283     }
 284     else {
 285       debugStream << "=========================================================" << endl
 286            << "test" << myrank << " recvreqsize " << recvreqsize << " OK" << endl
 287            << "=========================================================" << endl ;
 288     }
 289   }
 290
 291   mpi_access.barrier() ;
 292
 293   delete group ;
 294
 295   //  MPI_Finalize();
 296
 297   debugStream << "test" << myrank << " OK" << endl ;
 298
 299   return ;
 300 }
 301
 302
 303
 304