| 1 | #ifndef  BRPROC_H_SEEN
 | 
|---|
| 2 | #define  BRPROC_H_SEEN
 | 
|---|
| 3 | 
 | 
|---|
| 4 | //----------------------------------------------------------------
 | 
|---|
| 5 | // Projet BAORadio - (C) LAL/IRFU  2008-2010
 | 
|---|
| 6 | // Classes de threads de traitememt donnees BAORadio 
 | 
|---|
| 7 | //  Principales classes utilisables 
 | 
|---|
| 8 | //  - BRMeanSpecCalculator (donnees FFT ou RAW apres BRFFTCalculator)
 | 
|---|
| 9 | //  - BRFFTCalculator (donnees RAW) 
 | 
|---|
| 10 | //----------------------------------------------------------------
 | 
|---|
| 11 | 
 | 
|---|
| 12 | 
 | 
|---|
| 13 | #include <string>
 | 
|---|
| 14 | #include <vector>
 | 
|---|
| 15 | #include <iostream>
 | 
|---|
| 16 | 
 | 
|---|
| 17 | #include "racqumem.h"
 | 
|---|
| 18 | #include "brbaseproc.h"
 | 
|---|
| 19 | #include "parlex.h"
 | 
|---|
| 20 | #include "sopnamsp.h"
 | 
|---|
| 21 | #include "tvector.h"
 | 
|---|
| 22 | #include "ntuple.h"
 | 
|---|
| 23 | #include "datatable.h"
 | 
|---|
| 24 | #include "swfitsdtable.h"
 | 
|---|
| 25 | #include "FFTW/fftw3.h"
 | 
|---|
| 26 | 
 | 
|---|
| 27 | using namespace std;
 | 
|---|
| 28 | 
 | 
|---|
| 29 |  
 | 
|---|
| 30 | //---------------------------------------------------------------------
 | 
|---|
| 31 | // Classe de traitement simple - calcul de spectres moyennes / voie
 | 
|---|
| 32 | // a partir de donnees de type FFT (firmware FFT)
 | 
|---|
| 33 | //---------------------------------------------------------------------
 | 
|---|
| 34 | class BRMeanSpecCalculator : public BRBaseProcessor
 | 
|---|
| 35 | {
 | 
|---|
| 36 | public:
 | 
|---|
| 37 |   BRMeanSpecCalculator(RAcqMemZoneMgr& memgr, string outpath, uint_4 nmean=1000, 
 | 
|---|
| 38 |                        bool fgdatafft=true, bool fgsinglechan=false);
 | 
|---|
| 39 |   virtual ~BRMeanSpecCalculator(); // Fait le nettoyage final , sauvegarde des objets ...
 | 
|---|
| 40 | 
 | 
|---|
| 41 | // Definit la taille de la fenetre temporelle (winsz = nb de paquets) des spectres a traiter
 | 
|---|
| 42 | // Cette zone est etendu de wszext paquet en debut et en fin de paquet 
 | 
|---|
| 43 |   void SetSpectraWindowSize(uint_4 winsz=15, uint_4 wszext=3);
 | 
|---|
| 44 | // Taille de la fenetre en temps (nb de paquets a traiter en bloc
 | 
|---|
| 45 |   inline sa_size_t GetSpectraWindowSize() { return spec_window_.SizeZ()-2*spwin_ext_sz_; }
 | 
|---|
| 46 | // Taille de la zone d'extension de la fenetre de chaque cote 
 | 
|---|
| 47 |   inline sa_size_t GetSpecWinExtensionSize() { return spwin_ext_sz_; }
 | 
|---|
| 48 | // La taille de recouvrement est le double de la taille de la zone d'extension 
 | 
|---|
| 49 |   inline sa_size_t GetSpecWinOverlapSize() { return 2*spwin_ext_sz_; }
 | 
|---|
| 50 | // Retourne l'index (selon Z) dans le tableau des spectres en fonction du numero de paquet
 | 
|---|
| 51 |   inline sa_size_t PaqNumToArrayIndex(uint_8 numpaq)  { return numpaq%spec_window_.SizeZ() ; }
 | 
|---|
| 52 | 
 | 
|---|
| 53 | // Pour definir le nombre maximum de fichiers de fenetres de spectres 
 | 
|---|
| 54 |   inline void SetMaxNbSepcWinFiles(uint_4 nmax=0)  {  nmaxfiles_specw_=nmax; }
 | 
|---|
| 55 | 
 | 
|---|
| 56 |   inline void SetVarianceLimits(double vmin=0., double vmax=9.e99)
 | 
|---|
| 57 |     { varmin_=vmin;  varmax_=vmax; }
 | 
|---|
| 58 | 
 | 
|---|
| 59 | // lecture des gains en fonction de la frequence depuis un fichier FITS
 | 
|---|
| 60 | // flag fgapp: Active ou desactive la renormalisation de coefficients de Fourier par les gains=f(frequence)  
 | 
|---|
| 61 |   void ReadGainFitsFile(string filename, bool fgapp=true);
 | 
|---|
| 62 | 
 | 
|---|
| 63 | protected:
 | 
|---|
| 64 |   virtual int Process();   // appele paquet par paquet 
 | 
|---|
| 65 | // appele par Process() pour traiter un groupe de paquets correspondant a une fenetre en temps
 | 
|---|
| 66 |   virtual void ProcSpecWin(uint_8 numpaqstart, uint_8 numpaqend);  // appele fenetre par fenetre  
 | 
|---|
| 67 |   virtual void FlagBadPackets(uint_8 numpaqstart, uint_8 numpaqend);   
 | 
|---|
| 68 |   virtual void SaveMeanSpectra();  // Pour sauver les spectres moyennes ( + sigma ) dans un fichier 
 | 
|---|
| 69 |   virtual void SaveSpectraWindow();  // Pour sauver les spectres de la fenetre temporel ds un fichier 
 | 
|---|
| 70 | 
 | 
|---|
| 71 | 
 | 
|---|
| 72 |   uint_4 nmean_;  // Nombre de spectres pour le calcul des moyennes 
 | 
|---|
| 73 |   string outpath_;  // directory pour fichiers de sortie
 | 
|---|
| 74 |   bool fgdatafft_;
 | 
|---|
| 75 |   bool fgsinglechannel_;
 | 
|---|
| 76 |   uint_4 numfile_;
 | 
|---|
| 77 |   vector<uint_8> nbpaq4mean_;
 | 
|---|
| 78 |   uint_8 totnbpaq_;
 | 
|---|
| 79 | 
 | 
|---|
| 80 |   TMatrix< r_4 > mspecmtx_;    // Matrice des spectres moyennees 
 | 
|---|
| 81 |   TMatrix< r_4 > sigspecmtx_;    // Matrice des sigmas des spectres  
 | 
|---|
| 82 | 
 | 
|---|
| 83 |   TArray< r_4 > spec_window_;    // fenetre en temps sur les spectres  
 | 
|---|
| 84 |   uint_4 spwin_ext_sz_;          // Taille de la zone d'extension en debut et en fin 
 | 
|---|
| 85 |   TArray< uint_2 > clnflg_;      // flag de nettoyage resultant de la routine   FlagBadPackets() 
 | 
|---|
| 86 |   uint_8 paqnum_w_start;     // numero de paquet du debut de la fenetre en temps (inclusif) 
 | 
|---|
| 87 |   uint_8 paqnum_w_end;       // numero de paquet final de la fenetre en temps (non inclusif) 
 | 
|---|
| 88 | 
 | 
|---|
| 89 |   uint_4 nbtot_specwin_;    // nombre total de fenetre de spectres traites 
 | 
|---|
| 90 |   uint_4 nmaxfiles_specw_;   // nombre maximum de fichier de fenetre_spectre 
 | 
|---|
| 91 |   
 | 
|---|
| 92 |   TMatrix< r_4 > sgain_;   // gain en fonction de la frequence  
 | 
|---|
| 93 |   bool fg_apply_gains_; 
 | 
|---|
| 94 | 
 | 
|---|
| 95 |   double varmin_, varmax_;  // limites pour la coupure sur la variance
 | 
|---|
| 96 |   vector<uint_8> nbadpaq_;
 | 
|---|
| 97 | 
 | 
|---|
| 98 |   FitsInOutFile* ofsdtp_;   // Output fits stream for datatable 
 | 
|---|
| 99 |   SwFitsDataTable* dtp_;    // DataTable 
 | 
|---|
| 100 |   double* xnt_; 
 | 
|---|
| 101 | }; 
 | 
|---|
| 102 | 
 | 
|---|
| 103 | //-------------------------------------------------------------------------
 | 
|---|
| 104 | // Classe WBRFFT : Calcul de TF sur donnees brutes (firmware RAW)
 | 
|---|
| 105 | //   en utilisant FFTW et en effectuant une copie ds tableau local
 | 
|---|
| 106 | //-------------------------------------------------------------------------
 | 
|---|
| 107 | typedef unsigned char IDT ;   // definition type de donnees en entree de WBRFFT
 | 
|---|
| 108 | typedef int_2  IIDT ;      // definition type de donnees intermediaire 
 | 
|---|
| 109 | typedef float  ODT;  // type de donnees en sortie (complex < ODT > )
 | 
|---|
| 110 | //----Classe WBRFFT----
 | 
|---|
| 111 | class WBRFFT {
 | 
|---|
| 112 | public:
 | 
|---|
| 113 |   WBRFFT(uint_4 sz=0);
 | 
|---|
| 114 |   virtual ~WBRFFT();
 | 
|---|
| 115 | 
 | 
|---|
| 116 |   void SetInDataSize(uint_4 sz);
 | 
|---|
| 117 |   void DoFFT(IDT *indata, complex<ODT> * ofc);
 | 
|---|
| 118 |   static void PrintData(IDT *indata,  complex<ODT> * ofc, uint_4 sz);
 | 
|---|
| 119 | 
 | 
|---|
| 120 |   uint_4 sz_;   // Taille tableau d'entree 
 | 
|---|
| 121 |   TVector< ODT > inp;
 | 
|---|
| 122 |   TVector< complex<ODT> > outfc;
 | 
|---|
| 123 |   fftwf_plan myplan_;
 | 
|---|
| 124 |   static ZMutex* mtx_fftwp_;  // Mutex de protection pour la creation du plan fftw 
 | 
|---|
| 125 | };
 | 
|---|
| 126 | //--------------------
 | 
|---|
| 127 | 
 | 
|---|
| 128 | //---------------------------------------------------------------------
 | 
|---|
| 129 | // Classe de thread de calcul de FFT sur donnees RAW 
 | 
|---|
| 130 | //---------------------------------------------------------------------
 | 
|---|
| 131 | class BRFFTCalculator : public BRBaseProcessor
 | 
|---|
| 132 | {
 | 
|---|
| 133 | public:
 | 
|---|
| 134 |   BRFFTCalculator(RAcqMemZoneMgr& memgr, bool fgsinglechannel=false);
 | 
|---|
| 135 |   virtual ~BRFFTCalculator(); // Fait le nettoyage final , sauvegarde des objets ...
 | 
|---|
| 136 | 
 | 
|---|
| 137 | protected:
 | 
|---|
| 138 |   virtual int Process(); 
 | 
|---|
| 139 |   
 | 
|---|
| 140 |   bool fgsinglechannel_;
 | 
|---|
| 141 |   uint_8 totnbfftpaq_;
 | 
|---|
| 142 |   WBRFFT ffts_;
 | 
|---|
| 143 | };
 | 
|---|
| 144 | 
 | 
|---|
| 145 | 
 | 
|---|
| 146 | //-------------------------------------------------------------------------
 | 
|---|
| 147 | //    **** OBSOLETE : BRProcA2C et BRProcB4C
 | 
|---|
| 148 | //   Anciennes classes de traitement (Avant Nov2009) utilises par mcrd.cc
 | 
|---|
| 149 | //-------------------------------------------------------------------------
 | 
|---|
| 150 | //---------------------------------------------------------------------
 | 
|---|
| 151 | // Classe thread de traitement avec 2 voies par frame (donnees raw/FFT
 | 
|---|
| 152 | //---------------------------------------------------------------------
 | 
|---|
| 153 | 
 | 
|---|
| 154 | /*-- Arguments du constructeur : 
 | 
|---|
| 155 |   o mem : gestionnaire zones memoires avec contenant les "frames" avec 2 voies/frame
 | 
|---|
| 156 |   o path : Chemin et nom des fichiers PPF produits (on ajoute _numero.ppf )
 | 
|---|
| 157 |   o nmean : Nombre de frame (paquets) moyennes
 | 
|---|
| 158 |   o nmax : Nombre maxi de frames traites 
 | 
|---|
| 159 |   o fghist = true -> fait aussi l'histo des valeurs des echantillons temps
 | 
|---|
| 160 |   o nfsmap>0 : fabrication de cartes (image 2D) des spectres, 
 | 
|---|
| 161 |      avec nfsmap=nombre de frequences sommes  
 | 
|---|
| 162 |   o fgnotrl = true -> fichiers fits / paquets sans trailer 
 | 
|---|
| 163 |   o card : numero de carte , juste pour les impressions 
 | 
|---|
| 164 | */
 | 
|---|
| 165 | class BRProcA2C : public ZThread {   // !!!! OBSOLETE  !!!!
 | 
|---|
| 166 | public: 
 | 
|---|
| 167 |   BRProcA2C(RAcqMemZoneMgr& mem, string& path, bool fgraw, 
 | 
|---|
| 168 |             uint_4 nmean=10, uint_4 nmax=100, bool fgtshist=false, 
 | 
|---|
| 169 |             uint_4 nfsmap=0, bool fgnotrl=false, int card=1);
 | 
|---|
| 170 |   virtual void run(); 
 | 
|---|
| 171 |   void Stop();
 | 
|---|
| 172 |   inline void STOP() { stop_ = true; }  
 | 
|---|
| 173 | protected:
 | 
|---|
| 174 |   RAcqMemZoneMgr& memgr;
 | 
|---|
| 175 |   bool stop_;  
 | 
|---|
| 176 |   bool fgraw_;   // true -> raw data 
 | 
|---|
| 177 |   uint_4 nmax_;  // Nombre maxi de blocs MemZone traites
 | 
|---|
| 178 |   uint_4 nmean_;  // Nombre de spectres pour le calcul des moyennes 
 | 
|---|
| 179 |   uint_4 nfsmap_;  // Binning en frequence pour les cartes 2D temps-freq
 | 
|---|
| 180 |   string path_;  
 | 
|---|
| 181 |   bool fghist_;   // if true, fill and save histogram with time sample values
 | 
|---|
| 182 |   bool fgnotrl_;   // if true, don't check packet trailer - when using pre-june fits files
 | 
|---|
| 183 |   int card_;   // Numeros de voies 2*card_-1, 2*card_
 | 
|---|
| 184 | };
 | 
|---|
| 185 | 
 | 
|---|
| 186 | //---------------------------------------------------------------------
 | 
|---|
| 187 | // Classe thread de traitement 2 x 2 voies/paquet (Apres BRProcA2C)
 | 
|---|
| 188 | //         !!!! OBSOLETE  !!!!   
 | 
|---|
| 189 | //---------------------------------------------------------------------
 | 
|---|
| 190 | /*-- Arguments du constructeur : 
 | 
|---|
| 191 |   o mem1,mem2 : gestionnairea zones memoires avec contenant les donnees des 4 voies (2 voies/frame)
 | 
|---|
| 192 |   o path : Chemin et nom des fichiers PPF produits (on ajoute _numero.ppf )
 | 
|---|
| 193 |   o nmean : Nombre de frame (paquets) moyennes
 | 
|---|
| 194 |   o nmax : Nombre maxi de frames traites 
 | 
|---|
| 195 |   o fgnotrl = true -> fichiers fits / paquets sans trailer 
 | 
|---|
| 196 |   o card : numero de carte , juste pour les impressions 
 | 
|---|
| 197 | */
 | 
|---|
| 198 | 
 | 
|---|
| 199 | class BRProcB4C : public ZThread {  //   !!!! OBSOLETE  !!!!   
 | 
|---|
| 200 | 
 | 
|---|
| 201 | public: 
 | 
|---|
| 202 |   BRProcB4C(RAcqMemZoneMgr& mem1, RAcqMemZoneMgr& mem2, string& path, 
 | 
|---|
| 203 |             bool fgraw, uint_4 nmean=10, uint_4 nmax=100, bool fgnotrl=false);
 | 
|---|
| 204 |   virtual void run(); 
 | 
|---|
| 205 |   void Stop();
 | 
|---|
| 206 |   inline void STOP() { stop_ = true; }  
 | 
|---|
| 207 | protected:
 | 
|---|
| 208 |   RAcqMemZoneMgr& memgr1;
 | 
|---|
| 209 |   RAcqMemZoneMgr& memgr2;
 | 
|---|
| 210 |   bool stop_;  
 | 
|---|
| 211 |   bool fgraw_;   // true -> raw data 
 | 
|---|
| 212 |   uint_4 nmax_;  // Nombre maxi de blocs MemZone traites
 | 
|---|
| 213 |   uint_4 nmean_;  // Nombre de blocs pour le calcul des moyennes 
 | 
|---|
| 214 |   string path_;  
 | 
|---|
| 215 |   bool fgnotrl_;   // if true, don't check packet trailer - when using pre-june fits files
 | 
|---|
| 216 | };
 | 
|---|
| 217 | 
 | 
|---|
| 218 | 
 | 
|---|
| 219 | 
 | 
|---|
| 220 | #endif
 | 
|---|