|
completado op clean Rayleigh, modificada la escritura y lectura de hdf5 para potencia, cambio en gráficos para uso del ChannelList, añadir en otros pendiente
|
|
r1397
|
|
''''
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
Created on Set 9, 2015
|
|
|
|
|
|
|
|
|
|
@author: roj-idl71 Karim Kuyeng
|
|
test
|
|
r1376
|
|
|
|
snr coorection for rem sats
|
|
r1566
|
|
@upgrade: 2021, Joab Apaza
|
|
|
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
'''
|
|
|
|
|
|
|
|
|
|
import os
|
|
|
|
|
import sys
|
|
|
|
|
import glob
|
|
|
|
|
import fnmatch
|
|
|
|
|
import datetime
|
|
|
|
|
import time
|
|
|
|
|
import re
|
|
|
|
|
import h5py
|
|
|
|
|
import numpy
|
|
|
|
|
|
|
|
|
|
try:
|
|
|
|
|
from gevent import sleep
|
|
|
|
|
except:
|
|
|
|
|
from time import sleep
|
|
|
|
|
|
|
updates real multiprocess, save hdf5, utils_Io
|
|
r1559
|
|
from schainpy.model.data.jroheaderIO import RadarControllerHeader, SystemHeader,ProcessingHeader
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
from schainpy.model.data.jrodata import Voltage
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
from schainpy.model.proc.jroproc_base import ProcessingUnit, Operation, MPDecorator
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
from numpy import imag
|
|
añadido a jroIO_kamisr.py tratamiento de archivos h5f5 corruptos, mostrará advertencia y continurá en lugar de finalizar el procesamiento
|
|
r1423
|
|
from schainpy.utils import log
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
|
|
Separación de datos antes del 17 de Julio del 2021, donde se modificó los apuntes y la lectura de estos
|
|
r1371
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
class AMISRReader(ProcessingUnit):
|
|
|
|
|
'''
|
|
|
|
|
classdocs
|
|
|
|
|
'''
|
|
|
|
|
|
|
|
|
|
def __init__(self):
|
|
|
|
|
'''
|
|
|
|
|
Constructor
|
|
|
|
|
'''
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
ProcessingUnit.__init__(self)
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.set = None
|
|
|
|
|
self.subset = None
|
|
|
|
|
self.extension_file = '.h5'
|
|
|
|
|
self.dtc_str = 'dtc'
|
|
|
|
|
self.dtc_id = 0
|
|
|
|
|
self.status = True
|
|
|
|
|
self.isConfig = False
|
|
|
|
|
self.dirnameList = []
|
|
|
|
|
self.filenameList = []
|
|
|
|
|
self.fileIndex = None
|
|
|
|
|
self.flagNoMoreFiles = False
|
|
|
|
|
self.flagIsNewFile = 0
|
|
|
|
|
self.filename = ''
|
|
|
|
|
self.amisrFilePointer = None
|
|
modified for reading channels with the same pointing
|
|
r1557
|
|
|
|
Guardado de datos azimuth y elevacion de amisr en hdf5, modificaciones a proc_spectra, proc_param y jrodata
|
|
r1387
|
|
self.beamCodeMap = None
|
|
|
|
|
self.azimuthList = []
|
|
|
|
|
self.elevationList = []
|
|
Cambio en la lectura de archivos, se incluyó detección de cambio de experimento
|
|
r1373
|
|
self.dataShape = None
|
|
corregido reorganización de apuntes en kamisr
|
|
r1420
|
|
self.flag_old_beams = False
|
|
new graph sky map
|
|
r1643
|
|
|
|
|
|
|
self.flagAsync = False #Use when the experiment has no syncronization
|
|
upgrade RTIMapPlot
|
|
r1663
|
|
self.shiftChannels = 0
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.profileIndex = 0
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
|
|
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.beamCodeByFrame = None
|
|
|
|
|
self.radacTimeByFrame = None
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.dataset = None
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.__firstFile = True
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.buffer = None
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.timezone = 'ut'
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.__waitForNewFile = 20
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
self.__filename_online = None
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
#Is really necessary create the output object in the initializer
|
|
|
|
|
self.dataOut = Voltage()
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
self.dataOut.error=False
|
|
cambios para amisr ISR
|
|
r1465
|
|
self.margin_days = 1
|
|
zeroPoints include for zero padding
|
|
r1641
|
|
self.flag_ignoreFiles = False
|
|
|
|
|
self.ignStartDateTime=None
|
|
|
|
|
self.ignEndDateTime=None
|
|
|
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
def setup(self,path=None,
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
startDate=None,
|
|
|
|
|
endDate=None,
|
|
|
|
|
startTime=None,
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
endTime=None,
|
|
|
|
|
walk=True,
|
|
|
|
|
timezone='ut',
|
|
|
|
|
all=0,
|
|
snr coorection for rem sats
|
|
r1566
|
|
code = 1,
|
|
true parallel proc by channels, added class MergeH5(), renamed utils->utilsIO
|
|
r1553
|
|
nCode = 1,
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
nBaud = 0,
|
|
snr coorection for rem sats
|
|
r1566
|
|
nOsamp = 0,
|
|
actualización hdf5, reemplazo .value por [()] en kamisr
|
|
r1421
|
|
online=False,
|
|
cambios para amisr ISR
|
|
r1465
|
|
old_beams=False,
|
|
modified for reading channels with the same pointing
|
|
r1557
|
|
margin_days=1,
|
|
updates real multiprocess, save hdf5, utils_Io
|
|
r1559
|
|
nFFT = None,
|
|
modified for reading channels with the same pointing
|
|
r1557
|
|
nChannels = None,
|
|
zeroPoints include for zero padding
|
|
r1641
|
|
ignStartDate=None,
|
|
|
|
|
ignEndDate=None,
|
|
|
|
|
ignStartTime=None,
|
|
|
|
|
ignEndTime=None,
|
|
upgrade RTIMapPlot
|
|
r1663
|
|
syncronization=True,
|
|
|
|
|
shiftChannels=0
|
|
modified for reading channels with the same pointing
|
|
r1557
|
|
):
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
|
Separación de datos antes del 17 de Julio del 2021, donde se modificó los apuntes y la lectura de estos
|
|
r1371
|
|
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.timezone = timezone
|
|
|
|
|
self.all = all
|
|
|
|
|
self.online = online
|
|
corregido reorganización de apuntes en kamisr
|
|
r1420
|
|
self.flag_old_beams = old_beams
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.code = code
|
|
|
|
|
self.nCode = int(nCode)
|
|
|
|
|
self.nBaud = int(nBaud)
|
|
updates real multiprocess, save hdf5, utils_Io
|
|
r1559
|
|
self.nOsamp = int(nOsamp)
|
|
cambios para amisr ISR
|
|
r1465
|
|
self.margin_days = margin_days
|
|
true parallel proc by channels, added class MergeH5(), renamed utils->utilsIO
|
|
r1553
|
|
self.__sampleRate = None
|
|
new graph sky map
|
|
r1643
|
|
self.flagAsync = not syncronization
|
|
upgrade RTIMapPlot
|
|
r1663
|
|
self.shiftChannels = shiftChannels
|
|
modified for reading channels with the same pointing
|
|
r1557
|
|
self.nFFT = nFFT
|
|
|
|
|
self.nChannels = nChannels
|
|
zeroPoints include for zero padding
|
|
r1641
|
|
if ignStartTime!=None and ignEndTime!=None:
|
|
|
|
|
if ignStartDate!=None and ignEndDate!=None:
|
|
|
|
|
self.ignStartDateTime=datetime.datetime.combine(ignStartDate,ignStartTime)
|
|
|
|
|
self.ignEndDateTime=datetime.datetime.combine(ignEndDate,ignEndTime)
|
|
|
|
|
else:
|
|
|
|
|
self.ignStartDateTime=datetime.datetime.combine(startDate,ignStartTime)
|
|
|
|
|
self.ignEndDateTime=datetime.datetime.combine(endDate,ignEndTime)
|
|
|
|
|
self.flag_ignoreFiles = True
|
|
modified for reading channels with the same pointing
|
|
r1557
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
#self.findFiles()
|
|
|
|
|
if not(online):
|
|
|
|
|
#Busqueda de archivos offline
|
|
zeroPoints include for zero padding
|
|
r1641
|
|
self.searchFilesOffLine(path, startDate, endDate, startTime, endTime, walk,)
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
else:
|
Juan C. Espinoza
Change multiSchain by MPProject
|
|
r1052
|
|
self.searchFilesOnLine(path, startDate, endDate, startTime,endTime,walk)
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
if not(self.filenameList):
|
|
hora y fecha en el primer bloque hdf5 >> consola
|
|
r1400
|
|
raise schainpy.admin.SchainWarning("There is no files into the folder: %s"%(path))
|
|
true parallel proc by channels, added class MergeH5(), renamed utils->utilsIO
|
|
r1553
|
|
#sys.exit(0)
|
|
|
|
|
self.dataOut.error = True
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
|
Cambio en la lectura de archivos, se incluyó detección de cambio de experimento
|
|
r1373
|
|
self.fileIndex = 0
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
|
|
|
|
self.readNextFile(online)
|
|
|
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
'''
|
|
|
|
|
Add code
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
'''
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.isConfig = True
|
|
Separación de datos antes del 17 de Julio del 2021, donde se modificó los apuntes y la lectura de estos
|
|
r1371
|
|
# print("Setup Done")
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
pass
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
|
|
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
def readAMISRHeader(self,fp):
|
|
Cambio en la lectura de archivos, se incluyó detección de cambio de experimento
|
|
r1373
|
|
|
|
f_
|
|
r1374
|
|
if self.isConfig and (not self.flagNoMoreFiles):
|
|
|
|
|
newShape = fp.get('Raw11/Data/Samples/Data').shape[1:]
|
|
|
|
|
if self.dataShape != newShape and newShape != None:
|
|
hora y fecha en el primer bloque hdf5 >> consola
|
|
r1400
|
|
raise schainpy.admin.SchainError("NEW FILE HAS A DIFFERENT SHAPE: ")
|
|
f_
|
|
r1374
|
|
print(self.dataShape,newShape,"\n")
|
|
Cambio en la lectura de archivos, se incluyó detección de cambio de experimento
|
|
r1373
|
|
return 0
|
|
|
|
|
else:
|
|
f_
|
|
r1374
|
|
self.dataShape = fp.get('Raw11/Data/Samples/Data').shape[1:]
|
|
Cambio en la lectura de archivos, se incluyó detección de cambio de experimento
|
|
r1373
|
|
|
|
|
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
header = 'Raw11/Data/RadacHeader'
|
|
modified for reading channels with the same pointing
|
|
r1557
|
|
if self.nChannels == None:
|
|
updates real multiprocess, save hdf5, utils_Io
|
|
r1559
|
|
expFile = fp['Setup/Experimentfile'][()].decode()
|
|
modified for reading channels with the same pointing
|
|
r1557
|
|
linesExp = expFile.split("\n")
|
|
|
|
|
a = [line for line in linesExp if "nbeamcodes" in line]
|
|
|
|
|
self.nChannels = int(a[0][11:])
|
|
|
|
|
|
|
upgrade RTIMapPlot
|
|
r1663
|
|
if not self.flagAsync: #for experiments with no syncronization
|
|
|
|
|
self.shiftChannels = 0
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.beamCodeByPulse = fp.get(header+'/BeamCode') # LIST OF BEAMS PER PROFILE, TO BE USED ON REARRANGE
|
|
upgrade RTIMapPlot
|
|
r1663
|
|
|
|
|
|
|
|
|
modified for reading channels with the same pointing
|
|
r1557
|
|
if (self.startDate > datetime.date(2021, 7, 15)) or self.flag_old_beams: #Se cambió la forma de extracción de Apuntes el 17 o forzar con flag de reorganización
|
|
Separación de datos antes del 17 de Julio del 2021, donde se modificó los apuntes y la lectura de estos
|
|
r1371
|
|
self.beamcodeFile = fp['Setup/Beamcodefile'][()].decode()
|
|
|
|
|
self.trueBeams = self.beamcodeFile.split("\n")
|
|
|
|
|
self.trueBeams.pop()#remove last
|
|
updates real multiprocess, save hdf5, utils_Io
|
|
r1559
|
|
if self.nFFT == None:
|
|
|
|
|
log.error("FFT or number of repetitions per channels is needed",self.name)
|
|
modified for reading channels with the same pointing
|
|
r1557
|
|
beams_idx = [k*self.nFFT for k in range(self.nChannels)]
|
|
|
|
|
beams = [self.trueBeams[b] for b in beams_idx]
|
|
|
|
|
self.beamCode = [int(x, 16) for x in beams]
|
|
|
|
|
|
|
upgrade RTIMapPlot
|
|
r1663
|
|
if(self.flagAsync and self.shiftChannels == 0):
|
|
|
|
|
initBeam = self.beamCodeByPulse[0, 0]
|
|
|
|
|
self.shiftChannels = numpy.argwhere(self.beamCode ==initBeam)[0,0]
|
|
|
|
|
|
|
Separación de datos antes del 17 de Julio del 2021, donde se modificó los apuntes y la lectura de estos
|
|
r1371
|
|
else:
|
|
|
|
|
_beamCode= fp.get('Raw11/Data/Beamcodes') #se usa la manera previa al cambio de apuntes
|
|
|
|
|
self.beamCode = _beamCode[0,:]
|
|
|
|
|
|
|
upgrade RTIMapPlot
|
|
r1663
|
|
|
|
|
|
|
|
|
new graph sky map
|
|
r1643
|
|
|
|
Guardado de datos azimuth y elevacion de amisr en hdf5, modificaciones a proc_spectra, proc_param y jrodata
|
|
r1387
|
|
if self.beamCodeMap == None:
|
|
|
|
|
self.beamCodeMap = fp['Setup/BeamcodeMap']
|
|
|
|
|
for beam in self.beamCode:
|
|
|
|
|
beamAziElev = numpy.where(self.beamCodeMap[:,0]==beam)
|
|
|
|
|
beamAziElev = beamAziElev[0].squeeze()
|
|
|
|
|
self.azimuthList.append(self.beamCodeMap[beamAziElev,1])
|
|
|
|
|
self.elevationList.append(self.beamCodeMap[beamAziElev,2])
|
|
|
|
|
#print("Beamssss: ",self.beamCodeMap[beamAziElev,1],self.beamCodeMap[beamAziElev,2])
|
|
|
|
|
#print(self.beamCode)
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
#self.code = fp.get(header+'/Code') # NOT USE FOR THIS
|
|
|
|
|
self.frameCount = fp.get(header+'/FrameCount')# NOT USE FOR THIS
|
|
|
|
|
self.modeGroup = fp.get(header+'/ModeGroup')# NOT USE FOR THIS
|
|
|
|
|
self.nsamplesPulse = fp.get(header+'/NSamplesPulse')# TO GET NSA OR USING DATA FOR THAT
|
|
|
|
|
self.pulseCount = fp.get(header+'/PulseCount')# NOT USE FOR THIS
|
|
|
|
|
self.radacTime = fp.get(header+'/RadacTime')# 1st TIME ON FILE ANDE CALCULATE THE REST WITH IPP*nindexprofile
|
|
|
|
|
self.timeCount = fp.get(header+'/TimeCount')# NOT USE FOR THIS
|
|
|
|
|
self.timeStatus = fp.get(header+'/TimeStatus')# NOT USE FOR THIS
|
|
|
|
|
self.rangeFromFile = fp.get('Raw11/Data/Samples/Range')
|
|
|
|
|
self.frequency = fp.get('Rx/Frequency')
|
|
updates real multiprocess, save hdf5, utils_Io
|
|
r1559
|
|
txAus = fp.get('Raw11/Data/Pulsewidth') #seconds
|
|
true parallel proc by channels, added class MergeH5(), renamed utils->utilsIO
|
|
r1553
|
|
self.baud = fp.get('Raw11/Data/TxBaud')
|
|
|
|
|
sampleRate = fp.get('Rx/SampleRate')
|
|
|
|
|
self.__sampleRate = sampleRate[()]
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.nblocks = self.pulseCount.shape[0] #nblocks
|
|
modified for reading channels with the same pointing
|
|
r1557
|
|
self.profPerBlockRAW = self.pulseCount.shape[1] #profiles per block in raw data
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.nprofiles = self.pulseCount.shape[1] #nprofile
|
|
new graph sky map
|
|
r1643
|
|
#self.nsa = self.nsamplesPulse[0,0] #ngates
|
|
|
|
|
self.nsa = len(self.rangeFromFile[0])
|
|
lectura de apuntes desde archivo
|
|
r1368
|
|
self.nchannels = len(self.beamCode)
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.ippSeconds = (self.radacTime[0][1] -self.radacTime[0][0]) #Ipp in seconds
|
|
Eliminación de perfiles, retención de bloques, salida en pequeñps bloques o perfiles, rti de outliers
|
|
r1528
|
|
#print("IPPS secs: ",self.ippSeconds)
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
#self.__waitForNewFile = self.nblocks # wait depending on the number of blocks since each block is 1 sec
|
|
|
|
|
self.__waitForNewFile = self.nblocks * self.nprofiles * self.ippSeconds # wait until new file is created
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
#filling radar controller header parameters
|
|
|
|
|
self.__ippKm = self.ippSeconds *.15*1e6 # in km
|
|
updates real multiprocess, save hdf5, utils_Io
|
|
r1559
|
|
#self.__txA = txAus[()]*.15 #(ipp[us]*.15km/1us) in km
|
|
|
|
|
self.__txA = txAus[()] #seconds
|
|
|
|
|
self.__txAKm = self.__txA*1e6*.15
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.__txB = 0
|
|
|
|
|
nWindows=1
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
self.__nSamples = self.nsa
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.__firstHeight = self.rangeFromFile[0][0]/1000 #in km
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
self.__deltaHeight = (self.rangeFromFile[0][1] - self.rangeFromFile[0][0])/1000
|
|
cambios para amisr ISR
|
|
r1465
|
|
#print("amisr-ipp:",self.ippSeconds, self.__ippKm)
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
#for now until understand why the code saved is different (code included even though code not in tuf file)
|
|
|
|
|
#self.__codeType = 0
|
|
|
|
|
# self.__nCode = None
|
|
|
|
|
# self.__nBaud = None
|
|
|
|
|
self.__code = self.code
|
|
|
|
|
self.__codeType = 0
|
|
|
|
|
if self.code != None:
|
|
|
|
|
self.__codeType = 1
|
|
|
|
|
self.__nCode = self.nCode
|
|
|
|
|
self.__nBaud = self.nBaud
|
|
updates real multiprocess, save hdf5, utils_Io
|
|
r1559
|
|
self.__baudTX = self.__txA/(self.nBaud)
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
#self.__code = 0
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
#filling system header parameters
|
|
|
|
|
self.__nSamples = self.nsa
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
self.newProfiles = self.nprofiles/self.nchannels
|
|
true parallel proc by channels, added class MergeH5(), renamed utils->utilsIO
|
|
r1553
|
|
self.__channelList = [n for n in range(self.nchannels)]
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.__frequency = self.frequency[0][0]
|
|
|
|
|
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
|
Cambio en la lectura de archivos, se incluyó detección de cambio de experimento
|
|
r1373
|
|
return 1
|
|
|
|
|
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
def createBuffers(self):
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
|
|
|
|
pass
|
|
|
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
def __setParameters(self,path='', startDate='',endDate='',startTime='', endTime='', walk=''):
|
|
|
|
|
self.path = path
|
|
|
|
|
self.startDate = startDate
|
|
|
|
|
self.endDate = endDate
|
|
|
|
|
self.startTime = startTime
|
|
|
|
|
self.endTime = endTime
|
|
|
|
|
self.walk = walk
|
|
zeroPoints include for zero padding
|
|
r1641
|
|
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
def __checkPath(self):
|
|
|
|
|
if os.path.exists(self.path):
|
|
|
|
|
self.status = 1
|
|
|
|
|
else:
|
|
|
|
|
self.status = 0
|
George Yong
Python 2to3, Spectra (all operations) working
|
|
r1167
|
|
print('Path:%s does not exists'%self.path)
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
return
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
|
|
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
def __selDates(self, amisr_dirname_format):
|
|
|
|
|
try:
|
|
|
|
|
year = int(amisr_dirname_format[0:4])
|
|
|
|
|
month = int(amisr_dirname_format[4:6])
|
|
|
|
|
dom = int(amisr_dirname_format[6:8])
|
|
|
|
|
thisDate = datetime.date(year,month,dom)
|
|
completado op clean Rayleigh, modificada la escritura y lectura de hdf5 para potencia, cambio en gráficos para uso del ChannelList, añadir en otros pendiente
|
|
r1397
|
|
#margen de un día extra, igual luego se filtra for fecha y hora
|
|
cambios para amisr ISR
|
|
r1465
|
|
if (thisDate>=(self.startDate - datetime.timedelta(days=self.margin_days)) and thisDate <= (self.endDate)+ datetime.timedelta(days=1)):
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
return amisr_dirname_format
|
|
|
|
|
except:
|
|
|
|
|
return None
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
|
|
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
def __findDataForDates(self,online=False):
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
if not(self.status):
|
|
|
|
|
return None
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
pat = '\d+.\d+'
|
|
|
|
|
dirnameList = [re.search(pat,x) for x in os.listdir(self.path)]
|
George Yong
Python 2to3, Spectra (all operations) working
|
|
r1167
|
|
dirnameList = [x for x in dirnameList if x!=None]
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
dirnameList = [x.string for x in dirnameList]
|
|
|
|
|
if not(online):
|
|
|
|
|
dirnameList = [self.__selDates(x) for x in dirnameList]
|
George Yong
Python 2to3, Spectra (all operations) working
|
|
r1167
|
|
dirnameList = [x for x in dirnameList if x!=None]
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
if len(dirnameList)>0:
|
|
|
|
|
self.status = 1
|
|
|
|
|
self.dirnameList = dirnameList
|
|
|
|
|
self.dirnameList.sort()
|
|
|
|
|
else:
|
|
|
|
|
self.status = 0
|
|
|
|
|
return None
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
def __getTimeFromData(self):
|
|
|
|
|
startDateTime_Reader = datetime.datetime.combine(self.startDate,self.startTime)
|
|
|
|
|
endDateTime_Reader = datetime.datetime.combine(self.endDate,self.endTime)
|
|
|
|
|
|
George Yong
Python 2to3, Spectra (all operations) working
|
|
r1167
|
|
print('Filtering Files from %s to %s'%(startDateTime_Reader, endDateTime_Reader))
|
|
|
|
|
print('........................................')
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
filter_filenameList = []
|
|
|
|
|
self.filenameList.sort()
|
|
añadido a jroIO_kamisr.py tratamiento de archivos h5f5 corruptos, mostrará advertencia y continurá en lugar de finalizar el procesamiento
|
|
r1423
|
|
total_files = len(self.filenameList)
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
#for i in range(len(self.filenameList)-1):
|
|
añadido a jroIO_kamisr.py tratamiento de archivos h5f5 corruptos, mostrará advertencia y continurá en lugar de finalizar el procesamiento
|
|
r1423
|
|
for i in range(total_files):
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
filename = self.filenameList[i]
|
|
añadido a jroIO_kamisr.py tratamiento de archivos h5f5 corruptos, mostrará advertencia y continurá en lugar de finalizar el procesamiento
|
|
r1423
|
|
#print("file-> ",filename)
|
|
|
|
|
try:
|
|
|
|
|
fp = h5py.File(filename,'r')
|
|
|
|
|
time_str = fp.get('Time/RadacTimeString')
|
|
|
|
|
|
|
|
|
|
startDateTimeStr_File = time_str[0][0].decode('UTF-8').split('.')[0]
|
|
|
|
|
#startDateTimeStr_File = "2019-12-16 09:21:11"
|
|
|
|
|
junk = time.strptime(startDateTimeStr_File, '%Y-%m-%d %H:%M:%S')
|
|
|
|
|
startDateTime_File = datetime.datetime(junk.tm_year,junk.tm_mon,junk.tm_mday,junk.tm_hour, junk.tm_min, junk.tm_sec)
|
|
|
|
|
|
|
|
|
|
#endDateTimeStr_File = "2019-12-16 11:10:11"
|
|
|
|
|
endDateTimeStr_File = time_str[-1][-1].decode('UTF-8').split('.')[0]
|
|
|
|
|
junk = time.strptime(endDateTimeStr_File, '%Y-%m-%d %H:%M:%S')
|
|
|
|
|
endDateTime_File = datetime.datetime(junk.tm_year,junk.tm_mon,junk.tm_mday,junk.tm_hour, junk.tm_min, junk.tm_sec)
|
|
|
|
|
|
|
|
|
|
fp.close()
|
|
|
|
|
|
|
|
|
|
#print("check time", startDateTime_File)
|
|
|
|
|
if self.timezone == 'lt':
|
|
|
|
|
startDateTime_File = startDateTime_File - datetime.timedelta(minutes = 300)
|
|
|
|
|
endDateTime_File = endDateTime_File - datetime.timedelta(minutes = 300)
|
|
|
|
|
if (startDateTime_File >=startDateTime_Reader and endDateTime_File<=endDateTime_Reader):
|
|
|
|
|
filter_filenameList.append(filename)
|
|
|
|
|
|
|
|
|
|
if (startDateTime_File>endDateTime_Reader):
|
|
|
|
|
break
|
|
|
|
|
except Exception as e:
|
|
|
|
|
log.warning("Error opening file {} -> {}".format(os.path.split(filename)[1],e))
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
filter_filenameList.sort()
|
|
|
|
|
self.filenameList = filter_filenameList
|
|
completado op clean Rayleigh, modificada la escritura y lectura de hdf5 para potencia, cambio en gráficos para uso del ChannelList, añadir en otros pendiente
|
|
r1397
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
return 1
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
def __filterByGlob1(self, dirName):
|
|
|
|
|
filter_files = glob.glob1(dirName, '*.*%s'%self.extension_file)
|
|
|
|
|
filter_files.sort()
|
|
|
|
|
filterDict = {}
|
|
|
|
|
filterDict.setdefault(dirName)
|
|
|
|
|
filterDict[dirName] = filter_files
|
|
|
|
|
return filterDict
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
def __getFilenameList(self, fileListInKeys, dirList):
|
|
|
|
|
for value in fileListInKeys:
|
George Yong
Python 2to3, Spectra (all operations) working
|
|
r1167
|
|
dirName = list(value.keys())[0]
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
for file in value[dirName]:
|
|
|
|
|
filename = os.path.join(dirName, file)
|
|
|
|
|
self.filenameList.append(filename)
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
|
|
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
def __selectDataForTimes(self, online=False):
|
|
zeroPoints include for zero padding
|
|
r1641
|
|
#aun no esta implementado el filtro for tiempo-> implementado en readNextFile
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
if not(self.status):
|
|
|
|
|
return None
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
dirList = [os.path.join(self.path,x) for x in self.dirnameList]
|
|
|
|
|
fileListInKeys = [self.__filterByGlob1(x) for x in dirList]
|
|
|
|
|
self.__getFilenameList(fileListInKeys, dirList)
|
|
|
|
|
if not(online):
|
|
|
|
|
#filtro por tiempo
|
|
|
|
|
if not(self.all):
|
|
|
|
|
self.__getTimeFromData()
|
|
|
|
|
|
|
|
|
|
if len(self.filenameList)>0:
|
|
|
|
|
self.status = 1
|
|
|
|
|
self.filenameList.sort()
|
|
|
|
|
else:
|
|
|
|
|
self.status = 0
|
|
|
|
|
return None
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
else:
|
|
|
|
|
#get the last file - 1
|
|
Adicionada operación Clean Rayleigh a Spectra Proc
|
|
r1385
|
|
self.filenameList = [self.filenameList[-2]]
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
new_dirnameList = []
|
|
|
|
|
for dirname in self.dirnameList:
|
|
|
|
|
junk = numpy.array([dirname in x for x in self.filenameList])
|
|
|
|
|
junk_sum = junk.sum()
|
|
|
|
|
if junk_sum > 0:
|
|
|
|
|
new_dirnameList.append(dirname)
|
|
|
|
|
self.dirnameList = new_dirnameList
|
|
|
|
|
return 1
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Juan C. Espinoza
Change multiSchain by MPProject
|
|
r1052
|
|
def searchFilesOnLine(self, path, startDate, endDate, startTime=datetime.time(0,0,0),
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
endTime=datetime.time(23,59,59),walk=True):
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
if endDate ==None:
|
|
|
|
|
startDate = datetime.datetime.utcnow().date()
|
|
|
|
|
endDate = datetime.datetime.utcnow().date()
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.__setParameters(path=path, startDate=startDate, endDate=endDate,startTime = startTime,endTime=endTime, walk=walk)
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.__checkPath()
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.__findDataForDates(online=True)
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.dirnameList = [self.dirnameList[-1]]
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.__selectDataForTimes(online=True)
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
return
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
|
|
|
|
|
Juan C. Espinoza
Change multiSchain by MPProject
|
|
r1052
|
|
def searchFilesOffLine(self,
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
path,
|
|
|
|
|
startDate,
|
|
|
|
|
endDate,
|
|
|
|
|
startTime=datetime.time(0,0,0),
|
|
|
|
|
endTime=datetime.time(23,59,59),
|
|
|
|
|
walk=True):
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.__setParameters(path, startDate, endDate, startTime, endTime, walk)
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.__checkPath()
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.__findDataForDates()
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.__selectDataForTimes()
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
for i in range(len(self.filenameList)):
|
George Yong
Python 2to3, Spectra (all operations) working
|
|
r1167
|
|
print("%s" %(self.filenameList[i]))
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
|
|
|
|
return
|
|
|
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
def __setNextFileOffline(self):
|
|
|
|
|
|
|
Cambio en la lectura de archivos, se incluyó detección de cambio de experimento
|
|
r1373
|
|
try:
|
|
|
|
|
self.filename = self.filenameList[self.fileIndex]
|
|
|
|
|
self.amisrFilePointer = h5py.File(self.filename,'r')
|
|
|
|
|
self.fileIndex += 1
|
|
|
|
|
except:
|
|
|
|
|
self.flagNoMoreFiles = 1
|
|
hora y fecha en el primer bloque hdf5 >> consola
|
|
r1400
|
|
raise schainpy.admin.SchainError('No more files to read')
|
|
Cambio en la lectura de archivos, se incluyó detección de cambio de experimento
|
|
r1373
|
|
return 0
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
|
|
|
|
|
self.flagIsNewFile = 1
|
George Yong
Python 2to3, Spectra (all operations) working
|
|
r1167
|
|
print("Setting the file: %s"%self.filename)
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
|
|
|
|
|
return 1
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
|
|
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
def __setNextFileOnline(self):
|
|
|
|
|
filename = self.filenameList[0]
|
|
|
|
|
if self.__filename_online != None:
|
|
|
|
|
self.__selectDataForTimes(online=True)
|
|
|
|
|
filename = self.filenameList[0]
|
|
|
|
|
wait = 0
|
|
Adicionada operación Clean Rayleigh a Spectra Proc
|
|
r1385
|
|
self.__waitForNewFile=300 ## DEBUG:
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
while self.__filename_online == filename:
|
George Yong
Python 2to3, Spectra (all operations) working
|
|
r1167
|
|
print('waiting %d seconds to get a new file...'%(self.__waitForNewFile))
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
if wait == 5:
|
|
act online
|
|
r1280
|
|
self.flagNoMoreFiles = 1
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
return 0
|
|
|
|
|
sleep(self.__waitForNewFile)
|
|
|
|
|
self.__selectDataForTimes(online=True)
|
|
|
|
|
filename = self.filenameList[0]
|
|
|
|
|
wait += 1
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.__filename_online = filename
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.amisrFilePointer = h5py.File(filename,'r')
|
|
|
|
|
self.flagIsNewFile = 1
|
|
|
|
|
self.filename = filename
|
George Yong
Python 2to3, Spectra (all operations) working
|
|
r1167
|
|
print("Setting the file: %s"%self.filename)
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
return 1
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
|
|
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
def readData(self):
|
|
|
|
|
buffer = self.amisrFilePointer.get('Raw11/Data/Samples/Data')
|
|
|
|
|
re = buffer[:,:,:,0]
|
|
|
|
|
im = buffer[:,:,:,1]
|
|
|
|
|
dataset = re + im*1j
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.radacTime = self.amisrFilePointer.get('Raw11/Data/RadacHeader/RadacTime')
|
|
|
|
|
timeset = self.radacTime[:,0]
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
return dataset,timeset
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
def reshapeData(self):
|
|
modified for reading channels with the same pointing
|
|
r1557
|
|
#print(self.beamCodeByPulse, self.beamCode, self.nblocks, self.nprofiles, self.nsa)
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
channels = self.beamCodeByPulse[0,:]
|
|
|
|
|
nchan = self.nchannels
|
|
|
|
|
#self.newProfiles = self.nprofiles/nchan #must be defined on filljroheader
|
|
|
|
|
nblocks = self.nblocks
|
|
|
|
|
nsamples = self.nsa
|
|
modified for reading channels with the same pointing
|
|
r1557
|
|
#print("Channels: ",self.nChannels)
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
#Dimensions : nChannels, nProfiles, nSamples
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
new_block = numpy.empty((nblocks, nchan, numpy.int_(self.newProfiles), nsamples), dtype="complex64")
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
############################################
|
|
minor changes spectra plot
|
|
r1558
|
|
profPerCH = int(self.profPerBlockRAW / (self.nFFT* self.nChannels))
|
|
updates real multiprocess, save hdf5, utils_Io
|
|
r1559
|
|
#profPerCH = int(self.profPerBlockRAW / self.nChannels)
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
for thisChannel in range(nchan):
|
|
|
|
|
|
|
upgrade RTIMapPlot
|
|
r1663
|
|
ich = thisChannel
|
|
updates real multiprocess, save hdf5, utils_Io
|
|
r1559
|
|
|
|
upgrade RTIMapPlot
|
|
r1663
|
|
idx_ch = [self.nFFT*(ich + nchan*k) for k in range(profPerCH)]
|
|
updates real multiprocess, save hdf5, utils_Io
|
|
r1559
|
|
#print(idx_ch)
|
|
minor changes spectra plot
|
|
r1558
|
|
if self.nFFT > 1:
|
|
|
|
|
aux = [numpy.arange(i, i+self.nFFT) for i in idx_ch]
|
|
|
|
|
idx_ch = None
|
|
|
|
|
idx_ch =aux
|
|
|
|
|
idx_ch = numpy.array(idx_ch, dtype=int).flatten()
|
|
|
|
|
else:
|
|
|
|
|
idx_ch = numpy.array(idx_ch, dtype=int)
|
|
|
|
|
|
|
upgrade RTIMapPlot
|
|
r1663
|
|
#print(ich,profPerCH,idx_ch)
|
|
|
|
|
#print(numpy.where(channels==self.beamCode[ich])[0])
|
|
|
|
|
#new_block[:,ich,:,:] = self.dataset[:,numpy.where(channels==self.beamCode[ich])[0],:]
|
|
|
|
|
new_block[:,ich,:,:] = self.dataset[:,idx_ch,:]
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
new_block = numpy.transpose(new_block, (1,0,2,3))
|
|
|
|
|
new_block = numpy.reshape(new_block, (nchan,-1, nsamples))
|
|
upgrade RTIMapPlot
|
|
r1663
|
|
if self.flagAsync:
|
|
|
|
|
new_block = numpy.roll(new_block, self.shiftChannels, axis=0)
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
return new_block
|
|
|
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
def updateIndexes(self):
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
pass
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
def fillJROHeader(self):
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
#fill radar controller header
|
|
updates real multiprocess, save hdf5, utils_Io
|
|
r1559
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
#fill system header
|
|
|
|
|
self.dataOut.systemHeaderObj = SystemHeader(nSamples=self.__nSamples,
|
|
|
|
|
nProfiles=self.newProfiles,
|
|
|
|
|
nChannels=len(self.__channelList),
|
|
|
|
|
adcResolution=14,
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
pciDioBusWidth=32)
|
|
|
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.dataOut.type = "Voltage"
|
|
|
|
|
self.dataOut.data = None
|
|
|
|
|
self.dataOut.dtype = numpy.dtype([('real','<i8'),('imag','<i8')])
|
|
|
|
|
# self.dataOut.nChannels = 0
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
# self.dataOut.nHeights = 0
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.dataOut.nProfiles = self.newProfiles*self.nblocks
|
|
|
|
|
#self.dataOut.heightList = self.__firstHeigth + numpy.arange(self.__nSamples, dtype = numpy.float)*self.__deltaHeigth
|
|
actualización hdf5, reemplazo .value por [()] en kamisr
|
|
r1421
|
|
ranges = numpy.reshape(self.rangeFromFile[()],(-1))
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.dataOut.heightList = ranges/1000.0 #km
|
|
|
|
|
self.dataOut.channelList = self.__channelList
|
|
updates real multiprocess, save hdf5, utils_Io
|
|
r1559
|
|
|
|
Add metadata attribute to data types
|
|
r1338
|
|
self.dataOut.blocksize = self.dataOut.nChannels * self.dataOut.nHeights
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
# self.dataOut.channelIndexList = None
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
|
Guardado de datos azimuth y elevacion de amisr en hdf5, modificaciones a proc_spectra, proc_param y jrodata
|
|
r1387
|
|
|
|
upgrade RTIMapPlot
|
|
r1663
|
|
#self.dataOut.azimuthList = numpy.roll( numpy.array(self.azimuthList) ,self.shiftChannels)
|
|
|
|
|
#self.dataOut.elevationList = numpy.roll(numpy.array(self.elevationList) ,self.shiftChannels)
|
|
|
|
|
#self.dataOut.codeList = numpy.roll(numpy.array(self.beamCode), self.shiftChannels)
|
|
|
|
|
|
|
|
|
|
self.dataOut.azimuthList = self.azimuthList
|
|
|
|
|
self.dataOut.elevationList = self.elevationList
|
|
|
|
|
self.dataOut.codeList = self.beamCode
|
|
updates real multiprocess, save hdf5, utils_Io
|
|
r1559
|
|
|
|
|
|
|
|
|
|
|
|
|
|
Guardado de datos azimuth y elevacion de amisr en hdf5, modificaciones a proc_spectra, proc_param y jrodata
|
|
r1387
|
|
#print(self.dataOut.elevationList)
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.dataOut.flagNoData = True
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
|
|
|
|
#Set to TRUE if the data is discontinuous
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.dataOut.flagDiscontinuousBlock = False
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.dataOut.utctime = None
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
#self.dataOut.timeZone = -5 #self.__timezone/60 #timezone like jroheader, difference in minutes between UTC and localtime
|
|
|
|
|
if self.timezone == 'lt':
|
|
|
|
|
self.dataOut.timeZone = time.timezone / 60. #get the timezone in minutes
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
else:
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.dataOut.timeZone = 0 #by default time is UTC
|
|
|
|
|
|
|
|
|
|
self.dataOut.dstFlag = 0
|
|
|
|
|
self.dataOut.errorCount = 0
|
|
|
|
|
self.dataOut.nCohInt = 1
|
|
|
|
|
self.dataOut.flagDecodeData = False #asumo que la data esta decodificada
|
|
|
|
|
self.dataOut.flagDeflipData = False #asumo que la data esta sin flip
|
|
|
|
|
self.dataOut.flagShiftFFT = False
|
|
|
|
|
self.dataOut.ippSeconds = self.ippSeconds
|
|
updates real multiprocess, save hdf5, utils_Io
|
|
r1559
|
|
self.dataOut.ipp = self.__ippKm
|
|
update code in spcUpdate from voltage
|
|
r1560
|
|
self.dataOut.nCode = self.__nCode
|
|
|
|
|
self.dataOut.code = self.__code
|
|
|
|
|
self.dataOut.nBaud = self.__nBaud
|
|
updates real multiprocess, save hdf5, utils_Io
|
|
r1559
|
|
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.dataOut.frequency = self.__frequency
|
|
|
|
|
self.dataOut.realtime = self.online
|
|
updates real multiprocess, save hdf5, utils_Io
|
|
r1559
|
|
|
|
|
|
|
self.dataOut.radarControllerHeaderObj = RadarControllerHeader(ipp=self.__ippKm,
|
|
|
|
|
txA=self.__txAKm,
|
|
|
|
|
txB=0,
|
|
|
|
|
nWindows=1,
|
|
|
|
|
nHeights=self.__nSamples,
|
|
|
|
|
firstHeight=self.__firstHeight,
|
|
|
|
|
codeType=self.__codeType,
|
|
|
|
|
nCode=self.__nCode, nBaud=self.__nBaud,
|
|
|
|
|
code = self.__code,
|
|
|
|
|
nOsamp=self.nOsamp,
|
|
|
|
|
frequency = self.__frequency,
|
|
|
|
|
sampleRate= self.__sampleRate,
|
|
|
|
|
fClock=self.__sampleRate)
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
self.dataOut.radarControllerHeaderObj.heightList = ranges/1000.0 #km
|
|
|
|
|
self.dataOut.radarControllerHeaderObj.heightResolution = self.__deltaHeight
|
|
|
|
|
self.dataOut.radarControllerHeaderObj.rangeIpp = self.__ippKm #km
|
|
|
|
|
self.dataOut.radarControllerHeaderObj.rangeTxA = self.__txA*1e6*.15 #km
|
|
|
|
|
self.dataOut.radarControllerHeaderObj.nChannels = self.nchannels
|
|
|
|
|
self.dataOut.radarControllerHeaderObj.channelList = self.__channelList
|
|
|
|
|
self.dataOut.radarControllerHeaderObj.azimuthList = self.azimuthList
|
|
|
|
|
self.dataOut.radarControllerHeaderObj.elevationList = self.elevationList
|
|
|
|
|
self.dataOut.radarControllerHeaderObj.dtype = "Voltage"
|
|
|
|
|
self.dataOut.ippSeconds = self.ippSeconds
|
|
upgrade RTIMapPlot
|
|
r1663
|
|
self.dataOut.ippFactor = self.nFFT
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
pass
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
def readNextFile(self,online=False):
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
if not(online):
|
|
|
|
|
newFile = self.__setNextFileOffline()
|
|
|
|
|
else:
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
newFile = self.__setNextFileOnline()
|
|
|
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
if not(newFile):
|
|
act online
|
|
r1280
|
|
self.dataOut.error = True
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
return 0
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
|
Cambio en la lectura de archivos, se incluyó detección de cambio de experimento
|
|
r1373
|
|
if not self.readAMISRHeader(self.amisrFilePointer):
|
|
|
|
|
self.dataOut.error = True
|
|
|
|
|
return 0
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
|
Cambio en la lectura de archivos, se incluyó detección de cambio de experimento
|
|
r1373
|
|
self.createBuffers()
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.fillJROHeader()
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
#self.__firstFile = False
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.dataset,self.timeset = self.readData()
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
if self.endDate!=None:
|
|
zeroPoints include for zero padding
|
|
r1641
|
|
endDateTime_Reader = datetime.datetime.combine(self.endDate,self.endTime)
|
|
|
|
|
time_str = self.amisrFilePointer.get('Time/RadacTimeString')
|
|
|
|
|
startDateTimeStr_File = time_str[0][0].decode('UTF-8').split('.')[0]
|
|
|
|
|
junk = time.strptime(startDateTimeStr_File, '%Y-%m-%d %H:%M:%S')
|
|
|
|
|
startDateTime_File = datetime.datetime(junk.tm_year,junk.tm_mon,junk.tm_mday,junk.tm_hour, junk.tm_min, junk.tm_sec)
|
|
|
|
|
if self.timezone == 'lt':
|
|
|
|
|
startDateTime_File = startDateTime_File - datetime.timedelta(minutes = 300)
|
|
|
|
|
if (startDateTime_File>endDateTime_Reader):
|
|
|
|
|
return 0
|
|
|
|
|
if self.flag_ignoreFiles and (startDateTime_File >= self.ignStartDateTime and startDateTime_File <= self.ignEndDateTime):
|
|
|
|
|
print("Ignoring...")
|
|
|
|
|
return 0
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.jrodataset = self.reshapeData()
|
|
|
|
|
#----self.updateIndexes()
|
|
|
|
|
self.profileIndex = 0
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
return 1
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
|
|
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
def __hasNotDataInBuffer(self):
|
|
|
|
|
if self.profileIndex >= (self.newProfiles*self.nblocks):
|
|
|
|
|
return 1
|
|
|
|
|
return 0
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
|
|
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
def getData(self):
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
if self.flagNoMoreFiles:
|
|
|
|
|
self.dataOut.flagNoData = True
|
|
|
|
|
return 0
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
|
para pruebas em PC AMISR
|
|
r1541
|
|
if self.profileIndex >= (self.newProfiles*self.nblocks): #
|
|
|
|
|
#if self.__hasNotDataInBuffer():
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
if not (self.readNextFile(self.online)):
|
|
zeroPoints include for zero padding
|
|
r1641
|
|
print("Profile Index break...")
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
return 0
|
|
|
|
|
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
|
|
|
|
if self.dataset is None: # setear esta condicion cuando no hayan datos por leer
|
|
|
|
|
self.dataOut.flagNoData = True
|
|
zeroPoints include for zero padding
|
|
r1641
|
|
print("No more data break...")
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
return 0
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
#self.dataOut.data = numpy.reshape(self.jrodataset[self.profileIndex,:],(1,-1))
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.dataOut.data = self.jrodataset[:,self.profileIndex,:]
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
|
|
|
|
#print("R_t",self.timeset)
|
|
|
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
#self.dataOut.utctime = self.jrotimeset[self.profileIndex]
|
|
|
|
|
#verificar basic header de jro data y ver si es compatible con este valor
|
|
|
|
|
#self.dataOut.utctime = self.timeset + (self.profileIndex * self.ippSeconds * self.nchannels)
|
|
|
|
|
indexprof = numpy.mod(self.profileIndex, self.newProfiles)
|
|
|
|
|
indexblock = self.profileIndex/self.newProfiles
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
#print (indexblock, indexprof)
|
|
|
|
|
diffUTC = 0
|
|
|
|
|
t_comp = (indexprof * self.ippSeconds * self.nchannels) + diffUTC #
|
|
|
|
|
|
|
|
|
|
#print("utc :",indexblock," __ ",t_comp)
|
|
|
|
|
#print(numpy.shape(self.timeset))
|
|
|
|
|
self.dataOut.utctime = self.timeset[numpy.int_(indexblock)] + t_comp
|
|
|
|
|
#self.dataOut.utctime = self.timeset[self.profileIndex] + t_comp
|
|
completado op clean Rayleigh, modificada la escritura y lectura de hdf5 para potencia, cambio en gráficos para uso del ChannelList, añadir en otros pendiente
|
|
r1397
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.dataOut.profileIndex = self.profileIndex
|
|
Adicionada operación Clean Rayleigh a Spectra Proc
|
|
r1385
|
|
#print("N profile:",self.profileIndex,self.newProfiles,self.nblocks,self.dataOut.utctime)
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.dataOut.flagNoData = False
|
|
completado op clean Rayleigh, modificada la escritura y lectura de hdf5 para potencia, cambio en gráficos para uso del ChannelList, añadir en otros pendiente
|
|
r1397
|
|
# if indexprof == 0:
|
|
|
|
|
# print("kamisr: ",self.dataOut.utctime)
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.profileIndex += 1
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
|
Lectura y procesamiento de spectra desde HDF5
|
|
r1404
|
|
return self.dataOut.data #retorno necesario??
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
|
|
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
def run(self, **kwargs):
|
|
|
|
|
'''
|
|
|
|
|
This method will be called many times so here you should put all your code
|
|
|
|
|
'''
|
|
Separación de datos antes del 17 de Julio del 2021, donde se modificó los apuntes y la lectura de estos
|
|
r1371
|
|
#print("running kamisr")
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
if not self.isConfig:
|
|
|
|
|
self.setup(**kwargs)
|
|
|
|
|
self.isConfig = True
|
|
Modificación a kmamisr para ejecutarse en la versión 3, creación de scripts con terminación v3 para difereciarlos, se comentó la linea #720 de JroIO_param.py debido a que reiniciaba la lista de archivos, ocasionando la reescritura del archivo hdf5. Alguna otra modificación aparente es producto de algunas variaciones en espacios al usar la función print()
|
|
r1279
|
|
|
Karim Valdez
To be able to use this jroIO_kamisr.py change on the io/__init__.py the jroIO_amisr to jro_IOkamisr...
|
|
r665
|
|
self.getData()
|
|
|
|
