Ë
    ¿™´jj  ã                   ó  — d Z ddlZddlZddlZddlZddlZddlm	Z	m
Z
 ej                  j                  dej                  j                  e«      «       ddlmZmZmZmZ ed   d   Zed   d   Zd„ Zd	„ Zd*d
„Zd*d„Zd„ Zedk(  �rlej8                  d   Zej8                  dd xs;  ed„  ej                  ej                  j?                  eded«      «      D «       «      Z  ede› �«      Z! e«       Z" ejF                  ej                  j?                  ede«      d¬«       e D �]É  Z$ ed„  ej                  ej                  j?                  edee$d«      «      D «       «      Z%e$jM                  d«      reneZ'  e	ed   ¬«      d„ e%D «       «      Z( ejR                  e(D � ��cg c]  \  } }| D ]  }|‘Œ Œ c}}} «      jU                  e"g d¢   d¬«      Z+ ejR                  e(D �� �cg c]  \  }} | D ]  }|‘Œ Œ c}} }«      jU                  e"g d¢   d¬«      Z,e+j[                  ej                  j?                  edee$› d �«      «       e,j[                  ej                  j?                  edee$› d!�«      «       e+j]                  g d"¢d¬#«      j_                  d$„ «      Z0e!jc                  e› d%e$› d& e2e%«      › d'�e0jg                  d(«      ji                  d)«      jk                  «       z   «       �ŒÌ yyc c}}} w c c}} }w )+aš  Evaluate reconstructions: windowed accuracy, whole-trial correlations, 1-s evidence, SNR_1.

Usage: c3_windows.py <cfg> [scheme ...]      (default: every scheme directory present)
Writes
  cache/eval/<cfg>/<scheme>.parquet      per trial x lag x window length: n windows, n correct
  cache/eval/<cfg>/<scheme>_trial.parquet per trial x lag: whole-trial r(col0), r(col1); 1-s evidence sums
  cache/evidence/<cfg>/<scheme>/<lag>/<key>.npz   1-s windows at 0.25-s hop: r0, r1, t_end (s), att
Window w [s, s+W) uses reconstructions yhat[s..s+W-1], i.e. EEG up to (s+W-1+L)/fs: its decision is
stamped at the window end, so the lookahead is the decoder lag L (<= 0.5 s).
é    N)ÚParallelÚdelayed)ÚCACHEÚCFGÚ
get_loggerÚtrial_indexÚdecoderÚ	windows_sÚevidence_hop_sc                 ó  — t        | «      |z  }|dk(  rt        j                  d«      S | d||z   j                  ||«      }||j	                  dd¬«      z
  }t        j                  |df«      }dD ]�  }|d||z  …|f   j                  ||«      }||j	                  dd¬«      z
  }||z  j                  d«      t        j                  |dz  j                  d«      |dz  j                  d«      z  d	z   «      z  |dd…|f<   Œ‘ |S )
z6Non-overlapping windows. y (n,), E (n,2) -> r (nw, 2).r   ©r   é   Né   T)Úkeepdimsr   ©r   r   ç ÂëþKH´9)ÚlenÚnpÚzerosÚreshapeÚmeanÚsumÚsqrt)ÚyÚEÚWÚnwÚYÚoutÚcÚXs           ú_/root/disk_3tb/EEG-sAAD-Grand-Challenge-Training-Dataset/reports/eda_full/scripts/c3_windows.pyÚwin_corr_blocksr#      sþ   € ä	ˆQ‹�1‰€BØ	ˆQ‚wÜ�x‰x˜ÓÐØ	ˆ(ˆB�‰Fˆ×Ñ˜B Ó"€AØ	ˆA�F‰F�1˜tˆFÓ$Ñ$€AÜ
�(‰(�B˜�7Ó
€CÛˆØˆh��Q‘ˆh˜ˆk‰N×"Ñ" 2 qÓ)ˆØ�—‘�q 4�Ó(Ñ(ˆØ˜‘U—K‘K “N¤R§W¡W¨a°1©f¯\©\¸!«_ÀÀQÁ¿|¹|ÈA»Ñ-NÐQVÑ-VÓ%WÑWˆŠAˆqˆDŠ	ð ð €Jó    c           	      óž  — t        | «      }t        j                  d||z
  dz   |«      }t        |«      dk(  rt        j                  d«      |fS d„ } || «       || | z  «      }}|||z      ||   z
  }	|||z      ||   z
  }
|
|	dz  |z  z
  }t        j                  t        |«      df«      }dD ]›  }|dd…|f   } ||«       |||z  «       ||| z  «      }}}|||z      ||   z
  }|||z      ||   z
  }|||z      ||   z
  }|||	z  |z  z
  t        j                  t        j
                  ||dz  |z  z
  |z  d«      «      z  |dd…|f<   Œ� ||fS )	zSWindows of W samples every H samples via cumulative sums. Returns r (nw,2), starts.r   r   r   c                 óX   — t        j                  dgt        j                  | «      g«      S )Ng        )r   ÚconcatenateÚcumsum)Úas    r"   Úcsumzwin_corr_sliding.<locals>.csum0   s    € Ü�~‰~ ˜u¤b§i¡i°£lÐ3Ó4Ð4r$   r   r   Nr   )r   r   Úaranger   r   Úmaximum)r   r   r   ÚHÚnÚstartsr*   ÚSyÚSyyÚsyÚsyyÚvyr   r    ÚxÚSxÚSxxÚSxyÚsxÚsxxÚsxys                        r"   Úwin_corr_slidingr<   )   sƒ  € äˆA‹€AÜ�Y‰Y�q˜!˜a™% !™) QÓ'€FÜ
ˆ6ƒ{�aÒÜ�x‰x˜Ó Ð'Ð'ò5ñ �1‹g‘t˜A ™E“{ˆ€BØ	ˆF�Q‰J‰˜"˜V™*Ñ	$€BØ
ˆf�q‰j‰/˜C ™KÑ
'€CØ	ˆr�Q‰w˜‰{Ñ	€BÜ
�(‰(”C˜“K Ð#Ó
$€CÛˆØŠa�ˆd‰GˆÙ˜A“w¡ Q¨¡U£©T°!°a±%«[�ˆCˆØ�˜‘
‰^˜b ™jÑ(ˆØ�&˜1‘*‰o  F¡Ñ+ˆØ�&˜1‘*‰o  F¡Ñ+ˆØ˜2 ™7 Q™;Ñ&¬"¯'©'´"·*±*¸cÀBÈ!ÁGÈaÁKÑ>OÐSUÑ=UÐW\Ó2]Ó*^Ñ^ˆŠAˆqˆDŠ	ð ð �ˆ;Ðr$   c                 ó@  — |€Kt        | «      |z  }| d ||z   j                  ||«      j                  d«      dkD  j                  t        «      S t        j                  dgt        j                  | «      g«      }|||z      ||   z
  |z  dkD  j                  t        «      S )Nr   ç      à?r   )r   r   r   ÚastypeÚintr   r'   r(   )r)   r   r/   r   r    s        r"   ÚmajorityrA   B   s•   € Ø€~Ü�‹V�q‰[ˆØ�(�B˜‘F�×#Ñ# B¨Ó*×/Ñ/°Ó2°SÑ8×@Ñ@ÄÓEÐEÜ
�‰˜˜œRŸY™Y q›\Ð*Ó+€AØˆv˜‰z‰]˜Q˜v™YÑ&¨!Ñ+¨cÑ1×9Ñ9¼#Ó>Ð>r$   c                 ó 	  — t        j                  t        j                  j	                  t
        d| ||› d�«      «      }t        j                  t        j                  j	                  t
        d| d|› d�«      «      }t        |d   «      t        |d   «      }}g g }	}|j                  D �]Ñ  }
||
   j                  t        «      }t        |«      }|d   d | j                  t        «      }|d   d | j                  t        «      }d}|�1|\  }}t        |d«      t        ||«      }}||| ||| ||| |f\  }}}}t        D ]¬  }t        ||z  «      }t        |||«      }t        ||«      }|d d …d	f   |d d …df   kD  j                  t        «      }|j!                  t#        ||
|t        |«      t        ||k(  j%                  «       «      t        |dk(  j%                  «       «      ¬
«      «       Œ® t        |||«      }t        ||«      }t        j&                  |dk(  |d d …df   |d d …d	f   z
  |d d …d	f   |d d …df   z
  «      }t        j(                  t         j*                  ||f   j,                  «      }|	j!                  t#        ||
|d   |d   t        |«      t        |«      t        |j%                  «       «      t        |dz  j%                  «       «      t        |d d …df   j%                  «       «      t        |d d …d	f   j%                  «       «      ¬«
      «       |��Œ{t/        |||t        t0        |z  «      «      \  }}t        j                  j	                  t
        d| ||
|› d�«      }t        j2                  t        j                  j5                  |«      d¬«       t        j6                  ||d d …df   j                  t         j8                  «      |d d …d	f   j                  t         j8                  «      ||z   |z   |z  |z   j                  t         j8                  «      t        |||«      j                  t         j:                  «      ||t        |
j=                  d«      d	   d d «      dz  ¬«       �ŒÔ ||	fS )NÚreconú.npzÚ_envÚfsÚt0ÚenvÚattr   r   )ÚkeyÚlagÚwÚn_winÚ	n_correctÚn_col0r   r   r   )
rJ   rK   Úr_col0Úr_col1r.   Ún1Úsum_dÚsum_d2Úsum_r0Úsum_r1ÚevidenceT©Úexist_okÚ-éþÿÿÿg     @�@)Úr0Úr1Út_endrI   rF   rG   ÚL_s)r   ÚloadÚosÚpathÚjoinr   r@   ÚfloatÚfilesr?   r   ÚmaxÚminÚWINSr#   rA   ÚappendÚdictr   ÚwhereÚcorrcoefÚc_ÚTr<   ÚHOPÚmakedirsÚdirnameÚsavezÚfloat32Úint8Úsplit)ÚcfgÚschemerJ   ÚsegÚzÚerF   rG   ÚrowsÚtrowsrK   r   r.   r   rI   Úoffr)   ÚbrL   r   ÚrÚlabÚdecr]   Úlab1ÚdÚrrÚrsÚstÚps                                 r"   Ú
eval_trialrˆ   J   sÖ  € Ü
�‰”—‘—‘œU G¨S°&¸S¸EÀ¸,ÓGÓH€AÜ
�‰”—‘—‘œU G¨S°&¸S¸EÀ¸,ÓGÓH€AÜ��4‘‹\œ5  4¡›>ˆ€BØ�bˆ%€DØ�w�wˆØˆc‰F�M‰Mœ%Ó ˆÜ�‹FˆØˆe‰H�R�aˆL×Ñ¤Ó&ˆØ�‰h�r˜ˆl×!Ñ!¤#Ó&ˆØˆØˆ?Ø‰DˆAˆqÜ�q˜!“9œc ! Q›iˆqˆAØ˜q ˜V Q q¨ V¨S°°1¨X°qÐ8‰NˆAˆq�#�sßˆAÜ�A˜‘F“ˆAÜ  1 aÓ(ˆAÜ˜3 Ó"ˆCØ’Q˜�T‘7˜Qšq !˜t™WÑ$×,Ñ,¬SÓ1ˆCØ�K‰Kœ ¨#°¼#¸a»&ÌCÐQTÐX[ÑQ[×P`ÑP`ÓPbÓLcÜ$'¨°©¯©Ó(8Ó$9ô;õ <ð ô ˜Q  2Ó&ˆÜ˜˜RÓ ˆÜ�H‰H�T˜Q‘Y ¢1 a 4¡¨2ªa°¨d©8Ñ 3°Rº¸1¸±XÀÂ1ÀaÀ4ÁÑ5HÓIˆÜ�[‰[œŸ™˜q !˜t™Ÿ™Ó'ˆØ�‰”T˜c s°2°d±8ÀBÀtÁHÔPSÐTUÓPVÔ[^Ð_`Ó[aÜ % a§e¡e£g£´u¸aÀ1¹f¿\¹\»^Ó7LÔUZÐ[]Ò^_ÐabÐ^bÑ[c×[gÑ[gÓ[iÓUjÜ!& rª!¨Q¨$¡x§|¡|£~Ó!6ô8ô 	9ð Š;Ü% a¨¨B´´C¸"±H³Ó>‰FˆB�Ü—‘—‘œU J°°V¸SÀSÀEÈÀ,ÓOˆAÜ�K‰KœŸ™Ÿ™¨Ó*°TÕ:Ü�H‰H�Q˜2ša ˜d™8Ÿ?™?¬2¯:©:Ó6¸2ºaÀ¸d¹8¿?¹?Ì2Ï:É:Ó;VØ "™W s™]¨bÑ0°2Ñ5×=Ñ=¼b¿j¹jÓIÌxÐX[Ð]_ÐacÓOd×OkÑOkÔln×lsÑlsÓOtØ˜r¤u¨S¯Y©Y°s«^¸AÑ->¸sÀÐ-CÓ'DÀvÑ'M÷Oð; ð@ �ˆ;Ðr$   c           
      óR  — t        j                  t        j                  j	                  t
        d| d|› d�«      «      }t        |d   «      t        |d   «      }}t        t        d|z
  |z  «      «      }t        t        d|z  «      «      }|dk(  r|d	fnd
||z
  f}t        | |||«      S )NrC   rE   rD   rF   rG   g     Àr@r>   Úxh_h1i Êš;r   )
r   r`   ra   rb   rc   r   r@   rd   Úroundrˆ   )	rv   rw   rJ   rz   rF   rG   ÚhÚLrx   s	            r"   Úeval_crosshalfrŽ   r   s™   € Ü
�‰”—‘—‘œU G¨S°&¸S¸EÀ¸,ÓGÓH€AÜ��4‘‹\œ5  4¡›>ˆ€BÜŒE�5˜2‘: Ñ#Ó$Ó%€AÜŒE�#˜‘(‹OÓ€AØ  GÒ+ˆ1ˆg‰,°!°Q¸±U°€CÜ�c˜6 3¨Ó,Ð,r$   Ú__main__r   r   c              #   ó¶   K  — | ]Q  }t         j                  j                  |«      j                  d «      s!t         j                  j                  |«      –— ŒS y­w)Ú_N)ra   rb   ÚbasenameÚ
startswith©Ú.0r‡   s     r"   Ú	<genexpr>r–   }   sE   è ø€ ð %QÑBs¸QÜ,.¯G©G×,<Ñ,<¸QÓ,?×,JÑ,JÈ3Ô,Oô &(§W¡W×%5Ñ%5°a×%8ÑBsùs   ‚AArC   Ú*Úc3_ÚevalTrX   c              #   ó`   K  — | ]&  }t         j                  j                  |«      d d –— Œ( y ­w)Néüÿÿÿ)ra   rb   r’   r”   s     r"   r–   r–   ƒ   s)   è ø€ ÐzÑ8y°1”b—g‘g×&Ñ& qÓ)¨#¨2Ô.Ñ8yùs   ‚,.zdataset-*.npzÚxh_Ún_jobs)r�   c              #   óZ   K  — | ]#  } t        t        «      t        t        |«      –— Œ% y ­w©N)r   Úfnrv   Úsc)r•   Úks     r"   r–   r–   …   s    è ø€ Ð,SÉdÈ¨[¬W´R«[¼¼bÀ!×-DÉdùs   ‚)+)rJ   ÚdsÚsubjectÚsubj_uidrJ   )Úonz.parquetz_trial.parquet)rK   rL   r£   )Úobservedc                 ó`   — | j                  d«      j                  d„ «      j                  «       S )Nr¤   c                 ó€   — | j                   j                  «       t        | j                  j                  «       d«      z  S )Nr   )rN   r   rf   rM   )Úss    r"   Ú<lambda>z<lambda>.<locals>.<lambda>‹   s,   € ¸1¿;¹;¿?¹?Ó;LÌsÐST×SZÑSZ×S^ÑS^ÓS`ÐbcÓOdÒ;dr$   )ÚgroupbyÚapplyÚmedian)Úgs    r"   r«   r«   ‹   s"   € �a—i‘i 	Ó*×0Ñ0Ñ1dÓe×lÑlÔnr$   Ú z: z! trials; median subject accuracy
r£   é   rŸ   )6Ú__doc__Úglobra   ÚsysÚnumpyr   ÚpandasÚpdÚjoblibr   r   rb   Úinsertrq   Ú__file__Úcommonr   r   r   r   rh   ro   r#   r<   rA   rˆ   rŽ   Ú__name__Úargvrv   Úsortedrc   ÚschemesÚlogÚtirp   r¡   Úkeysr“   r    ÚresÚ	DataFrameÚmergeÚdfÚtrÚ
to_parquetr¬   r­   ÚaccÚinfor   Úunstackr‹   Ú	to_string)r…   r‘   r   s   000r"   Ú<module>rÍ      sÊ  ðñ	ó Û 	Û 
ã Û ß $à ‡�‡���2—7‘7—?‘? 8Ó,Ô -ß 6Ó 6à
ˆ9�~�kÑ"€Ø	ˆ)�nÐ%Ñ&€òòó2?ó%òP-ð ˆzÓØ
�(‰(�1‰+€CØ�h‰h�q�rˆlò Q™fñ %QÀ)À$Ç)Á)ÈBÏGÉGÏLÉLÐY^Ð`gÐilÐnqÓLrÔBsó %Qó Q€Gá
�s˜3˜%�[Ó
!€CÙ	‹€BØ€B‡K�K�—‘—‘˜U F¨CÓ0¸4Õ@ÜˆÙÑz¸	¸¿	¹	À"Ç'Á'Ç,Á,ÈuÐV]Ð_bÐdfÐhwÓBxÔ8yÓzÓzˆØ!Ÿ}™}¨UÔ3‰^¸ˆØ,‰h˜c (™mÔ,Ñ,SÉdÓ,SÓSˆØˆR�\‰\©#Õ:©#¡  Q³r°!š1°r˜1¨#Ó:Ó;×AÑAÀ"ÒEiÑBjÐotÐAÓuˆØˆR�\‰\©#Õ:©#¡  B³r°!š1°r˜1¨#Ó:Ó;×AÑAÀ"ÒEiÑBjÐotÐAÓuˆØ
�‰�b—g‘g—l‘l 5¨&°#¸"¸¸X°ÓGÔHØ
�‰�b—g‘g—l‘l 5¨&°#¸"¸¸^Ð7LÓMÔNØ�j‰jÒ+°dˆjÓ;×AÑAÙnópˆà�‰�C�5˜˜"˜˜R¡ D£	˜{Ð*LÐMÐPS×P[ÑP[Ð\`ÓPa×PgÑPgÐhiÓPj×PtÑPtÓPvÑvÖwñ ð ùô ;ùÜ:s   Æ%K4Ç)K;