Ë
    Ùßjz  ã                   óŒ  — d Z ddlZddlZddlZddlZddlmZ ddlZddl	Z	ddl
ZddlZddlZddlmZmZmZmZmZ ddlmZ ddlmZmZ ddlmZ edk(  �rÖ ej<                  «       ZejA                  d	e!d¬
«       ejA                  de"d¬
«       ejA                  dd¬«       ejA                  de!d¬
«       ejA                  ddd¬«       ejA                  dd¬«       ejA                  dd¬«       ejA                  dd¬«       ejA                  ddg d¬«       ejA                  ddg d¬«       ejA                  d e"d!¬
«       ejA                  d"d#g d$¢¬%«       ejG                  «       Z$e$jJ                  rZ e!e$jJ                  ez  «      e_&        ejL                  ejN                  z
  ejP                  z
  ejL                  ez
  ce_)        e_*         ejV                  g d&¢e$jX                  i ed'   ¥ed(   d)   ¥¬*«       ddlZ ejZ                  e$j\                  e$j^                  «       ej`                  jW                  e$jb                  ed+   ¬,«        e	jd                  d-«       ejf                  ji                  ed.d/«      Z5e$jl                  jo                  d0«      Z8e8D � ci c]<  } | ejf                  ji                  e5d1| › e$jr                  › d2e$jX                  › d3�«      “Œ> c} Z:e8D � ci c]=  } ejf                  jw                  e:|    «      sŒ"| ejy                   e=e:|    d4«      «      “Œ? c} Z> e?d5„ e8D «       «      �ráej€                  jƒ                  ed6   d7z   «      ZBg g cZCZDeD ]€  ZE eeE«      ZFeBj�                   eHeFj’                  j•                  «       «      «      ZKeFj™                  «       D ]4  \  ZMZNeNd8   eKk(  reDneCjŸ                   ee$jb                  eNd9   «      «       Œ6 Œ‚ eC ed:ge$jb                  ej                   «      z  ZCeCeDz   D ]  ZQ eeQ«      eQd;<   Œ  ej                   d<ejL                  ez  d=›d>e$jX                  › d? eReC«      › d@ eReD«      › dA�	«        ej¦                  eCeDej                    ee$j¨                  e$jª                  dBe$j¬                  ¬C«      e$j®                  «      \  ZXZY e	j´                  eXj·                  «       ejf                  ji                  edDdEe$jr                  › dFe$jX                  › dG�«      «       [C[De8D �cg c]	  }|e>vsŒ|‘Œ c}D ]ö  ZEi e>eE<    ej¸                  eE«      D ]º  ZQ ejº                  eXeQdH    eeQ«      «      \  Z^Z_eQdI   jÁ                  e!«       ejÂ                  e_ejP                  z
  d«         Zb ece^dJz  e^ dJz  ebjÁ                  ejÈ                  «      e_ez  eQdK   z   jÁ                  ejÊ                  «      eQdL   eQdM   eQd8   ¬N«      e>eE   eQd9   <   Œ¼  ejÌ                  e>eE    e=e:eE   dO«      «       Œø ddlgZgddPlmhZh  eidQ«      D ]%  ZM ejdR„ eD «       «      r n egjÖ                  dS«       Œ'  ejØ                  e$jÚ                  dT«      \  ZnZM ejÞ                  eD � �cg c]?  } en|    já                  «       D ]'  }|dU   |dV   z
  ejã                  |dI   dk(  dWdX«      z  ‘Œ) ŒA c}} «      Zr e"erjç                  «       «       e"erjé                  «       «      cZuZve8D �]%  ZE ece$jX                  eEejL                  ez  e$j®                   eceuev¬Y«       ejî                  e>eE   «      dZD �ci c]!  } ex|«      ej                  e>eE   euev|d[«      “Œ# c}¬\«      Zyeyd]   Zz ej                   eE› d^ejL                  ez  d=›d_eyd`   › da�dbji                  dc„ ezj÷                  «       D «       «      z   «        ejÌ                  ey e=ejf                  ji                  e5d1eE› e$jr                  › dFe$jX                  › dd�«      de«      dfe"¬g«       �Œ( yyc c} w c c} w c c}w c c}} w c c}w )ha5  Direct classifier on REAL attention switches (AASD, Carta2026): counterpart of eval_external.py.

Train the direct classifier (direct_classifier.py: prep mat_reac, stimulus features env,onset,dom, synthetic switches in
30% of the training windows) on ALL five corpus datasets + Fuglsang2020 (one validation subject per dataset, the split
of eval_external.py), run it causally on the converted external trials and keep the evidence (no synthetic switch: the
labels are the real key presses). Alone it is scored with HMM emissions from the corpus LODO folds of --ref.
usage: GLIMPSE_THR=norm python eval_external_clf.py --seed 0 [--window-s 10] --init-from models/pretrain_spk_direct_clf_v2_s0.pt
           --ref direct_clf__mat_reac_ptSPKv2 --tag _v2   -> results/research/ext_clf_<DS><tag>_evidence_s<seed>.pkl (+ .json)é    N)ÚSimpleNamespace)ÚCFGÚEXPÚFSÚ
load_trialÚrows_of)ÚDS_KEYS)ÚDÚ_targets)Úload_externalÚ__main__z--seed)ÚtypeÚdefaultz
--window-sz--init-from)r   z--min-epochsé
   z--refTzGcorpus LODO classifier experiment of the same configuration (emissions))ÚrequiredÚhelpz	--datasetzAASD,Carta2026z--tagÚ z--prepÚmat_reacz--setÚ*z,overrides of config dnn, e.g. model_blocks=3)Únargsr   r   z	--aug-setz5overrides of the augmentation, e.g. clf_p_switch2=0.5z
--p-switchg333333Ó?z
--backboneÚvlaai_ws)r   ÚadtÚhappyquokkaÚgru_ffnÚ	conv_attn)r   Úchoices)ÚenvÚonsetÚdomÚdnn_augmentÚaug_variantsÚcluster)ÚtargetsÚ
train_seedÚaugmentr#   )Úprepr#   é   ÚresultsÚresearchÚ,Úext_clf_Ú_evidence_sz.pklÚrbc              #   ó,   K  — | ]  }|t         v–— Œ y ­w©N)ÚEV©Ú.0Údss     ú,/root/disk_3tb/eeg-thao/eval_external_clf.pyÚ	<genexpr>r5   5   s   è ø€ Ð
'¡$˜Bˆ2”RŒ<¡$ùs   ‚Úseedéc   ÚsubjectÚkeyÚFuglsang2020Ú_Szdirect classifier, window Úgz	 s, seed z: z	 train / z val trialsF)ÚbackboneÚp_switchÚzero_eegÚ
min_epochsÚmodelsÚall5_direct_clfÚ_sz.ptÚeegÚatté   Út0Úatt128Ún128)Úr0Úr1rE   Út_endrH   rI   r8   Úwb)Ú	fold_fileiÐ  c              #   óŠ   K  — | ];  }t         j                  j                  t        t        j
                  |«      «      –— Œ= y ­wr/   )ÚosÚpathÚexistsrN   ÚaÚrefr1   s     r4   r5   r5   O   s)   è ø€ ÐF¹g¸Œr�w‰w�~‰~œi¬¯©¨rÓ2×3¹gùs   ‚AAé   ÚcausalrJ   rK   g      ð?g      ð¿)ÚmuÚsd)gZõ¹ÚŠýï?gV-²�ïï?g×£p=
×ï?g®Gáz®ï?g\�Âõ(\ï?gffffffî?gÍÌÌÌÌÌì?g      è?)r6   ÚdatasetÚwindow_sÚ	init_fromÚ	emissionsÚplainÚ	by_p_stayr^   z classifier z
 s: plain r]   z | REAL z  c              #   óH   K  — | ]  \  }}d |› d|d   d›d|d   d›�–— Œ y­w)Úpz H ÚHz.3fz Acc ÚAccz.1fN© )r2   r`   Úvs      r4   r5   r5   Y   sl   è ø€ ð  [\ñ  R[ñ  JNð  JKð  MNÐ]^Ð_`Ð^aÐadÐefÐgjÑekÐloÐdpÐpuÐvwÐx}Ñv~ð  @Cð  vDô  \Eñ  R[ùs   ‚ "z.jsonÚwé   )Úindentr   )|Ú__doc__ÚargparseÚjsonrP   ÚpickleÚtypesr   ÚnumpyÚnpÚtorchÚdirect_classifierÚDCÚeval_externalÚEÚscoreÚSÚ
common_expr   r   r   r   r   Úcommonr	   Údecodersr
   r   Úrun_experimentr   Ú__name__ÚArgumentParserÚapÚadd_argumentÚintÚfloatÚ
parse_argsrS   rZ   ÚWÚFUTÚHOPÚPOS0ÚLABÚupdater6   Úapply_overridesÚsetÚaug_setÚCONFr&   Úset_num_threadsrQ   ÚjoinÚoutrY   ÚsplitÚsetsÚtagÚevprR   ÚloadÚopenr0   ÚanyÚrandomÚdefault_rngÚrngÚtrainÚvalr3   ÚrowsÚchoiceÚsortedr8   ÚuniqueÚvsÚiterrowsÚ_ÚrÚappendÚlogÚtrÚlenÚfitr=   r>   r@   r[   ÚnetÚbestÚsaveÚ
state_dictÚ
ext_trialsÚlogitsÚlgÚstartsÚastypeÚmaximumÚtruthÚdictÚint8Úfloat32ÚdumpÚtimerN   ÚrangeÚallÚsleepÚ
load_foldsrT   ÚevÚconcatenateÚvaluesÚwhereÚAÚmeanÚstdrW   rX   r]   ÚstrÚresÚbÚitems)r3   ÚdÚer`   s   0000r4   Ú<module>rÈ      s+  ðñBó Û Û 	Û Ý !ã Û ã Û Û ß 8Õ 8Ý ß  Ý (àˆzÓØ	 ˆ×	 Ñ	 Ó	"€BØ‡O�O�H 3°€OÔ2Ø‡O�O�L u°d€OÔ;Ø‡O�O�M¨4€OÔ0Ø‡O�O�N¨°b€OÔ9Ø‡O�O�G dÐ1z€OÔ{Ø‡O�O�KÐ)9€OÔ:Ø‡O�O�G R€OÔ(Ø‡O�O�H j€OÔ1Ø‡O�O�G 3°Ð9g€OÔhØ‡O�O�K s°BÐ=t€OÔuØ‡O�O�L u°c€OÔ:Ø‡O�O�L¨*Ò>x€OÔyØ
�‰‹€AØ‡z‚zÙ�1—:‘: ‘?Ó#ˆŒØŸ$™$ §¡™-¨"¯&©&Ñ0°"·$±$¸±)ˆˆŒ�”Ø€A‡H�HÒ,¸¿¹ð  JBÈCÐP]ÑL^ð  JBÐbeÐftÑbuÐvñ  cAð  JBõ  CÛØ€H×Ñ˜QŸU™U A§I¡IÔ.Ø‡F�F‡M�M�q—v‘v q¨¡|€MÔ4Ø€E×Ñ˜!ÔØ
�'‰'�,‰,�s˜I zÓ
2€CØ�9‰9�?‰?˜3Ó€DÙZ^Ó
_ÑZ^ÐTVˆ2ˆr�w‰w�|‰|˜C 8¨B¨4°·±¨w°kÀ!Ç&Á&ÀÈÐ!NÓOÑOÐZ^Ñ
_€CÙ9=Ó	Y¹°2ÀÇÁÇÁÐPSÐTVÑPWÕAXˆ"ˆf�k‰k™$˜s 2™w¨Ó-Ó.Ñ
.¸Ñ	Y€BÙ
Ñ
'¡$Ó
'Õ'Ø�i‰i×#Ñ# C¨¡K°"Ñ$4Ó5ˆØ˜ˆ
ˆˆsÛˆBÙ˜2“;ˆDØ—‘™F 4§<¡<×#6Ñ#6Ó#8Ó9Ó:ˆBØŸ™ž‘��1Ø˜)™¨Ò*‘°×=Ñ=¹jÈÏÉÐQRÐSXÑQYÓ>ZÕ[ñ (ð ð
 	‘ Ð/°·±¸¿¹Ó?Ñ?ˆØ˜#”+ˆBÙ “|ˆBˆtŠHð àˆ�‰Ð*¨2¯4©4°"©9°Q¨-°yÀÇÁÀÈÉ3ÈuË:È,ÐV_Ñ`cÐdgÓ`hÐ_iÐitÐuÔvØ�B—F‘F˜5 # q§u¡u©oÀqÇzÁzÐ\]×\fÑ\fÐqvð  DE÷  DPñ  DPô  /Qð  ST÷  S^ñ  S^ó  _‰	ˆˆTØˆ�
‰
�3—>‘>Ó# R§W¡W§\¡\°#°xÀ?ÐST×SXÑSXÐRYÐY[Ð\]×\bÑ\bÐ[cÐcfÐAgÓ%hÔiØ�3Ù"Ó2™d˜ a¨r¢k’1˜dÔ2ˆBØˆBˆr‰FØ"�a—l‘l 2Ö&�Ø&˜RŸY™Y s¨B¨u©I±xÀ³|ÓD‘
��FØ˜5™	×(Ñ(¨Ó-¨j¨b¯j©j¸À"Ç&Á&¹È!Ó.LÑM�Ù$(¨B°©F¸°s¸Q±wÀEÇLÁLÐQS×QXÑQXÓDYÐbhÐkmÑbmÐprÐswÑpxÑbx÷  bAñ  bAð  BD÷  BLñ  BLó  bMØ02°8±À2ÀfÁ:ÐWYÐZcÑWdô%f��2‘�r˜%‘yÒ!ð 'ð
 ˆF�K‰K˜˜2™¡ S¨¡W¨dÓ 3Õ4ð 3ó Ý$Ù�3ŽZˆÙÑF¹gÓFÔFÙØˆ�
‰
�2�ð ð ˆA�L‰L˜Ÿ™ Ó)�E€BˆØˆ�‰Ñ[bÔ|Ñ[bÐUWÐlnÐoqÑlr×lyÑlyÖl{Ðgh˜˜4™ 1 T¡7Ñ*¨b¯h©h°q¸±xÀ1±}ÀcÈ4Ó.PÓPÐl{ÐPÐ[bÒ|Ó}€AÙ�1—6‘6“8‹_™e A§E¡E£G›n€F€BˆÜˆÙ˜Ÿ™¨°R·T±T¸B±YÈ!Ï+É+ÑaeÐikÐprÔasð  |CÐ{|÷  |Cñ  |Cð  DFð  GIñ  DJó  |KÙP}Ó~ÑP}È1™c !›f a§g¡g¨b°©f°b¸"¸aÀÓ&FÑFÐP}Ñ~ô@ˆà�ÑˆØˆ�‰���L §¡¨¡¨1 ¨Z¸¸G¹°~ÀXÐNÐQU×QZÑQZñ  [\ð  RS÷  RYñ  RYô  R[ó  [\ó  R\ñ  \ô  	]Øˆ�	‰	�#‘t˜BŸG™GŸL™L¨°¸¸¸Q¿U¹U¸GÀ2ÀaÇfÁfÀXÈUÐ.SÓTÐVYÓZÐcdÐns×tñ ðw ùò2 `ùÚ	Yùò  3ùó }ùò s,   ÊA`,Ë%#`1Ì	`1Ô	`6Ô`6ÚA`;
Ý&a