[suite26] preflight environment check [PYTHON] 3.13.5 [TORCH] 2.7.1+cu118 cuda=True device=Tesla V100-SXM2-32GB [SKLEARN] 1.7.1 [DATA] faculties=14 folds=[1, 2, 3, 4, 5, 6, 7] [CHECK] fold 1: PASS [CHECK] fold 2: PASS [CHECK] fold 3: PASS [CHECK] fold 4: PASS [CHECK] fold 5: PASS [CHECK] fold 6: PASS [CHECK] fold 7: PASS [CHECK] common raw features across inspected caches: 136 [CHECK] Suite26 environment PASS [suite26] starting frozen Suite26 experiment ============================================================================================================================================================================================== SUITE26 — TREE-NATIVE ENCODER + TARGET-CONDITIONED STUDENT MEMORY + LATENT ABILITY–REQUIREMENT INTERACTION (TAIR) single internal ExtraTrees current-state learner | compact leaf embeddings | same-student episodic memory with observed grades/outcomes | target-conditioned attention | multidimensional student ability vs course requirement | Committee only as reference/blend ablation ============================================================================================================================================================================================== [ENV] device=cuda torch=2.7.1+cu118 faculties=14 folds=[1, 2, 3, 4, 5, 6, 7] dev=[1, 2, 3, 4, 5] holdout=[6, 7] common_raw=136 current_features=153 [SCIENTIFIC CONTRACT] A=suite26_tree (single ExtraTrees current-state baseline, NOT Committee); B=suite26_tree_memory adds target-conditioned same-student episodic memory; C=suite26_tair PRIMARY adds latent ability–requirement interaction. Historical events must be strictly earlier than the query semester; same-semester outcomes are forbidden. Committee is not an input to A/B/C and is used only as a reference plus secondary blend ablation. F6/F7 never select tree/model epochs, calibration, or blend. ============================================================================================================================================================================================== SUITE26 TARGET FOLD 1 ============================================================================================================================================================================================== [DATA] history=240,672 fail=4,445 (1.85%) train=141,668 validation=99,004 target=45,800 fail=1,083 (2.36%) [TREE] fitting selection tree on older training blocks only... [TREE] selection summary={'n_trees': 96, 'leaf_vocab_size': 73729, 'mean_leaves_per_tree': 768.0, 'min_leaves_per_tree': 768, 'max_leaves_per_tree': 768, 'training_oob_ap': 0.6633201261778842} [TREE-HISTORY-SEL] 50,000/240,672 [TREE-HISTORY-SEL] 100,000/240,672 [TREE-HISTORY-SEL] 150,000/240,672 [TREE-HISTORY-SEL] 200,000/240,672 [TREE-HISTORY-SEL] 240,672/240,672 [TREE] calibration a=1.0588 b=-1.0398 validation macroAP=0.2285 training_OOB_AP=0.6633201261778842 [HISTORY STORE] selection phase (memory candidates restricted to training partition)... [HISTORY STORE] 50,000/240,672 [HISTORY STORE] 100,000/240,672 [HISTORY STORE] 150,000/240,672 [HISTORY STORE] 200,000/240,672 FOLD 1 SELECTION STUDENT-HISTORY SUPPORT -------------------------------------------------------------------------------- faculty rows prevalence history_mean history_zero_rate history_failure_mean same_course_history_mean course_seen_mean new_course_rate history_grade_present_rate khoa_cong_nghe_thong_tin 19090 0.030173 7.423468 0.388109 0.128549 0.000052 570.174594 0.079518 1.0 khoa_quan_tri_kinh_doanh_va_du_lich 33453 0.027352 8.313186 0.290288 0.102233 0.000000 834.995606 0.035124 1.0 khoa_quoc_te_hoc 10439 0.009388 7.474567 0.352524 0.022320 0.000000 582.552639 0.049813 1.0 khoa_tieng_anh 47997 0.017105 9.460341 0.284289 0.025835 0.000000 685.563452 0.113174 1.0 khoa_tieng_bo_dao_nha 4117 0.029876 10.469760 0.247510 0.087199 0.000000 585.233908 0.029147 1.0 khoa_tieng_duc 10883 0.015804 9.802720 0.328862 0.048700 0.000000 652.836534 0.037673 1.0 khoa_tieng_han_quoc 17102 0.004385 10.508128 0.298620 0.020816 0.000000 642.946030 0.081628 1.0 khoa_tieng_italia 10650 0.030610 8.619437 0.283099 0.129953 0.000000 597.104507 0.118685 1.0 khoa_tieng_nga 6608 0.040860 9.911925 0.298426 0.171459 0.000000 627.811743 0.043735 1.0 khoa_tieng_nhat 19043 0.010450 9.310823 0.311506 0.026992 0.000000 641.036496 0.046159 1.0 khoa_tieng_phap 15265 0.011661 10.130102 0.301277 0.038192 0.000000 622.427841 0.017819 1.0 khoa_tieng_tay_ban_nha 8025 0.021184 8.474517 0.298442 0.071776 0.000000 572.082492 0.092710 1.0 khoa_tieng_trung_quoc 32781 0.005644 10.327568 0.265642 0.030231 0.000000 787.790275 0.053080 1.0 khoa_viet_nam_hoc 5219 0.064572 7.225522 0.296609 0.281280 0.000000 97.727534 0.130485 1.0 ------------------------------------------------------------------------------------------------------------------------------------------------------ [VARIANT suite26_tree_memory] [SELECT MEMORY] epoch=01/12 loss=0.09735 BCE=0.06831 rank=0.14028 joint=0.05077 ability=0.00000 macroAP=0.1777 F2@20=0.2257 Brier=0.0189 best=01 [SELECT MEMORY] epoch=02/12 loss=0.07979 BCE=0.06282 rank=0.07328 joint=0.03201 ability=0.00000 macroAP=0.1767 F2@20=0.2238 Brier=0.0189 best=01 [SELECT MEMORY] epoch=03/12 loss=0.07290 BCE=0.05940 rank=0.05850 joint=0.02303 ability=0.00000 macroAP=0.1732 F2@20=0.2239 Brier=0.0189 best=01 [SELECT MEMORY] epoch=04/12 loss=0.07293 BCE=0.05991 rank=0.06180 joint=0.02055 ability=0.00000 macroAP=0.1918 F2@20=0.2257 Brier=0.0186 best=04 [SELECT MEMORY] epoch=05/12 loss=0.07337 BCE=0.06018 rank=0.06217 joint=0.01843 ability=0.00000 macroAP=0.1939 F2@20=0.2241 Brier=0.0185 best=05 [SELECT MEMORY] epoch=06/12 loss=0.06888 BCE=0.05802 rank=0.05042 joint=0.01625 ability=0.00000 macroAP=0.1690 F2@20=0.2237 Brier=0.0189 best=05 [SELECT MEMORY] epoch=07/12 loss=0.06911 BCE=0.05762 rank=0.05805 joint=0.01512 ability=0.00000 macroAP=0.1766 F2@20=0.2249 Brier=0.0190 best=05 [SELECT MEMORY] epoch=08/12 loss=0.06639 BCE=0.05702 rank=0.04443 joint=0.01319 ability=0.00000 macroAP=0.1751 F2@20=0.2237 Brier=0.0189 best=05 ------------------------------------------------------------------------------------------------------------------------------------------------------ [VARIANT suite26_tair] [SELECT TAIR] epoch=01/12 loss=0.10042 BCE=0.06866 rank=0.12165 joint=0.05304 ability=0.09834 macroAP=0.2001 F2@20=0.2329 Brier=0.0185 best=01 [SELECT TAIR] epoch=02/12 loss=0.09189 BCE=0.06598 rank=0.09492 joint=0.04333 ability=0.08164 macroAP=0.1799 F2@20=0.2268 Brier=0.0188 best=01 [SELECT TAIR] epoch=03/12 loss=0.08025 BCE=0.06111 rank=0.06554 joint=0.02925 ability=0.07408 macroAP=0.1727 F2@20=0.2257 Brier=0.0188 best=01 [SELECT TAIR] epoch=04/12 loss=0.07875 BCE=0.05995 rank=0.07237 joint=0.02455 ability=0.06953 macroAP=0.1755 F2@20=0.2247 Brier=0.0188 best=01 [SELECT TAIR] epoch=05/12 loss=0.07877 BCE=0.05992 rank=0.07913 joint=0.02125 ability=0.06710 macroAP=0.1738 F2@20=0.2241 Brier=0.0189 best=01 [COMMITTEE BLEND ABLATION] selected alpha=0.10 policyAP=0.3492 policyF2=0.2826 [TREE] fitting production tree on all permissible history... [TREE] production summary={'n_trees': 96, 'leaf_vocab_size': 73729, 'mean_leaves_per_tree': 768.0, 'min_leaves_per_tree': 768, 'max_leaves_per_tree': 768, 'training_oob_ap': 0.5250606260601953} [TREE-HISTORY-PROD] 50,000/240,672 [TREE-HISTORY-PROD] 100,000/240,672 [TREE-HISTORY-PROD] 150,000/240,672 [TREE-HISTORY-PROD] 200,000/240,672 [TREE-HISTORY-PROD] 240,672/240,672 [TREE-TARGET-PROD] 45,800/45,800 [HISTORY STORE] production history... [HISTORY STORE] 50,000/240,672 [HISTORY STORE] 100,000/240,672 [HISTORY STORE] 150,000/240,672 [HISTORY STORE] 200,000/240,672 [HISTORY STORE] production target... FOLD 1 TARGET STUDENT-HISTORY SUPPORT -------------------------------------------------------------------------------- faculty rows prevalence history_mean history_zero_rate history_failure_mean same_course_history_mean course_seen_mean new_course_rate history_grade_present_rate fold khoa_cong_nghe_thong_tin 5222 0.036193 10.586174 0.375527 0.118728 0.000000 642.190349 0.086174 1.0 1 khoa_quan_tri_kinh_doanh_va_du_lich 5672 0.038611 9.311354 0.391396 0.225141 0.000176 1049.395275 0.036319 1.0 1 khoa_quoc_te_hoc 2363 0.013119 8.955142 0.415573 0.044435 0.000000 706.945832 0.091409 1.0 1 khoa_tieng_anh 8164 0.018128 11.665483 0.355708 0.018373 0.000000 797.350563 0.024130 1.0 1 khoa_tieng_bo_dao_nha 768 0.039062 11.682292 0.363281 0.298177 0.000000 700.809896 0.011719 1.0 1 khoa_tieng_duc 1900 0.024211 11.888421 0.349474 0.052105 0.000000 763.664737 0.003684 1.0 1 khoa_tieng_han_quoc 2904 0.006887 12.938361 0.322658 0.024105 0.000000 721.140496 0.122934 1.0 1 khoa_tieng_italia 2166 0.051247 13.834718 0.238227 0.126500 0.000000 649.145429 0.038781 1.0 1 khoa_tieng_nga 1588 0.064232 11.578086 0.407431 0.246222 0.000000 770.435139 0.004408 1.0 1 khoa_tieng_nhat 2840 0.005986 12.060915 0.387324 0.032042 0.000000 682.387676 0.035915 1.0 1 khoa_tieng_phap 2606 0.016117 12.876055 0.307751 0.061013 0.000000 700.722947 0.004221 1.0 1 khoa_tieng_tay_ban_nha 1401 0.044968 13.824411 0.293362 0.183440 0.000000 675.700928 0.003569 1.0 1 khoa_tieng_trung_quoc 7393 0.004734 14.402408 0.233870 0.030705 0.000000 790.544840 0.065332 1.0 1 khoa_viet_nam_hoc 813 0.036900 7.981550 0.451415 0.161132 0.000000 203.820418 0.000000 1.0 1 [REFIT MEMORY] epoch=01/5 loss=0.11030 BCE=0.08265 rank=0.12109 joint=0.05078 ability=0.00000 [REFIT MEMORY] epoch=05/5 loss=0.08635 BCE=0.07358 rank=0.04716 joint=0.02269 ability=0.00000 [VARIANT suite26_tree_memory] selected_epochs=5 target macroAP=0.1882 [REFIT TAIR] epoch=01/1 loss=0.11500 BCE=0.08264 rank=0.12024 joint=0.05357 ability=0.08456 [VARIANT suite26_tair] selected_epochs=1 target macroAP=0.1812 FOLD 1 TREE CURRENT-STATE FEATURE IMPORTANCE -------------------------------------------------------------------------------- rank feature importance fold 1 course_status_FIT ||| ứng_dụng_công_nghệ_thông_tin ||| Computer Skills 0.069370 1 2 recent3_course_grade10_mean 0.056238 1 3 hist_course_pass_rate 0.049223 1 4 prev_semester_gpa10 0.037763 1 5 hist_semester_gpa10_mean 0.028116 1 6 prev_failed_credits 0.027325 1 7 hist_component_grade_mean 0.026008 1 8 hist_component_K2_mean 0.024054 1 9 hist_course_grade10_mean 0.021689 1 10 recent3_semester_gpa10_mean 0.021205 1 11 hist_warning_in_last_semester 0.019097 1 12 prev_cumulative_gpa10 0.018253 1 13 recent3_warning_count 0.016317 1 14 recent3_course_grade10_median 0.015298 1 15 prev_outstanding_failed_credits 0.015157 1 16 recent3_component_grade_mean 0.014051 1 17 target_semester_registered_credits 0.013694 1 18 hist_passed_credits_sum 0.013289 1 19 target_semester_difficulty_weighted_workload 0.012899 1 20 hist_warning_rate 0.012367 1 21 hist_cumulative_gpa10_mean 0.011130 1 22 recent3_course_grade10_count 0.010775 1 23 hist_component_special_rate 0.010255 1 24 hist_component_low_rate 0.010146 1 25 hist_course_grade10_median 0.009866 1 26 recent3_component_grade_count 0.009285 1 27 prev_passed_credits 0.008476 1 28 recent3_course_grade10_max 0.008293 1 29 recent3_course_grade10_std 0.008248 1 30 hist_failed_credits_sum 0.008168 1 31 hist_course_grade10_max 0.007881 1 32 hist_registered_credits_mean 0.007857 1 33 hist_course_grade10_std 0.007803 1 34 recent3_registered_credits_mean 0.007705 1 35 hist_component_T1_special_count 0.007643 1 36 hist_course_grade10_min 0.007456 1 37 hist_component_T1_count 0.007379 1 38 recent3_component_grade_median 0.007352 1 39 target_semester_unseen_course_rate 0.007295 1 40 hist_component_numeric_rate 0.007037 1 SUITE26 TARGET FOLD 1 — NEW + AVAILABLE REFERENCE RESULTS -------------------------------------------------------------------------------- fold faculty model rows failures prevalence ap auc brier ece10 mean_score calibration_gap precision_at_10 recall_at_10 f1_at_10 fbeta_at_10 precision_at_15 recall_at_15 f1_at_15 fbeta_at_15 precision_at_20 recall_at_20 f1_at_20 fbeta_at_20 precision_at_25 recall_at_25 f1_at_25 fbeta_at_25 1 khoa_cong_nghe_thong_tin committee 5222 189 0.036193 0.203171 0.751852 0.032053 0.003231 0.033469 -0.002724 0.155172 0.428571 0.227848 0.316901 0.132822 0.550265 0.213992 0.337882 0.119732 0.661376 0.202758 0.347222 0.101838 0.703704 0.177926 0.322502 1 khoa_cong_nghe_thong_tin council 5222 189 0.036193 0.260592 0.801039 0.030963 0.015802 0.043946 0.007753 0.199234 0.550265 0.292546 0.406886 0.151980 0.629630 0.244856 0.386615 0.122605 0.677249 0.207624 0.355556 0.105666 0.730159 0.184615 0.334627 1 khoa_cong_nghe_thong_tin suite14 5222 189 0.036193 0.203171 0.751852 0.032053 0.003231 0.033469 -0.002724 0.155172 0.428571 0.227848 0.316901 0.132822 0.550265 0.213992 0.337882 0.119732 0.661376 0.202758 0.347222 0.101838 0.703704 0.177926 0.322502 1 khoa_cong_nghe_thong_tin suite16 5222 189 0.036193 0.232711 0.786823 0.040898 0.059310 0.095503 0.059310 0.191571 0.529101 0.281294 0.391236 0.155811 0.645503 0.251029 0.396361 0.121648 0.671958 0.206002 0.352778 0.101072 0.698413 0.176589 0.320078 1 khoa_cong_nghe_thong_tin suite17 5222 189 0.036193 0.239934 0.793674 0.031565 0.005195 0.033913 -0.002280 0.187739 0.518519 0.275668 0.383412 0.157088 0.650794 0.253086 0.399610 0.126437 0.698413 0.214112 0.366667 0.103369 0.714286 0.180602 0.327352 1 khoa_cong_nghe_thong_tin suite18 5222 189 0.036193 0.234042 0.783887 0.031605 0.005751 0.034022 -0.002171 0.181992 0.502646 0.267229 0.371674 0.153257 0.634921 0.246914 0.389864 0.120690 0.666667 0.204380 0.350000 0.104135 0.719577 0.181940 0.329777 1 khoa_cong_nghe_thong_tin suite20 5222 189 0.036193 0.155602 0.827000 0.058503 0.057068 0.088409 0.052216 0.168582 0.465608 0.247539 0.344288 0.144317 0.597884 0.232510 0.367122 0.121648 0.671958 0.206002 0.352778 0.101838 0.703704 0.177926 0.322502 1 khoa_cong_nghe_thong_tin suite21 5222 189 0.036193 0.230687 0.760843 0.031478 0.005320 0.030951 -0.005242 0.172414 0.476190 0.253165 0.352113 0.143040 0.592593 0.230453 0.363873 0.121648 0.671958 0.206002 0.352778 0.101838 0.703704 0.177926 0.322502 1 khoa_cong_nghe_thong_tin suite22 5222 189 0.036193 0.249648 0.775627 0.031410 0.006286 0.034437 -0.001756 0.193487 0.534392 0.284107 0.395149 0.157088 0.650794 0.253086 0.399610 0.125479 0.693122 0.212490 0.363889 0.101838 0.703704 0.177926 0.322502 1 khoa_cong_nghe_thong_tin suite22_primary 5222 189 0.036193 0.302205 0.821158 0.030412 0.013439 0.045165 0.008972 0.189655 0.523810 0.278481 0.387324 0.153257 0.634921 0.246914 0.389864 0.123563 0.682540 0.209246 0.358333 0.104900 0.724868 0.183278 0.332202 1 khoa_cong_nghe_thong_tin suite22_relational 5222 189 0.036193 0.253188 0.770428 0.032030 0.023443 0.012750 -0.023443 0.216475 0.597884 0.317862 0.442097 0.154534 0.640212 0.248971 0.393112 0.123563 0.682540 0.209246 0.358333 0.099541 0.687831 0.173913 0.315228 1 khoa_cong_nghe_thong_tin suite23 5222 189 0.036193 0.241861 0.823590 0.031793 0.013566 0.022627 -0.013566 0.178161 0.492063 0.261603 0.363850 0.140485 0.582011 0.226337 0.357375 0.119732 0.661376 0.202758 0.347222 0.107963 0.746032 0.188629 0.341901 1 khoa_cong_nghe_thong_tin suite23_graph 5222 189 0.036193 0.228183 0.841801 0.031897 0.016805 0.019388 -0.016805 0.180077 0.497354 0.264416 0.367762 0.149425 0.619048 0.240741 0.380117 0.125479 0.693122 0.212490 0.363889 0.111792 0.772487 0.195318 0.354025 1 khoa_cong_nghe_thong_tin suite24 5222 189 0.036193 0.195138 0.773340 0.032335 0.016983 0.020370 -0.015823 0.141762 0.391534 0.208158 0.289515 0.117497 0.486772 0.189300 0.298895 0.108238 0.597884 0.183293 0.313889 0.099541 0.687831 0.173913 0.315228 1 khoa_cong_nghe_thong_tin suite24_posthoc 5222 189 0.036193 0.231553 0.780281 0.031930 0.009309 0.026884 -0.009309 0.176245 0.486772 0.258790 0.359937 0.148148 0.613757 0.238683 0.376868 0.119732 0.661376 0.202758 0.347222 0.102603 0.708995 0.179264 0.324927 1 khoa_cong_nghe_thong_tin suite25 5222 189 0.036193 0.275212 0.836310 0.031230 0.022092 0.015381 -0.020812 0.199234 0.550265 0.292546 0.406886 0.146871 0.608466 0.236626 0.373619 0.119732 0.661376 0.202758 0.347222 0.103369 0.714286 0.180602 0.327352 1 khoa_cong_nghe_thong_tin suite25_blend 5222 189 0.036193 0.229828 0.768471 0.031786 0.006902 0.029549 -0.006644 0.187739 0.518519 0.275668 0.383412 0.141762 0.587302 0.228395 0.360624 0.120690 0.666667 0.204380 0.350000 0.103369 0.714286 0.180602 0.327352 1 khoa_cong_nghe_thong_tin suite26_committee_blend 5222 189 0.036193 0.197570 0.755502 0.032130 0.003655 0.032937 -0.003256 0.151341 0.417989 0.222222 0.309077 0.128991 0.534392 0.207819 0.328135 0.117816 0.650794 0.199513 0.341667 0.102603 0.708995 0.179264 0.324927 1 khoa_cong_nghe_thong_tin suite26_joint_head 5222 189 0.036193 0.301423 0.769332 0.029205 0.010493 0.028467 -0.007726 0.201149 0.555556 0.295359 0.410798 0.137931 0.571429 0.222222 0.350877 0.113027 0.624339 0.191403 0.327778 0.094946 0.656085 0.165886 0.300679 1 khoa_cong_nghe_thong_tin suite26_tair 5222 189 0.036193 0.132902 0.762646 0.034430 0.018051 0.039646 0.003453 0.111111 0.306878 0.163150 0.226917 0.086845 0.359788 0.139918 0.220923 0.075670 0.417989 0.128143 0.219444 0.069678 0.481481 0.121739 0.220660 1 khoa_cong_nghe_thong_tin suite26_tree 5222 189 0.036193 0.241839 0.769330 0.031048 0.012351 0.046282 0.010089 0.178161 0.492063 0.261603 0.363850 0.148148 0.613757 0.238683 0.376868 0.117816 0.650794 0.199513 0.341667 0.100306 0.693122 0.175251 0.317653 1 khoa_cong_nghe_thong_tin suite26_tree_memory 5222 189 0.036193 0.142155 0.762957 0.033792 0.011789 0.039689 0.003496 0.111111 0.306878 0.163150 0.226917 0.086845 0.359788 0.139918 0.220923 0.075670 0.417989 0.128143 0.219444 0.069678 0.481481 0.121739 0.220660 1 khoa_cong_nghe_thong_tin v2 5222 189 0.036193 0.269994 0.826255 0.033188 0.027855 0.064048 0.027855 0.181992 0.502646 0.267229 0.371674 0.153257 0.634921 0.246914 0.389864 0.125479 0.693122 0.212490 0.363889 0.104135 0.719577 0.181940 0.329777 1 khoa_quan_tri_kinh_doanh_va_du_lich committee 5672 219 0.038611 0.517408 0.916837 0.028132 0.013695 0.028453 -0.010158 0.294533 0.762557 0.424936 0.578656 0.212691 0.826484 0.338318 0.524030 0.168430 0.872146 0.282336 0.475124 0.136812 0.885845 0.237019 0.422842 1 khoa_quan_tri_kinh_doanh_va_du_lich suite14 5672 219 0.038611 0.568782 0.929170 0.023901 0.013153 0.035785 -0.002826 0.319224 0.826484 0.460560 0.627166 0.226792 0.881279 0.360748 0.558772 0.172840 0.894977 0.289727 0.487562 0.140339 0.908676 0.243128 0.433740 1 khoa_quan_tri_kinh_doanh_va_du_lich suite16 5672 219 0.038611 0.547260 0.920354 0.031167 0.052708 0.091319 0.052708 0.298060 0.771689 0.430025 0.585586 0.219741 0.853881 0.349533 0.541401 0.169312 0.876712 0.283814 0.477612 0.137518 0.890411 0.238241 0.425022 1 khoa_quan_tri_kinh_doanh_va_du_lich suite17 5672 219 0.038611 0.533732 0.924074 0.027221 0.016528 0.031484 -0.007126 0.303351 0.785388 0.437659 0.595981 0.217391 0.844749 0.345794 0.535611 0.168430 0.872146 0.282336 0.475124 0.138223 0.894977 0.239462 0.427201 1 khoa_quan_tri_kinh_doanh_va_du_lich suite18 5672 219 0.038611 0.529385 0.921796 0.027443 0.016228 0.031402 -0.007209 0.296296 0.767123 0.427481 0.582121 0.218566 0.849315 0.347664 0.538506 0.167549 0.867580 0.280857 0.472637 0.136812 0.885845 0.237019 0.422842 1 khoa_quan_tri_kinh_doanh_va_du_lich suite20 5672 219 0.038611 0.465948 0.908196 0.041868 0.065865 0.104475 0.065865 0.276896 0.716895 0.399491 0.544006 0.198590 0.771689 0.315888 0.489288 0.160494 0.831050 0.269032 0.452736 0.134697 0.872146 0.233354 0.416303 1 khoa_quan_tri_kinh_doanh_va_du_lich suite21 5672 219 0.038611 0.525659 0.919990 0.027084 0.012730 0.030314 -0.008297 0.298060 0.771689 0.430025 0.585586 0.211516 0.821918 0.336449 0.521135 0.169312 0.876712 0.283814 0.477612 0.136812 0.885845 0.237019 0.422842 1 khoa_quan_tri_kinh_doanh_va_du_lich suite22 5672 219 0.038611 0.558310 0.920988 0.027168 0.017882 0.031869 -0.006742 0.298060 0.771689 0.430025 0.585586 0.222092 0.863014 0.353271 0.547192 0.168430 0.872146 0.282336 0.475124 0.137518 0.890411 0.238241 0.425022 1 khoa_quan_tri_kinh_doanh_va_du_lich suite22_primary 5672 219 0.038611 0.551608 0.903228 0.026579 0.027022 0.054700 0.016089 0.264550 0.684932 0.381679 0.519751 0.206816 0.803653 0.328972 0.509554 0.163139 0.844749 0.273466 0.460199 0.135402 0.876712 0.234575 0.418483 1 khoa_quan_tri_kinh_doanh_va_du_lich suite22_relational 5672 219 0.038611 0.579215 0.917549 0.025320 0.015737 0.022874 -0.015737 0.287478 0.744292 0.414758 0.564796 0.215041 0.835616 0.342056 0.529820 0.165785 0.858447 0.277901 0.467662 0.136107 0.881279 0.235797 0.420663 1 khoa_quan_tri_kinh_doanh_va_du_lich suite23 5672 219 0.038611 0.554444 0.926391 0.028466 0.016097 0.022513 -0.016097 0.298060 0.771689 0.430025 0.585586 0.218566 0.849315 0.347664 0.538506 0.168430 0.872146 0.282336 0.475124 0.137518 0.890411 0.238241 0.425022 1 khoa_quan_tri_kinh_doanh_va_du_lich suite23_graph 5672 219 0.038611 0.529173 0.916634 0.029681 0.019532 0.019079 -0.019532 0.285714 0.739726 0.412214 0.561331 0.205640 0.799087 0.327103 0.506659 0.159612 0.826484 0.267554 0.450249 0.135402 0.876712 0.234575 0.418483 1 khoa_quan_tri_kinh_doanh_va_du_lich suite24 5672 219 0.038611 0.525034 0.913017 0.027051 0.015735 0.023096 -0.015514 0.292769 0.757991 0.422392 0.575191 0.209166 0.812785 0.332710 0.515345 0.164903 0.853881 0.276423 0.465174 0.135402 0.876712 0.234575 0.418483 1 khoa_quan_tri_kinh_doanh_va_du_lich suite24_posthoc 5672 219 0.038611 0.548302 0.922988 0.028143 0.013649 0.027057 -0.011554 0.298060 0.771689 0.430025 0.585586 0.218566 0.849315 0.347664 0.538506 0.170194 0.881279 0.285292 0.480100 0.136107 0.881279 0.235797 0.420663 1 khoa_quan_tri_kinh_doanh_va_du_lich suite25 5672 219 0.038611 0.632176 0.935489 0.025220 0.014326 0.024285 -0.014326 0.303351 0.785388 0.437659 0.595981 0.220917 0.858447 0.351402 0.544296 0.171076 0.885845 0.286770 0.482587 0.139633 0.904110 0.241906 0.431561 1 khoa_quan_tri_kinh_doanh_va_du_lich suite25_blend 5672 219 0.038611 0.550239 0.923528 0.027831 0.015178 0.027372 -0.011239 0.303351 0.785388 0.437659 0.595981 0.220917 0.858447 0.351402 0.544296 0.169312 0.876712 0.283814 0.477612 0.137518 0.890411 0.238241 0.425022 1 khoa_quan_tri_kinh_doanh_va_du_lich suite26_committee_blend 5672 219 0.038611 0.507873 0.918142 0.028046 0.012828 0.028737 -0.009874 0.294533 0.762557 0.424936 0.578656 0.210341 0.817352 0.334579 0.518240 0.170194 0.881279 0.285292 0.480100 0.137518 0.890411 0.238241 0.425022 1 khoa_quan_tri_kinh_doanh_va_du_lich suite26_joint_head 5672 219 0.038611 0.610436 0.915367 0.022497 0.007196 0.036405 -0.002206 0.306878 0.794521 0.442748 0.602911 0.212691 0.826484 0.338318 0.524030 0.163139 0.844749 0.273466 0.460199 0.134697 0.872146 0.233354 0.416303 1 khoa_quan_tri_kinh_doanh_va_du_lich suite26_tair 5672 219 0.038611 0.393177 0.871731 0.028660 0.011984 0.039325 0.000714 0.243386 0.630137 0.351145 0.478170 0.176263 0.684932 0.280374 0.434279 0.142857 0.739726 0.239468 0.402985 0.120592 0.780822 0.208919 0.372711 1 khoa_quan_tri_kinh_doanh_va_du_lich suite26_tree 5672 219 0.038611 0.506304 0.911326 0.026288 0.016344 0.052604 0.013993 0.273369 0.707763 0.394402 0.537076 0.207991 0.808219 0.330841 0.512449 0.163139 0.844749 0.273466 0.460199 0.135402 0.876712 0.234575 0.418483 1 khoa_quan_tri_kinh_doanh_va_du_lich suite26_tree_memory 5672 219 0.038611 0.465562 0.873771 0.026422 0.010361 0.042320 0.003709 0.248677 0.643836 0.358779 0.488565 0.176263 0.684932 0.280374 0.434279 0.142857 0.739726 0.239468 0.402985 0.120592 0.780822 0.208919 0.372711 1 khoa_quoc_te_hoc committee 2363 31 0.013119 0.070421 0.804799 0.012689 0.001499 0.012298 -0.000821 0.059322 0.451613 0.104869 0.194444 0.050847 0.580645 0.093506 0.188285 0.046512 0.709677 0.087302 0.184255 0.042301 0.806452 0.080386 0.174825 1 khoa_quoc_te_hoc suite14 2363 31 0.013119 0.136266 0.810906 0.012556 0.004186 0.013356 0.000237 0.072034 0.548387 0.127341 0.236111 0.053672 0.612903 0.098701 0.198745 0.044397 0.677419 0.083333 0.175879 0.037225 0.709677 0.070740 0.153846 1 khoa_quoc_te_hoc suite16 2363 31 0.013119 0.080492 0.857688 0.015745 0.026091 0.039210 0.026091 0.076271 0.580645 0.134831 0.250000 0.059322 0.677419 0.109091 0.219665 0.059197 0.903226 0.111111 0.234506 0.047377 0.903226 0.090032 0.195804 1 khoa_quoc_te_hoc suite17 2363 31 0.013119 0.093149 0.837174 0.012489 0.000909 0.012919 -0.000200 0.084746 0.645161 0.149813 0.277778 0.056497 0.645161 0.103896 0.209205 0.046512 0.709677 0.087302 0.184255 0.047377 0.903226 0.090032 0.195804 1 khoa_quoc_te_hoc suite18 2363 31 0.013119 0.098277 0.835929 0.012474 0.001027 0.012747 -0.000372 0.084746 0.645161 0.149813 0.277778 0.059322 0.677419 0.109091 0.219665 0.048626 0.741935 0.091270 0.192630 0.042301 0.806452 0.080386 0.174825 1 khoa_quoc_te_hoc suite20 2363 31 0.013119 0.057113 0.803097 0.025640 0.024555 0.030343 0.017224 0.042373 0.322581 0.074906 0.138889 0.045198 0.516129 0.083117 0.167364 0.042283 0.645161 0.079365 0.167504 0.035533 0.677419 0.067524 0.146853 1 khoa_quoc_te_hoc suite21 2363 31 0.013119 0.077027 0.805725 0.012681 0.002059 0.013996 0.000877 0.063559 0.483871 0.112360 0.208333 0.056497 0.645161 0.103896 0.209205 0.044397 0.677419 0.083333 0.175879 0.038917 0.741935 0.073955 0.160839 1 khoa_quoc_te_hoc suite22 2363 31 0.013119 0.084852 0.818140 0.012575 0.001647 0.013129 0.000010 0.080508 0.612903 0.142322 0.263889 0.059322 0.677419 0.109091 0.219665 0.048626 0.741935 0.091270 0.192630 0.040609 0.774194 0.077170 0.167832 1 khoa_quoc_te_hoc suite22_primary 2363 31 0.013119 0.091890 0.811542 0.012965 0.010700 0.022335 0.009217 0.067797 0.516129 0.119850 0.222222 0.050847 0.580645 0.093506 0.188285 0.040169 0.612903 0.075397 0.159129 0.033841 0.645161 0.064309 0.139860 1 khoa_quoc_te_hoc suite22_relational 2363 31 0.013119 0.062392 0.769214 0.014182 0.006064 0.015912 0.002793 0.072034 0.548387 0.127341 0.236111 0.050847 0.580645 0.093506 0.188285 0.042283 0.645161 0.079365 0.167504 0.037225 0.709677 0.070740 0.153846 1 khoa_quoc_te_hoc suite23 2363 31 0.013119 0.126171 0.859362 0.012519 0.005130 0.008664 -0.004455 0.093220 0.709677 0.164794 0.305556 0.067797 0.774194 0.124675 0.251046 0.052854 0.806452 0.099206 0.209380 0.045685 0.870968 0.086817 0.188811 1 khoa_quoc_te_hoc suite23_graph 2363 31 0.013119 0.138396 0.865753 0.012382 0.006482 0.008160 -0.004959 0.088983 0.677419 0.157303 0.291667 0.067797 0.774194 0.124675 0.251046 0.050740 0.774194 0.095238 0.201005 0.040609 0.774194 0.077170 0.167832 1 khoa_quoc_te_hoc suite24 2363 31 0.013119 0.075142 0.800628 0.012820 0.006994 0.007369 -0.005750 0.050847 0.387097 0.089888 0.166667 0.048023 0.548387 0.088312 0.177824 0.044397 0.677419 0.083333 0.175879 0.040609 0.774194 0.077170 0.167832 1 khoa_quoc_te_hoc suite24_posthoc 2363 31 0.013119 0.090232 0.821211 0.012600 0.002972 0.010826 -0.002293 0.055085 0.419355 0.097378 0.180556 0.050847 0.580645 0.093506 0.188285 0.050740 0.774194 0.095238 0.201005 0.047377 0.903226 0.090032 0.195804 1 khoa_quoc_te_hoc suite25 2363 31 0.013119 0.275359 0.845377 0.011390 0.004686 0.008849 -0.004270 0.063559 0.483871 0.112360 0.208333 0.048023 0.548387 0.088312 0.177824 0.044397 0.677419 0.083333 0.175879 0.038917 0.741935 0.073955 0.160839 1 khoa_quoc_te_hoc suite25_blend 2363 31 0.013119 0.080438 0.819939 0.012634 0.002337 0.011428 -0.001691 0.076271 0.580645 0.134831 0.250000 0.059322 0.677419 0.109091 0.219665 0.046512 0.709677 0.087302 0.184255 0.043993 0.838710 0.083601 0.181818 1 khoa_quoc_te_hoc suite26_committee_blend 2363 31 0.013119 0.071640 0.809101 0.012709 0.001343 0.012574 -0.000545 0.055085 0.419355 0.097378 0.180556 0.053672 0.612903 0.098701 0.198745 0.046512 0.709677 0.087302 0.184255 0.045685 0.870968 0.086817 0.188811 1 khoa_quoc_te_hoc suite26_joint_head 2363 31 0.013119 0.127506 0.778917 0.012380 0.006327 0.009674 -0.003445 0.067797 0.516129 0.119850 0.222222 0.050847 0.580645 0.093506 0.188285 0.040169 0.612903 0.075397 0.159129 0.032149 0.612903 0.061093 0.132867 1 khoa_quoc_te_hoc suite26_tair 2363 31 0.013119 0.035271 0.768550 0.014830 0.013192 0.026311 0.013192 0.025424 0.193548 0.044944 0.083333 0.025424 0.290323 0.046753 0.094142 0.031712 0.483871 0.059524 0.125628 0.027073 0.516129 0.051447 0.111888 1 khoa_quoc_te_hoc suite26_tree 2363 31 0.013119 0.088967 0.778544 0.014561 0.012508 0.025389 0.012270 0.063559 0.483871 0.112360 0.208333 0.050847 0.580645 0.093506 0.188285 0.042283 0.645161 0.079365 0.167504 0.035533 0.677419 0.067524 0.146853 1 khoa_quoc_te_hoc suite26_tree_memory 2363 31 0.013119 0.050471 0.769352 0.014106 0.014753 0.027333 0.014214 0.025424 0.193548 0.044944 0.083333 0.025424 0.290323 0.046753 0.094142 0.031712 0.483871 0.059524 0.125628 0.027073 0.516129 0.051447 0.111888 1 khoa_tieng_anh committee 8164 148 0.018128 0.585634 0.935329 0.010839 0.009783 0.027345 0.009217 0.142157 0.783784 0.240664 0.411932 0.101224 0.837838 0.180626 0.341222 0.083282 0.918919 0.152723 0.305618 0.068594 0.945946 0.127912 0.265856 1 khoa_tieng_anh suite14 8164 148 0.018128 0.585634 0.935329 0.010839 0.009783 0.027345 0.009217 0.142157 0.783784 0.240664 0.411932 0.101224 0.837838 0.180626 0.341222 0.083282 0.918919 0.152723 0.305618 0.068594 0.945946 0.127912 0.265856 1 khoa_tieng_anh suite16 8164 148 0.018128 0.563973 0.935080 0.042991 0.073238 0.091367 0.073238 0.134804 0.743243 0.228216 0.390625 0.097143 0.804054 0.173343 0.327463 0.080220 0.885135 0.147108 0.294382 0.068594 0.945946 0.127912 0.265856 1 khoa_tieng_anh suite17 8164 148 0.018128 0.593823 0.945404 0.011560 0.014720 0.032108 0.013980 0.131127 0.722973 0.221992 0.379972 0.108571 0.898649 0.193736 0.365988 0.085119 0.939189 0.156092 0.312360 0.068594 0.945946 0.127912 0.265856 1 khoa_tieng_anh suite18 8164 148 0.018128 0.596286 0.946807 0.011537 0.014877 0.032205 0.014077 0.142157 0.783784 0.240664 0.411932 0.109388 0.905405 0.195193 0.368740 0.082670 0.912162 0.151600 0.303371 0.068594 0.945946 0.127912 0.265856 1 khoa_tieng_anh suite20 8164 148 0.018128 0.444902 0.924603 0.066536 0.099254 0.117383 0.099254 0.136029 0.750000 0.230290 0.394176 0.097959 0.810811 0.174800 0.330215 0.076546 0.844595 0.140371 0.280899 0.063694 0.878378 0.118776 0.246867 1 khoa_tieng_anh suite21 8164 148 0.018128 0.597129 0.934807 0.010850 0.010472 0.028113 0.009984 0.144608 0.797297 0.244813 0.419034 0.099592 0.824324 0.177713 0.335718 0.080220 0.885135 0.147108 0.294382 0.069084 0.952703 0.128826 0.267755 1 khoa_tieng_anh suite22 8164 148 0.018128 0.603047 0.941635 0.010240 0.007993 0.024260 0.006132 0.138480 0.763514 0.234440 0.401278 0.104490 0.864865 0.186453 0.352229 0.080833 0.891892 0.148231 0.296629 0.069084 0.952703 0.128826 0.267755 1 khoa_tieng_anh suite22_primary 8164 148 0.018128 0.612509 0.941173 0.010979 0.007779 0.019143 0.001015 0.143382 0.790541 0.242739 0.415483 0.098776 0.817568 0.176256 0.332966 0.082058 0.905405 0.150477 0.301124 0.066144 0.912162 0.123344 0.256362 1 khoa_tieng_anh suite22_relational 8164 148 0.018128 0.608846 0.934922 0.010119 0.004218 0.017594 -0.000534 0.132353 0.729730 0.224066 0.383523 0.094694 0.783784 0.168973 0.319207 0.077771 0.858108 0.142617 0.285393 0.066634 0.918919 0.124258 0.258261 1 khoa_tieng_anh suite23 8164 148 0.018128 0.636268 0.940064 0.010046 0.003044 0.016617 -0.001511 0.142157 0.783784 0.240664 0.411932 0.102857 0.851351 0.183540 0.346725 0.082058 0.905405 0.150477 0.301124 0.068594 0.945946 0.127912 0.265856 1 khoa_tieng_anh suite23_graph 8164 148 0.018128 0.587473 0.932650 0.012376 0.008161 0.009968 -0.008161 0.144608 0.797297 0.244813 0.419034 0.101224 0.837838 0.180626 0.341222 0.080833 0.891892 0.148231 0.296629 0.066144 0.912162 0.123344 0.256362 1 khoa_tieng_anh suite24 8164 148 0.018128 0.585455 0.935446 0.010317 0.002137 0.017518 -0.000610 0.143382 0.790541 0.242739 0.415483 0.102041 0.844595 0.182083 0.343974 0.082058 0.905405 0.150477 0.301124 0.068594 0.945946 0.127912 0.265856 1 khoa_tieng_anh suite24_posthoc 8164 148 0.018128 0.588349 0.938507 0.010431 0.006200 0.021966 0.003838 0.142157 0.783784 0.240664 0.411932 0.100408 0.831081 0.179170 0.338470 0.080220 0.885135 0.147108 0.294382 0.068594 0.945946 0.127912 0.265856 1 khoa_tieng_anh suite25 8164 148 0.018128 0.515060 0.922447 0.012505 0.008357 0.009771 -0.008357 0.134804 0.743243 0.228216 0.390625 0.102041 0.844595 0.182083 0.343974 0.079608 0.878378 0.145985 0.292135 0.064674 0.891892 0.120603 0.250665 1 khoa_tieng_anh suite25_blend 8164 148 0.018128 0.593078 0.935966 0.010431 0.007156 0.024404 0.006276 0.142157 0.783784 0.240664 0.411932 0.102857 0.851351 0.183540 0.346725 0.080833 0.891892 0.148231 0.296629 0.069084 0.952703 0.128826 0.267755 1 khoa_tieng_anh suite26_committee_blend 8164 148 0.018128 0.577741 0.934388 0.010936 0.011026 0.027660 0.009532 0.140931 0.777027 0.238589 0.408381 0.105306 0.871622 0.187910 0.354981 0.082058 0.905405 0.150477 0.301124 0.069084 0.952703 0.128826 0.267755 1 khoa_tieng_anh suite26_joint_head 8164 148 0.018128 0.522425 0.943844 0.011594 0.008378 0.013251 -0.004877 0.145833 0.804054 0.246888 0.422585 0.108571 0.898649 0.193736 0.365988 0.085732 0.945946 0.157215 0.314607 0.068594 0.945946 0.127912 0.265856 1 khoa_tieng_anh suite26_tair 8164 148 0.018128 0.451236 0.901357 0.016667 0.025483 0.041313 0.023184 0.125000 0.689189 0.211618 0.362216 0.100408 0.831081 0.179170 0.338470 0.076546 0.844595 0.140371 0.280899 0.063694 0.878378 0.118776 0.246867 1 khoa_tieng_anh suite26_tree 8164 148 0.018128 0.449195 0.922068 0.014177 0.019657 0.036152 0.018024 0.137255 0.756757 0.232365 0.397727 0.094694 0.783784 0.168973 0.319207 0.080833 0.891892 0.148231 0.296629 0.067614 0.932432 0.126085 0.262058 1 khoa_tieng_anh suite26_tree_memory 8164 148 0.018128 0.487928 0.901278 0.014651 0.025069 0.039660 0.021531 0.128676 0.709459 0.217842 0.372869 0.100408 0.831081 0.179170 0.338470 0.076546 0.844595 0.140371 0.280899 0.063694 0.878378 0.118776 0.246867 1 khoa_tieng_bo_dao_nha committee 768 30 0.039062 0.314553 0.820009 0.033639 0.010775 0.028288 -0.010775 0.220779 0.566667 0.317757 0.431472 0.147826 0.566667 0.234483 0.361702 0.110390 0.566667 0.184783 0.310219 0.098958 0.633333 0.171171 0.304487 1 khoa_tieng_bo_dao_nha suite14 768 30 0.039062 0.314553 0.820009 0.033639 0.010775 0.028288 -0.010775 0.220779 0.566667 0.317757 0.431472 0.147826 0.566667 0.234483 0.361702 0.110390 0.566667 0.184783 0.310219 0.098958 0.633333 0.171171 0.304487 1 khoa_tieng_bo_dao_nha suite16 768 30 0.039062 0.404727 0.819896 0.048855 0.071608 0.110168 0.071105 0.220779 0.566667 0.317757 0.431472 0.147826 0.566667 0.234483 0.361702 0.123377 0.633333 0.206522 0.346715 0.098958 0.633333 0.171171 0.304487 1 khoa_tieng_bo_dao_nha suite17 768 30 0.039062 0.317570 0.810614 0.033542 0.011819 0.031572 -0.007491 0.168831 0.433333 0.242991 0.329949 0.165217 0.633333 0.262069 0.404255 0.123377 0.633333 0.206522 0.346715 0.098958 0.633333 0.171171 0.304487 1 khoa_tieng_bo_dao_nha suite18 768 30 0.039062 0.308444 0.807136 0.033623 0.008538 0.032087 -0.006975 0.194805 0.500000 0.280374 0.380711 0.156522 0.600000 0.248276 0.382979 0.123377 0.633333 0.206522 0.346715 0.109375 0.700000 0.189189 0.336538 1 khoa_tieng_bo_dao_nha suite20 768 30 0.039062 0.218305 0.811789 0.045179 0.037549 0.075337 0.036274 0.220779 0.566667 0.317757 0.431472 0.173913 0.666667 0.275862 0.425532 0.129870 0.666667 0.217391 0.364964 0.114583 0.733333 0.198198 0.352564 1 khoa_tieng_bo_dao_nha suite21 768 30 0.039062 0.266359 0.835908 0.033465 0.007324 0.033857 -0.005206 0.220779 0.566667 0.317757 0.431472 0.147826 0.566667 0.234483 0.361702 0.116883 0.600000 0.195652 0.328467 0.104167 0.666667 0.180180 0.320513 1 khoa_tieng_bo_dao_nha suite22 768 30 0.039062 0.281342 0.821816 0.033743 0.007427 0.031635 -0.007427 0.207792 0.533333 0.299065 0.406091 0.147826 0.566667 0.234483 0.361702 0.123377 0.633333 0.206522 0.346715 0.104167 0.666667 0.180180 0.320513 1 khoa_tieng_bo_dao_nha suite22_primary 768 30 0.039062 0.146014 0.787579 0.036689 0.017483 0.056545 0.017483 0.142857 0.366667 0.205607 0.279188 0.121739 0.466667 0.193103 0.297872 0.116883 0.600000 0.195652 0.328467 0.098958 0.633333 0.171171 0.304487 1 khoa_tieng_bo_dao_nha suite22_relational 768 30 0.039062 0.164269 0.752800 0.036745 0.031965 0.014183 -0.024880 0.155844 0.400000 0.224299 0.304569 0.139130 0.533333 0.220690 0.340426 0.110390 0.566667 0.184783 0.310219 0.098958 0.633333 0.171171 0.304487 1 khoa_tieng_bo_dao_nha suite23 768 30 0.039062 0.314553 0.820009 0.033639 0.010775 0.028288 -0.010775 0.220779 0.566667 0.317757 0.431472 0.147826 0.566667 0.234483 0.361702 0.110390 0.566667 0.184783 0.310219 0.098958 0.633333 0.171171 0.304487 1 khoa_tieng_bo_dao_nha suite23_graph 768 30 0.039062 0.187110 0.753884 0.035641 0.019687 0.019376 -0.019687 0.168831 0.433333 0.242991 0.329949 0.139130 0.533333 0.220690 0.340426 0.103896 0.533333 0.173913 0.291971 0.093750 0.600000 0.162162 0.288462 1 khoa_tieng_bo_dao_nha suite24 768 30 0.039062 0.222563 0.826197 0.035772 0.027245 0.012642 -0.026420 0.194805 0.500000 0.280374 0.380711 0.156522 0.600000 0.248276 0.382979 0.116883 0.600000 0.195652 0.328467 0.114583 0.733333 0.198198 0.352564 1 khoa_tieng_bo_dao_nha suite24_posthoc 768 30 0.039062 0.270155 0.817977 0.034822 0.019025 0.020038 -0.019025 0.168831 0.433333 0.242991 0.329949 0.147826 0.566667 0.234483 0.361702 0.123377 0.633333 0.206522 0.346715 0.109375 0.700000 0.189189 0.336538 1 khoa_tieng_bo_dao_nha suite25 768 30 0.039062 0.264887 0.811743 0.033607 0.021799 0.018406 -0.020656 0.246753 0.633333 0.355140 0.482234 0.173913 0.666667 0.275862 0.425532 0.142857 0.733333 0.239130 0.401460 0.119792 0.766667 0.207207 0.368590 1 khoa_tieng_bo_dao_nha suite25_blend 768 30 0.039062 0.330194 0.829359 0.033526 0.013447 0.025616 -0.013447 0.220779 0.566667 0.317757 0.431472 0.147826 0.566667 0.234483 0.361702 0.123377 0.633333 0.206522 0.346715 0.104167 0.666667 0.180180 0.320513 1 khoa_tieng_bo_dao_nha suite26_committee_blend 768 30 0.039062 0.276093 0.822606 0.033666 0.011065 0.027997 -0.011065 0.220779 0.566667 0.317757 0.431472 0.147826 0.566667 0.234483 0.361702 0.110390 0.566667 0.184783 0.310219 0.104167 0.666667 0.180180 0.320513 1 khoa_tieng_bo_dao_nha suite26_joint_head 768 30 0.039062 0.237924 0.752846 0.034362 0.019485 0.030165 -0.008898 0.220779 0.566667 0.317757 0.431472 0.156522 0.600000 0.248276 0.382979 0.123377 0.633333 0.206522 0.346715 0.098958 0.633333 0.171171 0.304487 1 khoa_tieng_bo_dao_nha suite26_tair 768 30 0.039062 0.163487 0.804404 0.036614 0.027705 0.035118 -0.003944 0.116883 0.300000 0.168224 0.228426 0.113043 0.433333 0.179310 0.276596 0.123377 0.633333 0.206522 0.346715 0.109375 0.700000 0.189189 0.336538 1 khoa_tieng_bo_dao_nha suite26_tree 768 30 0.039062 0.226626 0.769173 0.036925 0.023161 0.049317 0.010254 0.220779 0.566667 0.317757 0.431472 0.147826 0.566667 0.234483 0.361702 0.129870 0.666667 0.217391 0.364964 0.114583 0.733333 0.198198 0.352564 1 khoa_tieng_bo_dao_nha suite26_tree_memory 768 30 0.039062 0.178595 0.805172 0.035631 0.023590 0.034928 -0.004134 0.116883 0.300000 0.168224 0.228426 0.113043 0.433333 0.179310 0.276596 0.123377 0.633333 0.206522 0.346715 0.109375 0.700000 0.189189 0.336538 1 khoa_tieng_duc committee 1900 46 0.024211 0.262205 0.866341 0.021155 0.007888 0.016322 -0.007888 0.178947 0.739130 0.288136 0.454545 0.122807 0.760870 0.211480 0.373134 0.092105 0.760870 0.164319 0.310284 0.073684 0.760870 0.134357 0.265554 1 khoa_tieng_duc suite14 1900 46 0.024211 0.262205 0.866341 0.021155 0.007888 0.016322 -0.007888 0.178947 0.739130 0.288136 0.454545 0.122807 0.760870 0.211480 0.373134 0.092105 0.760870 0.164319 0.310284 0.073684 0.760870 0.134357 0.265554 1 khoa_tieng_duc suite16 1900 46 0.024211 0.222958 0.872708 0.026407 0.037269 0.061479 0.037269 0.168421 0.695652 0.271186 0.427807 0.122807 0.760870 0.211480 0.373134 0.092105 0.760870 0.164319 0.310284 0.080000 0.826087 0.145873 0.288316 1 khoa_tieng_duc suite17 1900 46 0.024211 0.262291 0.884762 0.020845 0.006354 0.017857 -0.006354 0.173684 0.717391 0.279661 0.441176 0.122807 0.760870 0.211480 0.373134 0.100000 0.826087 0.178404 0.336879 0.084211 0.869565 0.153551 0.303490 1 khoa_tieng_duc suite18 1900 46 0.024211 0.259268 0.877668 0.020892 0.006573 0.017638 -0.006573 0.178947 0.739130 0.288136 0.454545 0.122807 0.760870 0.211480 0.373134 0.092105 0.760870 0.164319 0.310284 0.073684 0.760870 0.134357 0.265554 1 khoa_tieng_duc suite20 1900 46 0.024211 0.196697 0.863140 0.052895 0.066602 0.090812 0.066602 0.142105 0.586957 0.228814 0.360963 0.115789 0.717391 0.199396 0.351812 0.092105 0.760870 0.164319 0.310284 0.075789 0.782609 0.138196 0.273141 1 khoa_tieng_duc suite21 1900 46 0.024211 0.260797 0.883577 0.021018 0.007140 0.018131 -0.006079 0.168421 0.695652 0.271186 0.427807 0.119298 0.739130 0.205438 0.362473 0.097368 0.804348 0.173709 0.328014 0.082105 0.847826 0.149712 0.295903 1 khoa_tieng_duc suite22 1900 46 0.024211 0.251881 0.883683 0.021093 0.005769 0.018441 -0.005769 0.163158 0.673913 0.262712 0.414439 0.122807 0.760870 0.211480 0.373134 0.094737 0.782609 0.169014 0.319149 0.080000 0.826087 0.145873 0.288316 1 khoa_tieng_duc suite22_primary 1900 46 0.024211 0.145951 0.858156 0.022329 0.012476 0.035129 0.010919 0.121053 0.500000 0.194915 0.307487 0.108772 0.673913 0.187311 0.330490 0.092105 0.760870 0.164319 0.310284 0.073684 0.760870 0.134357 0.265554 1 khoa_tieng_duc suite22_relational 1900 46 0.024211 0.132936 0.832395 0.022656 0.014204 0.011180 -0.013031 0.110526 0.456522 0.177966 0.280749 0.105263 0.652174 0.181269 0.319829 0.100000 0.826087 0.178404 0.336879 0.082105 0.847826 0.149712 0.295903 1 khoa_tieng_duc suite23 1900 46 0.024211 0.242981 0.874173 0.021643 0.010992 0.013219 -0.010992 0.163158 0.673913 0.262712 0.414439 0.133333 0.826087 0.229607 0.405117 0.102632 0.847826 0.183099 0.345745 0.082105 0.847826 0.149712 0.295903 1 khoa_tieng_duc suite23_graph 1900 46 0.024211 0.166678 0.836863 0.022171 0.011465 0.013687 -0.010523 0.136842 0.565217 0.220339 0.347594 0.115789 0.717391 0.199396 0.351812 0.100000 0.826087 0.178404 0.336879 0.082105 0.847826 0.149712 0.295903 1 khoa_tieng_duc suite24 1900 46 0.024211 0.214684 0.876436 0.022289 0.015590 0.008979 -0.015232 0.157895 0.652174 0.254237 0.401070 0.119298 0.739130 0.205438 0.362473 0.097368 0.804348 0.173709 0.328014 0.082105 0.847826 0.149712 0.295903 1 khoa_tieng_duc suite24_posthoc 1900 46 0.024211 0.235735 0.887822 0.021937 0.012699 0.011511 -0.012699 0.163158 0.673913 0.262712 0.414439 0.126316 0.782609 0.217523 0.383795 0.097368 0.804348 0.173709 0.328014 0.080000 0.826087 0.145873 0.288316 1 khoa_tieng_duc suite25 1900 46 0.024211 0.158605 0.852036 0.022803 0.018302 0.006612 -0.017599 0.100000 0.413043 0.161017 0.254011 0.094737 0.586957 0.163142 0.287846 0.089474 0.739130 0.159624 0.301418 0.075789 0.782609 0.138196 0.273141 1 khoa_tieng_duc suite25_blend 1900 46 0.024211 0.256557 0.877363 0.021426 0.010063 0.014147 -0.010063 0.178947 0.739130 0.288136 0.454545 0.122807 0.760870 0.211480 0.373134 0.092105 0.760870 0.164319 0.310284 0.077895 0.804348 0.142035 0.280728 1 khoa_tieng_duc suite26_committee_blend 1900 46 0.024211 0.261046 0.876987 0.021312 0.008689 0.015521 -0.008689 0.178947 0.739130 0.288136 0.454545 0.122807 0.760870 0.211480 0.373134 0.092105 0.760870 0.164319 0.310284 0.075789 0.782609 0.138196 0.273141 1 khoa_tieng_duc suite26_joint_head 1900 46 0.024211 0.299759 0.890953 0.022046 0.019031 0.005978 -0.018233 0.168421 0.695652 0.271186 0.427807 0.115789 0.717391 0.199396 0.351812 0.092105 0.760870 0.164319 0.310284 0.082105 0.847826 0.149712 0.295903 1 khoa_tieng_duc suite26_tair 1900 46 0.024211 0.144418 0.817475 0.022289 0.007810 0.016401 -0.007810 0.094737 0.391304 0.152542 0.240642 0.066667 0.413043 0.114804 0.202559 0.057895 0.478261 0.103286 0.195035 0.065263 0.673913 0.119002 0.235205 1 khoa_tieng_duc suite26_tree 1900 46 0.024211 0.219157 0.860161 0.021929 0.009706 0.016841 -0.007369 0.136842 0.565217 0.220339 0.347594 0.126316 0.782609 0.217523 0.383795 0.102632 0.847826 0.183099 0.345745 0.084211 0.869565 0.153551 0.303490 1 khoa_tieng_duc suite26_tree_memory 1900 46 0.024211 0.144520 0.817469 0.022314 0.006181 0.018030 -0.006181 0.094737 0.391304 0.152542 0.240642 0.066667 0.413043 0.114804 0.202559 0.057895 0.478261 0.103286 0.195035 0.065263 0.673913 0.119002 0.235205 1 khoa_tieng_han_quoc committee 2904 20 0.006887 0.054434 0.847911 0.006740 0.004092 0.003509 -0.003378 0.031034 0.450000 0.058065 0.121622 0.029817 0.650000 0.057018 0.125969 0.027539 0.800000 0.053245 0.121029 0.022039 0.800000 0.042895 0.099256 1 khoa_tieng_han_quoc suite14 2904 20 0.006887 0.054434 0.847911 0.006740 0.004092 0.003509 -0.003378 0.031034 0.450000 0.058065 0.121622 0.029817 0.650000 0.057018 0.125969 0.027539 0.800000 0.053245 0.121029 0.022039 0.800000 0.042895 0.099256 1 khoa_tieng_han_quoc suite16 2904 20 0.006887 0.050131 0.813428 0.008840 0.010221 0.014437 0.007550 0.034483 0.500000 0.064516 0.135135 0.027523 0.600000 0.052632 0.116279 0.025818 0.750000 0.049917 0.113464 0.022039 0.800000 0.042895 0.099256 1 khoa_tieng_han_quoc suite17 2904 20 0.006887 0.056916 0.850763 0.006751 0.002635 0.004538 -0.002349 0.031034 0.450000 0.058065 0.121622 0.034404 0.750000 0.065789 0.145349 0.027539 0.800000 0.053245 0.121029 0.023416 0.850000 0.045576 0.105459 1 khoa_tieng_han_quoc suite18 2904 20 0.006887 0.053584 0.840751 0.006763 0.002700 0.004474 -0.002413 0.031034 0.450000 0.058065 0.121622 0.034404 0.750000 0.065789 0.145349 0.027539 0.800000 0.053245 0.121029 0.023416 0.850000 0.045576 0.105459 1 khoa_tieng_han_quoc suite20 2904 20 0.006887 0.030231 0.865257 0.033917 0.040344 0.047231 0.040344 0.034483 0.500000 0.064516 0.135135 0.027523 0.600000 0.052632 0.116279 0.027539 0.800000 0.053245 0.121029 0.022039 0.800000 0.042895 0.099256 1 khoa_tieng_han_quoc suite21 2904 20 0.006887 0.055603 0.850468 0.006730 0.004347 0.003223 -0.003664 0.031034 0.450000 0.058065 0.121622 0.032110 0.700000 0.061404 0.135659 0.025818 0.750000 0.049917 0.113464 0.023416 0.850000 0.045576 0.105459 1 khoa_tieng_han_quoc suite22 2904 20 0.006887 0.060096 0.857732 0.006711 0.004179 0.003420 -0.003467 0.034483 0.500000 0.064516 0.135135 0.032110 0.700000 0.061404 0.135659 0.025818 0.750000 0.049917 0.113464 0.023416 0.850000 0.045576 0.105459 1 khoa_tieng_han_quoc suite22_primary 2904 20 0.006887 0.073684 0.875399 0.006685 0.002708 0.004742 -0.002145 0.037931 0.550000 0.070968 0.148649 0.036697 0.800000 0.070175 0.155039 0.027539 0.800000 0.053245 0.121029 0.022039 0.800000 0.042895 0.099256 1 khoa_tieng_han_quoc suite22_relational 2904 20 0.006887 0.051553 0.879022 0.006832 0.005079 0.002988 -0.003899 0.034483 0.500000 0.064516 0.135135 0.032110 0.700000 0.061404 0.135659 0.025818 0.750000 0.049917 0.113464 0.023416 0.850000 0.045576 0.105459 1 khoa_tieng_han_quoc suite23 2904 20 0.006887 0.056485 0.851404 0.006740 0.004065 0.003212 -0.003676 0.034483 0.500000 0.064516 0.135135 0.032110 0.700000 0.061404 0.135659 0.025818 0.750000 0.049917 0.113464 0.020661 0.750000 0.040214 0.093052 1 khoa_tieng_han_quoc suite23_graph 2904 20 0.006887 0.045593 0.820319 0.006935 0.004578 0.004445 -0.002442 0.034483 0.500000 0.064516 0.135135 0.029817 0.650000 0.057018 0.125969 0.025818 0.750000 0.049917 0.113464 0.022039 0.800000 0.042895 0.099256 1 khoa_tieng_han_quoc suite24 2904 20 0.006887 0.049279 0.843464 0.006787 0.005340 0.001819 -0.005068 0.034483 0.500000 0.064516 0.135135 0.032110 0.700000 0.061404 0.135659 0.024096 0.700000 0.046589 0.105900 0.020661 0.750000 0.040214 0.093052 1 khoa_tieng_han_quoc suite24_posthoc 2904 20 0.006887 0.051767 0.843100 0.006753 0.004379 0.002681 -0.004206 0.034483 0.500000 0.064516 0.135135 0.029817 0.650000 0.057018 0.125969 0.024096 0.700000 0.046589 0.105900 0.022039 0.800000 0.042895 0.099256 1 khoa_tieng_han_quoc suite25 2904 20 0.006887 0.110430 0.873838 0.006662 0.005588 0.001494 -0.005393 0.041379 0.600000 0.077419 0.162162 0.029817 0.650000 0.057018 0.125969 0.025818 0.750000 0.049917 0.113464 0.023416 0.850000 0.045576 0.105459 1 khoa_tieng_han_quoc suite25_blend 2904 20 0.006887 0.057421 0.851699 0.006737 0.004477 0.002921 -0.003966 0.034483 0.500000 0.064516 0.135135 0.032110 0.700000 0.061404 0.135659 0.027539 0.800000 0.053245 0.121029 0.022039 0.800000 0.042895 0.099256 1 khoa_tieng_han_quoc suite26_committee_blend 2904 20 0.006887 0.061092 0.851439 0.006715 0.003584 0.003303 -0.003584 0.034483 0.500000 0.064516 0.135135 0.032110 0.700000 0.061404 0.135659 0.025818 0.750000 0.049917 0.113464 0.022039 0.800000 0.042895 0.099256 1 khoa_tieng_han_quoc suite26_joint_head 2904 20 0.006887 0.096502 0.860489 0.006739 0.004679 0.002208 -0.004679 0.041379 0.600000 0.077419 0.162162 0.032110 0.700000 0.061404 0.135659 0.027539 0.800000 0.053245 0.121029 0.022039 0.800000 0.042895 0.099256 1 khoa_tieng_han_quoc suite26_tair 2904 20 0.006887 0.078152 0.777999 0.006698 0.000913 0.007800 0.000913 0.031034 0.450000 0.058065 0.121622 0.022936 0.500000 0.043860 0.096899 0.017212 0.500000 0.033278 0.075643 0.013774 0.500000 0.026810 0.062035 1 khoa_tieng_han_quoc suite26_tree 2904 20 0.006887 0.057091 0.866540 0.006727 0.000512 0.007399 0.000512 0.037931 0.550000 0.070968 0.148649 0.034404 0.750000 0.065789 0.145349 0.027539 0.800000 0.053245 0.121029 0.023416 0.850000 0.045576 0.105459 1 khoa_tieng_han_quoc suite26_tree_memory 2904 20 0.006887 0.077748 0.755218 0.006672 0.003214 0.010101 0.003214 0.031034 0.450000 0.058065 0.121622 0.022936 0.500000 0.043860 0.096899 0.017212 0.500000 0.033278 0.075643 0.013774 0.500000 0.026810 0.062035 1 khoa_tieng_italia committee 2166 111 0.051247 0.259779 0.766770 0.045673 0.022167 0.029080 -0.022167 0.225806 0.441441 0.298780 0.370651 0.160000 0.468468 0.238532 0.338101 0.138568 0.540541 0.220588 0.342075 0.123616 0.603604 0.205207 0.339757 1 khoa_tieng_italia suite14 2166 111 0.051247 0.259779 0.766770 0.045673 0.022167 0.029080 -0.022167 0.225806 0.441441 0.298780 0.370651 0.160000 0.468468 0.238532 0.338101 0.138568 0.540541 0.220588 0.342075 0.123616 0.603604 0.205207 0.339757 1 khoa_tieng_italia suite16 2166 111 0.051247 0.289203 0.807010 0.053068 0.065406 0.116652 0.065406 0.230415 0.450450 0.304878 0.378215 0.190769 0.558559 0.284404 0.403121 0.152425 0.594595 0.242647 0.376283 0.136531 0.666667 0.226646 0.375254 1 khoa_tieng_italia suite17 2166 111 0.051247 0.263282 0.786682 0.045246 0.020825 0.030422 -0.020825 0.225806 0.441441 0.298780 0.370651 0.175385 0.513514 0.261468 0.370611 0.152425 0.594595 0.242647 0.376283 0.132841 0.648649 0.220521 0.365112 1 khoa_tieng_italia suite18 2166 111 0.051247 0.260884 0.781285 0.045371 0.020907 0.030339 -0.020907 0.221198 0.432432 0.292683 0.363086 0.193846 0.567568 0.288991 0.409623 0.157044 0.612613 0.250000 0.387685 0.127306 0.621622 0.211332 0.349899 1 khoa_tieng_italia suite20 2166 111 0.051247 0.202054 0.816703 0.073737 0.067929 0.114586 0.063339 0.170507 0.333333 0.225610 0.279879 0.141538 0.414414 0.211009 0.299090 0.136259 0.531532 0.216912 0.336374 0.130996 0.639640 0.217458 0.360041 1 khoa_tieng_italia suite21 2166 111 0.051247 0.286900 0.780965 0.044292 0.019532 0.031715 -0.019532 0.225806 0.441441 0.298780 0.370651 0.178462 0.522523 0.266055 0.377113 0.143187 0.558559 0.227941 0.353478 0.129151 0.630631 0.214395 0.354970 1 khoa_tieng_italia suite22 2166 111 0.051247 0.288870 0.819057 0.044874 0.021910 0.029337 -0.021910 0.225806 0.441441 0.298780 0.370651 0.196923 0.576577 0.293578 0.416125 0.161663 0.630631 0.257353 0.399088 0.138376 0.675676 0.229709 0.380325 1 khoa_tieng_italia suite22_primary 2166 111 0.051247 0.266221 0.874523 0.042625 0.013116 0.038131 -0.013116 0.271889 0.531532 0.359756 0.446293 0.233846 0.684685 0.348624 0.494148 0.187067 0.729730 0.297794 0.461802 0.160517 0.783784 0.266462 0.441176 1 khoa_tieng_italia suite22_relational 2166 111 0.051247 0.265822 0.820473 0.044241 0.030076 0.022514 -0.028733 0.267281 0.522523 0.353659 0.438729 0.203077 0.594595 0.302752 0.429129 0.163972 0.639640 0.261029 0.404789 0.132841 0.648649 0.220521 0.365112 1 khoa_tieng_italia suite23 2166 111 0.051247 0.264571 0.813915 0.046651 0.034871 0.016376 -0.034871 0.221198 0.432432 0.292683 0.363086 0.187692 0.549550 0.279817 0.396619 0.168591 0.657658 0.268382 0.416192 0.149446 0.729730 0.248086 0.410751 1 khoa_tieng_italia suite23_graph 2166 111 0.051247 0.223334 0.797611 0.047383 0.039152 0.012374 -0.038872 0.230415 0.450450 0.304878 0.378215 0.181538 0.531532 0.270642 0.383615 0.150115 0.585586 0.238971 0.370582 0.138376 0.675676 0.229709 0.380325 1 khoa_tieng_italia suite24 2166 111 0.051247 0.239605 0.773429 0.047732 0.039226 0.012507 -0.038740 0.216590 0.423423 0.286585 0.355522 0.178462 0.522523 0.266055 0.377113 0.143187 0.558559 0.227941 0.353478 0.119926 0.585586 0.199081 0.329615 1 khoa_tieng_italia suite24_posthoc 2166 111 0.051247 0.263450 0.789290 0.046489 0.030540 0.020707 -0.030540 0.216590 0.423423 0.286585 0.355522 0.175385 0.513514 0.261468 0.370611 0.154734 0.603604 0.246324 0.381984 0.130996 0.639640 0.217458 0.360041 1 khoa_tieng_italia suite25 2166 111 0.051247 0.248960 0.853103 0.048375 0.043860 0.008656 -0.042591 0.248848 0.486486 0.329268 0.408472 0.187692 0.549550 0.279817 0.396619 0.159353 0.621622 0.253676 0.393387 0.149446 0.729730 0.248086 0.410751 1 khoa_tieng_italia suite25_blend 2166 111 0.051247 0.283761 0.785152 0.045927 0.026810 0.024436 -0.026810 0.225806 0.441441 0.298780 0.370651 0.172308 0.504505 0.256881 0.364109 0.145497 0.567568 0.231618 0.359179 0.130996 0.639640 0.217458 0.360041 1 khoa_tieng_italia suite26_committee_blend 2166 111 0.051247 0.276138 0.778926 0.045493 0.023744 0.027503 -0.023744 0.221198 0.432432 0.292683 0.363086 0.163077 0.477477 0.243119 0.344603 0.145497 0.567568 0.231618 0.359179 0.125461 0.612613 0.208270 0.344828 1 khoa_tieng_italia suite26_joint_head 2166 111 0.051247 0.280119 0.782017 0.043884 0.028676 0.026392 -0.024855 0.262673 0.513514 0.347561 0.431165 0.190769 0.558559 0.284404 0.403121 0.152425 0.594595 0.242647 0.376283 0.127306 0.621622 0.211332 0.349899 1 khoa_tieng_italia suite26_tair 2166 111 0.051247 0.221685 0.777333 0.047658 0.033392 0.029582 -0.021664 0.198157 0.387387 0.262195 0.325265 0.156923 0.459459 0.233945 0.331599 0.145497 0.567568 0.231618 0.359179 0.119926 0.585586 0.199081 0.329615 1 khoa_tieng_italia suite26_tree 2166 111 0.051247 0.213277 0.792300 0.046383 0.026273 0.044182 -0.007064 0.225806 0.441441 0.298780 0.370651 0.175385 0.513514 0.261468 0.370611 0.138568 0.540541 0.220588 0.342075 0.116236 0.567568 0.192956 0.319473 1 khoa_tieng_italia suite26_tree_memory 2166 111 0.051247 0.211554 0.776145 0.047090 0.030914 0.030436 -0.020810 0.198157 0.387387 0.262195 0.325265 0.156923 0.459459 0.233945 0.331599 0.145497 0.567568 0.231618 0.359179 0.119926 0.585586 0.199081 0.329615 1 khoa_tieng_nga committee 1588 102 0.064232 0.347619 0.807359 0.053203 0.028689 0.035543 -0.028689 0.320755 0.500000 0.390805 0.449735 0.222689 0.519608 0.311765 0.410217 0.188679 0.588235 0.285714 0.413223 0.161209 0.627451 0.256513 0.397516 1 khoa_tieng_nga suite14 1588 102 0.064232 0.350810 0.826373 0.052277 0.027242 0.037558 -0.026674 0.320755 0.500000 0.390805 0.449735 0.247899 0.578431 0.347059 0.456656 0.204403 0.637255 0.309524 0.447658 0.176322 0.686275 0.280561 0.434783 1 khoa_tieng_nga suite16 1588 102 0.064232 0.319234 0.779326 0.064654 0.064976 0.128859 0.064627 0.308176 0.480392 0.375479 0.432099 0.231092 0.539216 0.323529 0.425697 0.185535 0.578431 0.280952 0.406336 0.148615 0.578431 0.236473 0.366460 1 khoa_tieng_nga suite17 1588 102 0.064232 0.352796 0.782730 0.054630 0.029405 0.034827 -0.029405 0.320755 0.500000 0.390805 0.449735 0.218487 0.509804 0.305882 0.402477 0.172956 0.539216 0.261905 0.378788 0.148615 0.578431 0.236473 0.366460 1 khoa_tieng_nga suite18 1588 102 0.064232 0.351772 0.780362 0.054648 0.029455 0.034777 -0.029455 0.308176 0.480392 0.375479 0.432099 0.218487 0.509804 0.305882 0.402477 0.179245 0.558824 0.271429 0.392562 0.148615 0.578431 0.236473 0.366460 1 khoa_tieng_nga suite20 1588 102 0.064232 0.318589 0.808230 0.071203 0.062132 0.091944 0.027712 0.301887 0.470588 0.367816 0.423280 0.247899 0.578431 0.347059 0.456656 0.210692 0.656863 0.319048 0.461433 0.176322 0.686275 0.280561 0.434783 1 khoa_tieng_nga suite21 1588 102 0.064232 0.354472 0.830279 0.052158 0.026033 0.038428 -0.025804 0.327044 0.509804 0.398467 0.458554 0.239496 0.558824 0.335294 0.441176 0.201258 0.627451 0.304762 0.440771 0.183879 0.715686 0.292585 0.453416 1 khoa_tieng_nga suite22 1588 102 0.064232 0.349892 0.818192 0.052607 0.022914 0.041318 -0.022914 0.320755 0.500000 0.390805 0.449735 0.239496 0.558824 0.335294 0.441176 0.194969 0.607843 0.295238 0.426997 0.173804 0.676471 0.276553 0.428571 1 khoa_tieng_nga suite22_primary 1588 102 0.064232 0.270463 0.791683 0.054491 0.014410 0.075483 0.011252 0.245283 0.382353 0.298851 0.343915 0.226891 0.529412 0.317647 0.417957 0.204403 0.637255 0.309524 0.447658 0.178841 0.696078 0.284569 0.440994 1 khoa_tieng_nga suite22_relational 1588 102 0.064232 0.218604 0.755674 0.061229 0.048256 0.043331 -0.020901 0.220126 0.343137 0.268199 0.308642 0.210084 0.490196 0.294118 0.386997 0.182390 0.568627 0.276190 0.399449 0.166247 0.647059 0.264529 0.409938 1 khoa_tieng_nga suite23 1588 102 0.064232 0.383897 0.857315 0.055997 0.041410 0.022822 -0.041410 0.327044 0.509804 0.398467 0.458554 0.264706 0.617647 0.370588 0.487616 0.229560 0.715686 0.347619 0.502755 0.191436 0.745098 0.304609 0.472050 1 khoa_tieng_nga suite23_graph 1588 102 0.064232 0.314046 0.820587 0.057552 0.045890 0.018342 -0.045890 0.270440 0.421569 0.329502 0.379189 0.218487 0.509804 0.305882 0.402477 0.182390 0.568627 0.276190 0.399449 0.178841 0.696078 0.284569 0.440994 1 khoa_tieng_nga suite24 1588 102 0.064232 0.360795 0.801395 0.054824 0.044934 0.019775 -0.044457 0.339623 0.529412 0.413793 0.476190 0.247899 0.578431 0.347059 0.456656 0.191824 0.598039 0.290476 0.420110 0.158690 0.617647 0.252505 0.391304 1 khoa_tieng_nga suite24_posthoc 1588 102 0.064232 0.339840 0.812742 0.054927 0.036976 0.027256 -0.036976 0.320755 0.500000 0.390805 0.449735 0.243697 0.568627 0.341176 0.448916 0.198113 0.617647 0.300000 0.433884 0.173804 0.676471 0.276553 0.428571 1 khoa_tieng_nga suite25 1588 102 0.064232 0.344673 0.853660 0.057654 0.052821 0.015152 -0.049080 0.358491 0.558824 0.436782 0.502646 0.294118 0.686275 0.411765 0.541796 0.235849 0.735294 0.357143 0.516529 0.196474 0.764706 0.312625 0.484472 1 khoa_tieng_nga suite25_blend 1588 102 0.064232 0.366195 0.825245 0.053565 0.033391 0.030840 -0.033391 0.320755 0.500000 0.390805 0.449735 0.239496 0.558824 0.335294 0.441176 0.198113 0.617647 0.300000 0.433884 0.176322 0.686275 0.280561 0.434783 1 khoa_tieng_nga suite26_committee_blend 1588 102 0.064232 0.342753 0.821029 0.053512 0.030283 0.033949 -0.030283 0.320755 0.500000 0.390805 0.449735 0.231092 0.539216 0.323529 0.425697 0.194969 0.607843 0.295238 0.426997 0.176322 0.686275 0.280561 0.434783 1 khoa_tieng_nga suite26_joint_head 1588 102 0.064232 0.253402 0.775269 0.056996 0.046986 0.020471 -0.043760 0.245283 0.382353 0.298851 0.343915 0.180672 0.421569 0.252941 0.332817 0.169811 0.529412 0.257143 0.371901 0.153652 0.598039 0.244489 0.378882 1 khoa_tieng_nga suite26_tair 1588 102 0.064232 0.266743 0.814742 0.056803 0.039165 0.031675 -0.032556 0.283019 0.441176 0.344828 0.396825 0.222689 0.519608 0.311765 0.410217 0.226415 0.705882 0.342857 0.495868 0.193955 0.754902 0.308617 0.478261 1 khoa_tieng_nga suite26_tree 1588 102 0.064232 0.254874 0.792590 0.056233 0.034846 0.045567 -0.018665 0.301887 0.470588 0.367816 0.423280 0.222689 0.519608 0.311765 0.410217 0.182390 0.568627 0.276190 0.399449 0.161209 0.627451 0.256513 0.397516 1 khoa_tieng_nga suite26_tree_memory 1588 102 0.064232 0.261001 0.813673 0.057093 0.037027 0.032446 -0.031785 0.276730 0.431373 0.337165 0.388007 0.222689 0.519608 0.311765 0.410217 0.226415 0.705882 0.342857 0.495868 0.193955 0.754902 0.308617 0.478261 1 khoa_tieng_nhat committee 2840 17 0.005986 0.502424 0.930070 0.005352 0.008406 0.009915 0.003930 0.045775 0.764706 0.086379 0.184659 0.030516 0.764706 0.058691 0.131579 0.024648 0.823529 0.047863 0.110063 0.022535 0.941176 0.044017 0.102828 1 khoa_tieng_nhat suite14 2840 17 0.005986 0.522380 0.930070 0.004647 0.007362 0.009417 0.003431 0.045775 0.764706 0.086379 0.184659 0.030516 0.764706 0.058691 0.131579 0.024648 0.823529 0.047863 0.110063 0.022535 0.941176 0.044017 0.102828 1 khoa_tieng_nhat suite16 2840 17 0.005986 0.491383 0.955367 0.005981 0.020683 0.025610 0.019624 0.045775 0.764706 0.086379 0.184659 0.032864 0.823529 0.063205 0.141700 0.029930 1.000000 0.058120 0.133648 0.023944 1.000000 0.046768 0.109254 1 khoa_tieng_nhat suite17 2840 17 0.005986 0.546766 0.958742 0.004743 0.009625 0.011514 0.005529 0.045775 0.764706 0.086379 0.184659 0.037559 0.941176 0.072235 0.161943 0.029930 1.000000 0.058120 0.133648 0.023944 1.000000 0.046768 0.109254 1 khoa_tieng_nhat suite18 2840 17 0.005986 0.559295 0.948282 0.004763 0.009291 0.011549 0.005563 0.045775 0.764706 0.086379 0.184659 0.030516 0.764706 0.058691 0.131579 0.024648 0.823529 0.047863 0.110063 0.023944 1.000000 0.046768 0.109254 1 khoa_tieng_nhat suite20 2840 17 0.005986 0.109582 0.945031 0.015798 0.031215 0.037201 0.031215 0.045775 0.764706 0.086379 0.184659 0.037559 0.941176 0.072235 0.161943 0.029930 1.000000 0.058120 0.133648 0.023944 1.000000 0.046768 0.109254 1 khoa_tieng_nhat suite21 2840 17 0.005986 0.476964 0.938113 0.005075 0.007320 0.008458 0.002472 0.045775 0.764706 0.086379 0.184659 0.030516 0.764706 0.058691 0.131579 0.024648 0.823529 0.047863 0.110063 0.022535 0.941176 0.044017 0.102828 1 khoa_tieng_nhat suite22 2840 17 0.005986 0.549821 0.960451 0.005156 0.005783 0.007199 0.001213 0.045775 0.764706 0.086379 0.184659 0.035211 0.882353 0.067720 0.151822 0.029930 1.000000 0.058120 0.133648 0.023944 1.000000 0.046768 0.109254 1 khoa_tieng_nhat suite22_primary 2840 17 0.005986 0.582929 0.988144 0.004938 0.002864 0.004405 -0.001581 0.059859 1.000000 0.112957 0.241477 0.039906 1.000000 0.076749 0.172065 0.029930 1.000000 0.058120 0.133648 0.023944 1.000000 0.046768 0.109254 ============================================================================================================================================================================================== SUITE26 TARGET FOLD 2 ============================================================================================================================================================================================== [DATA] history=286,472 fail=5,528 (1.93%) train=170,825 validation=115,647 target=42,122 fail=933 (2.21%) [TREE] fitting selection tree on older training blocks only... [TREE] selection summary={'n_trees': 96, 'leaf_vocab_size': 73729, 'mean_leaves_per_tree': 768.0, 'min_leaves_per_tree': 768, 'max_leaves_per_tree': 768, 'training_oob_ap': 0.6060591447585214} [TREE-HISTORY-SEL] 50,000/286,472 [TREE-HISTORY-SEL] 100,000/286,472 [TREE-HISTORY-SEL] 150,000/286,472 [TREE-HISTORY-SEL] 200,000/286,472 [TREE-HISTORY-SEL] 250,000/286,472 [TREE-HISTORY-SEL] 286,472/286,472 [TREE] calibration a=0.8576 b=-1.7854 validation macroAP=0.2263 training_OOB_AP=0.6060591447585214 [HISTORY STORE] selection phase (memory candidates restricted to training partition)... [HISTORY STORE] 50,000/286,472 [HISTORY STORE] 100,000/286,472 [HISTORY STORE] 150,000/286,472 [HISTORY STORE] 200,000/286,472 [HISTORY STORE] 250,000/286,472 FOLD 2 SELECTION STUDENT-HISTORY SUPPORT -------------------------------------------------------------------------------- faculty rows prevalence history_mean history_zero_rate history_failure_mean same_course_history_mean course_seen_mean new_course_rate history_grade_present_rate khoa_cong_nghe_thong_tin 24312 0.031466 6.445212 0.465202 0.107971 0.000041 565.172343 0.090326 1.0 khoa_quan_tri_kinh_doanh_va_du_lich 39125 0.028984 8.669623 0.249304 0.118748 0.000000 972.350364 0.013776 1.0 khoa_quoc_te_hoc 12802 0.010077 6.517497 0.435479 0.021169 0.000000 604.108577 0.057803 1.0 khoa_tieng_anh 56161 0.017254 10.103221 0.258311 0.029629 0.000000 796.836524 0.054914 1.0 khoa_tieng_bo_dao_nha 4885 0.031320 9.420471 0.310542 0.086387 0.000000 639.189355 0.012692 1.0 khoa_tieng_duc 12783 0.017054 10.487679 0.267621 0.045607 0.000000 739.221622 0.014081 1.0 khoa_tieng_han_quoc 20006 0.004749 11.119714 0.242227 0.022993 0.000000 720.851645 0.048236 1.0 khoa_tieng_italia 12816 0.034098 9.048065 0.351826 0.118212 0.000000 657.847378 0.055243 1.0 khoa_tieng_nga 8196 0.045388 10.587116 0.252928 0.155808 0.000000 698.980478 0.010737 1.0 khoa_tieng_nhat 21883 0.009871 9.641914 0.358589 0.029749 0.000000 719.138098 0.025088 1.0 khoa_tieng_phap 17871 0.012310 9.177270 0.359577 0.034357 0.000000 665.382687 0.006547 1.0 khoa_tieng_tay_ban_nha 9426 0.024719 9.237004 0.354233 0.069276 0.000000 641.002334 0.020263 1.0 khoa_tieng_trung_quoc 40174 0.005476 9.099119 0.338030 0.027978 0.000000 794.952855 0.055907 1.0 khoa_viet_nam_hoc 6032 0.060842 7.481930 0.352951 0.285477 0.000000 125.764257 0.000000 1.0 ------------------------------------------------------------------------------------------------------------------------------------------------------ [VARIANT suite26_tree_memory] [SELECT MEMORY] epoch=01/12 loss=0.09898 BCE=0.07197 rank=0.12675 joint=0.05016 ability=0.00000 macroAP=0.1945 F2@20=0.2474 Brier=0.0261 best=01 [SELECT MEMORY] epoch=02/12 loss=0.08768 BCE=0.06768 rank=0.08859 joint=0.03558 ability=0.00000 macroAP=0.1970 F2@20=0.2581 Brier=0.0260 best=02 [SELECT MEMORY] epoch=03/12 loss=0.08027 BCE=0.06527 rank=0.06411 joint=0.02644 ability=0.00000 macroAP=0.1976 F2@20=0.2559 Brier=0.0260 best=03 [SELECT MEMORY] epoch=04/12 loss=0.07553 BCE=0.06229 rank=0.05760 joint=0.02224 ability=0.00000 macroAP=0.2001 F2@20=0.2559 Brier=0.0259 best=04 [SELECT MEMORY] epoch=05/12 loss=0.07322 BCE=0.06164 rank=0.04826 joint=0.01946 ability=0.00000 macroAP=0.1977 F2@20=0.2559 Brier=0.0260 best=04 [SELECT MEMORY] epoch=06/12 loss=0.07392 BCE=0.06263 rank=0.04796 joint=0.01881 ability=0.00000 macroAP=0.1990 F2@20=0.2554 Brier=0.0260 best=04 [SELECT MEMORY] epoch=07/12 loss=0.07373 BCE=0.06237 rank=0.04892 joint=0.01861 ability=0.00000 macroAP=0.2022 F2@20=0.2559 Brier=0.0262 best=07 [SELECT MEMORY] epoch=08/12 loss=0.07149 BCE=0.06155 rank=0.04191 joint=0.01576 ability=0.00000 macroAP=0.1997 F2@20=0.2559 Brier=0.0260 best=07 [SELECT MEMORY] epoch=09/12 loss=0.07292 BCE=0.06209 rank=0.04845 joint=0.01650 ability=0.00000 macroAP=0.2006 F2@20=0.2559 Brier=0.0260 best=07 [SELECT MEMORY] epoch=10/12 loss=0.07100 BCE=0.06055 rank=0.04914 joint=0.01406 ability=0.00000 macroAP=0.2011 F2@20=0.2557 Brier=0.0260 best=07 ------------------------------------------------------------------------------------------------------------------------------------------------------ [VARIANT suite26_tair] [SELECT TAIR] epoch=01/12 loss=0.10448 BCE=0.07237 rank=0.12733 joint=0.04985 ability=0.08440 macroAP=0.2115 F2@20=0.2615 Brier=0.0258 best=01 [SELECT TAIR] epoch=02/12 loss=0.09282 BCE=0.06906 rank=0.08958 joint=0.03684 ability=0.07025 macroAP=0.1981 F2@20=0.2560 Brier=0.0260 best=01 [SELECT TAIR] epoch=03/12 loss=0.08104 BCE=0.06474 rank=0.05431 joint=0.02468 ability=0.06039 macroAP=0.1957 F2@20=0.2546 Brier=0.0260 best=01 [SELECT TAIR] epoch=04/12 loss=0.07705 BCE=0.06223 rank=0.04915 joint=0.02072 ability=0.06001 macroAP=0.1973 F2@20=0.2559 Brier=0.0260 best=01 [SELECT TAIR] epoch=05/12 loss=0.07612 BCE=0.06197 rank=0.04952 joint=0.01842 ability=0.05520 macroAP=0.1992 F2@20=0.2559 Brier=0.0260 best=01 [COMMITTEE BLEND ABLATION] selected alpha=0.00 policyAP=0.2737 policyF2=0.2730 [TREE] fitting production tree on all permissible history... [TREE] production summary={'n_trees': 96, 'leaf_vocab_size': 73729, 'mean_leaves_per_tree': 768.0, 'min_leaves_per_tree': 768, 'max_leaves_per_tree': 768, 'training_oob_ap': 0.48129257214329035} [TREE-HISTORY-PROD] 50,000/286,472 [TREE-HISTORY-PROD] 100,000/286,472 [TREE-HISTORY-PROD] 150,000/286,472 [TREE-HISTORY-PROD] 200,000/286,472 [TREE-HISTORY-PROD] 250,000/286,472 [TREE-HISTORY-PROD] 286,472/286,472 [TREE-TARGET-PROD] 42,122/42,122 [HISTORY STORE] production history... [HISTORY STORE] 50,000/286,472 [HISTORY STORE] 100,000/286,472 [HISTORY STORE] 150,000/286,472 [HISTORY STORE] 200,000/286,472 [HISTORY STORE] 250,000/286,472 [HISTORY STORE] production target... FOLD 2 TARGET STUDENT-HISTORY SUPPORT -------------------------------------------------------------------------------- faculty rows prevalence history_mean history_zero_rate history_failure_mean same_course_history_mean course_seen_mean new_course_rate history_grade_present_rate fold khoa_cong_nghe_thong_tin 4598 0.033058 14.876686 0.000870 0.168987 0.0 876.232927 0.089604 1.0 2 khoa_quan_tri_kinh_doanh_va_du_lich 5530 0.030018 12.344665 0.005787 0.229656 0.0 1134.236890 0.006329 1.0 2 khoa_quoc_te_hoc 2095 0.009069 13.170406 0.002387 0.067780 0.0 771.918854 0.094511 1.0 2 khoa_tieng_anh 8328 0.014649 16.202690 0.089817 0.047791 0.0 598.579851 0.232229 1.0 2 khoa_tieng_bo_dao_nha 716 0.041899 16.761173 0.000000 0.384078 0.0 952.994413 0.008380 1.0 2 khoa_tieng_duc 1893 0.027998 18.049657 0.005283 0.108822 0.0 846.922874 0.002641 1.0 2 khoa_tieng_han_quoc 3337 0.008690 17.581061 0.009589 0.052143 0.0 640.098292 0.082409 1.0 2 khoa_tieng_italia 2024 0.035079 18.532115 0.009881 0.227273 0.0 761.482213 0.011364 1.0 2 khoa_tieng_nga 1567 0.052967 15.462668 0.002553 0.451819 0.0 904.871091 0.003191 1.0 2 khoa_tieng_nhat 2448 0.004493 18.426062 0.001634 0.038399 0.0 760.901144 0.010621 1.0 2 khoa_tieng_phap 2204 0.018149 15.719147 0.002722 0.104809 0.0 737.340290 0.067151 1.0 2 khoa_tieng_tay_ban_nha 1242 0.033816 17.991143 0.000000 0.301932 0.0 682.563607 0.103865 1.0 2 khoa_tieng_trung_quoc 5584 0.013610 14.889148 0.109062 0.020415 0.0 950.324319 0.121418 1.0 2 khoa_viet_nam_hoc 556 0.070144 13.181655 0.000000 0.156475 0.0 137.201439 0.000000 1.0 2 [REFIT MEMORY] epoch=01/7 loss=0.12618 BCE=0.09670 rank=0.12915 joint=0.05542 ability=0.00000 [REFIT MEMORY] epoch=07/7 loss=0.10384 BCE=0.08886 rank=0.06012 joint=0.02455 ability=0.00000 [VARIANT suite26_tree_memory] selected_epochs=7 target macroAP=0.4102 [REFIT TAIR] epoch=01/1 loss=0.13078 BCE=0.09645 rank=0.13479 joint=0.05487 ability=0.08493 [VARIANT suite26_tair] selected_epochs=1 target macroAP=0.3572 FOLD 2 TREE CURRENT-STATE FEATURE IMPORTANCE -------------------------------------------------------------------------------- rank feature importance fold 1 hist_course_pass_rate 0.064472 2 2 course_status_FIT ||| ứng_dụng_công_nghệ_thông_tin ||| Computer Skills 0.061807 2 3 prev_semester_gpa10 0.059337 2 4 recent3_course_grade10_mean 0.038648 2 5 prev_failed_credits 0.028334 2 6 hist_semester_gpa10_mean 0.026900 2 7 hist_course_grade10_mean 0.024859 2 8 recent3_semester_gpa10_mean 0.021925 2 9 prev_outstanding_failed_credits 0.021067 2 10 hist_component_K2_mean 0.020186 2 11 prev_cumulative_gpa10 0.020014 2 12 recent3_component_grade_mean 0.017679 2 13 recent3_course_grade10_std 0.016214 2 14 recent3_course_grade10_min 0.015561 2 15 hist_component_grade_mean 0.014651 2 16 target_semester_registered_credits 0.012991 2 17 hist_passed_credits_sum 0.012811 2 18 hist_course_grade10_median 0.012713 2 19 hist_warning_in_last_semester 0.012034 2 20 hist_course_grade10_std 0.011886 2 21 hist_component_special_rate 0.011118 2 22 hist_failed_credits_sum 0.011011 2 23 hist_component_low_rate 0.010874 2 24 target_semester_difficulty_weighted_workload 0.010148 2 25 hist_component_grade_std 0.010080 2 26 recent3_course_grade10_median 0.009457 2 27 prev_passed_credits 0.008947 2 28 hist_course_grade10_min 0.008618 2 29 hist_warning_credit_debt_count 0.008613 2 30 recent3_semester_count 0.008173 2 31 hist_component_numeric_rate 0.008028 2 32 recent3_course_grade10_max 0.007457 2 33 target_semester_average_course_difficulty 0.007447 2 34 hist_component_T1_count 0.007383 2 35 prev_ssvhk_semester_ordinal 0.007259 2 36 hist_registered_credits_mean 0.007197 2 37 recent3_course_grade10_count 0.007141 2 38 hist_component_T1_special_count 0.006949 2 39 hist_course_grade10_max 0.006881 2 40 recent3_registered_credits_mean 0.006827 2 SUITE26 TARGET FOLD 2 — NEW + AVAILABLE REFERENCE RESULTS -------------------------------------------------------------------------------- fold faculty model rows failures prevalence ap auc brier ece10 mean_score calibration_gap precision_at_10 recall_at_10 f1_at_10 fbeta_at_10 precision_at_15 recall_at_15 f1_at_15 fbeta_at_15 precision_at_20 recall_at_20 f1_at_20 fbeta_at_20 precision_at_25 recall_at_25 f1_at_25 fbeta_at_25 2 khoa_cong_nghe_thong_tin committee 4598 152 0.033058 0.472860 0.920570 0.023143 0.012838 0.037651 0.004593 0.236957 0.717105 0.356209 0.510300 0.175362 0.796053 0.287411 0.466102 0.141304 0.855263 0.242537 0.425393 0.118261 0.894737 0.208909 0.386803 2 khoa_cong_nghe_thong_tin council 4598 152 0.033058 0.476690 0.915169 0.026448 0.054868 0.087345 0.054287 0.236957 0.717105 0.356209 0.510300 0.175362 0.796053 0.287411 0.466102 0.140217 0.848684 0.240672 0.422120 0.116522 0.881579 0.205837 0.381115 2 khoa_cong_nghe_thong_tin suite14 4598 152 0.033058 0.473774 0.907398 0.041821 0.095287 0.128345 0.095287 0.230435 0.697368 0.346405 0.496255 0.171014 0.776316 0.280285 0.454545 0.134783 0.815789 0.231343 0.405759 0.110435 0.835526 0.195084 0.361206 2 khoa_cong_nghe_thong_tin suite16 4598 152 0.033058 0.499138 0.935128 0.042258 0.091778 0.124836 0.091778 0.239130 0.723684 0.359477 0.514981 0.188406 0.855263 0.308789 0.500770 0.148913 0.901316 0.255597 0.448298 0.120870 0.914474 0.213518 0.395336 2 khoa_cong_nghe_thong_tin suite17 4598 152 0.033058 0.487261 0.933280 0.023313 0.013502 0.037228 0.004170 0.241304 0.730263 0.362745 0.519663 0.184058 0.835526 0.301663 0.489214 0.146739 0.888158 0.251866 0.441754 0.120870 0.914474 0.213518 0.395336 2 khoa_cong_nghe_thong_tin suite18 4598 152 0.033058 0.487408 0.934419 0.023322 0.014046 0.037118 0.004061 0.239130 0.723684 0.359477 0.514981 0.179710 0.815789 0.294537 0.477658 0.146739 0.888158 0.251866 0.441754 0.122609 0.927632 0.216590 0.401024 2 khoa_cong_nghe_thong_tin suite20 4598 152 0.033058 0.320783 0.897215 0.168618 0.274452 0.307510 0.274452 0.215217 0.651316 0.323529 0.463483 0.155072 0.703947 0.254157 0.412173 0.127174 0.769737 0.218284 0.382853 0.106957 0.809211 0.188940 0.349829 2 khoa_cong_nghe_thong_tin suite21 4598 152 0.033058 0.482815 0.922643 0.022936 0.017849 0.048441 0.015383 0.223913 0.677632 0.336601 0.482210 0.171014 0.776316 0.280285 0.454545 0.140217 0.848684 0.240672 0.422120 0.117391 0.888158 0.207373 0.383959 2 khoa_cong_nghe_thong_tin suite22 4598 152 0.033058 0.480425 0.916504 0.023646 0.010939 0.030946 -0.002112 0.226087 0.684211 0.339869 0.486891 0.169565 0.769737 0.277910 0.450693 0.135870 0.822368 0.233209 0.409031 0.114783 0.868421 0.202765 0.375427 2 khoa_cong_nghe_thong_tin suite22_primary 4598 152 0.033058 0.329882 0.875000 0.026521 0.003434 0.030435 -0.002623 0.202174 0.611842 0.303922 0.435393 0.143478 0.651316 0.235154 0.381356 0.113043 0.684211 0.194030 0.340314 0.099130 0.750000 0.175115 0.324232 2 khoa_cong_nghe_thong_tin suite22_relational 4598 152 0.033058 0.352241 0.894213 0.026740 0.007650 0.039975 0.006917 0.213043 0.644737 0.320261 0.458801 0.160870 0.730263 0.263658 0.427581 0.129348 0.782895 0.222015 0.389398 0.109565 0.828947 0.193548 0.358362 2 khoa_cong_nghe_thong_tin suite23 4598 152 0.033058 0.485999 0.927667 0.022971 0.013836 0.036785 0.003727 0.241304 0.730263 0.362745 0.519663 0.178261 0.809211 0.292162 0.473806 0.144565 0.875000 0.248134 0.435209 0.119130 0.901316 0.210445 0.389647 2 khoa_cong_nghe_thong_tin suite23_graph 4598 152 0.033058 0.370662 0.908878 0.027005 0.023008 0.046725 0.013667 0.228261 0.690789 0.343137 0.491573 0.171014 0.776316 0.280285 0.454545 0.138043 0.835526 0.236940 0.415576 0.113043 0.855263 0.199693 0.369738 2 khoa_cong_nghe_thong_tin suite24 4598 152 0.033058 0.462877 0.920363 0.023188 0.012322 0.042935 0.009878 0.239130 0.723684 0.359477 0.514981 0.179710 0.815789 0.294537 0.477658 0.142391 0.861842 0.244403 0.428665 0.118261 0.894737 0.208909 0.386803 2 khoa_cong_nghe_thong_tin suite24_posthoc 4598 152 0.033058 0.495181 0.933114 0.022779 0.015035 0.040685 0.007627 0.243478 0.736842 0.366013 0.524345 0.185507 0.842105 0.304038 0.493066 0.145652 0.881579 0.250000 0.438482 0.121739 0.921053 0.215054 0.398180 2 khoa_cong_nghe_thong_tin suite25 4598 152 0.033058 0.466737 0.900441 0.022682 0.009747 0.028976 -0.004082 0.234783 0.710526 0.352941 0.505618 0.165217 0.750000 0.270784 0.439137 0.126087 0.763158 0.216418 0.379581 0.108696 0.822368 0.192012 0.355518 2 khoa_cong_nghe_thong_tin suite25_blend 4598 152 0.033058 0.493179 0.926532 0.022597 0.010513 0.033677 0.000619 0.243478 0.736842 0.366013 0.524345 0.179710 0.815789 0.294537 0.477658 0.136957 0.828947 0.235075 0.412304 0.117391 0.888158 0.207373 0.383959 2 khoa_cong_nghe_thong_tin suite26_committee_blend 4598 152 0.033058 0.472860 0.920570 0.023143 0.012838 0.037651 0.004593 0.236957 0.717105 0.356209 0.510300 0.175362 0.796053 0.287411 0.466102 0.141304 0.855263 0.242537 0.425393 0.118261 0.894737 0.208909 0.386803 2 khoa_cong_nghe_thong_tin suite26_joint_head 4598 152 0.033058 0.452031 0.888905 0.026854 0.040552 0.073610 0.040552 0.221739 0.671053 0.333333 0.477528 0.156522 0.710526 0.256532 0.416025 0.130435 0.789474 0.223881 0.392670 0.107826 0.815789 0.190476 0.352673 2 khoa_cong_nghe_thong_tin suite26_tair 4598 152 0.033058 0.297756 0.858249 0.027417 0.010551 0.024718 -0.008340 0.197826 0.598684 0.297386 0.426030 0.144928 0.657895 0.237530 0.385208 0.120652 0.730263 0.207090 0.363220 0.099130 0.750000 0.175115 0.324232 2 khoa_cong_nghe_thong_tin suite26_tree 4598 152 0.033058 0.315718 0.858184 0.026900 0.024016 0.054426 0.021368 0.197826 0.598684 0.297386 0.426030 0.144928 0.657895 0.237530 0.385208 0.120652 0.730263 0.207090 0.363220 0.099130 0.750000 0.175115 0.324232 2 khoa_cong_nghe_thong_tin suite26_tree_memory 4598 152 0.033058 0.318756 0.860821 0.026449 0.005924 0.027254 -0.005803 0.200000 0.605263 0.300654 0.430712 0.147826 0.671053 0.242280 0.392912 0.120652 0.730263 0.207090 0.363220 0.099130 0.750000 0.175115 0.324232 2 khoa_cong_nghe_thong_tin v2 4598 152 0.033058 0.462038 0.922494 0.060802 0.135133 0.168190 0.135133 0.226087 0.684211 0.339869 0.486891 0.181159 0.822368 0.296912 0.481510 0.142391 0.861842 0.244403 0.428665 0.118261 0.894737 0.208909 0.386803 2 khoa_quan_tri_kinh_doanh_va_du_lich committee 5530 166 0.030018 0.549834 0.909619 0.019035 0.015487 0.041229 0.011211 0.220615 0.734940 0.339360 0.501233 0.160241 0.801205 0.267068 0.445114 0.125678 0.837349 0.218553 0.392655 0.104197 0.867470 0.186047 0.351906 2 khoa_quan_tri_kinh_doanh_va_du_lich suite14 5530 166 0.030018 0.545998 0.902980 0.042703 0.106776 0.135838 0.105820 0.207957 0.692771 0.319889 0.472473 0.148193 0.740964 0.246988 0.411647 0.119349 0.795181 0.207547 0.372881 0.097685 0.813253 0.174419 0.329912 2 khoa_quan_tri_kinh_doanh_va_du_lich suite16 5530 166 0.030018 0.564322 0.932926 0.045202 0.105225 0.135243 0.105225 0.236890 0.789157 0.364395 0.538209 0.168675 0.843373 0.281124 0.468541 0.133816 0.891566 0.232704 0.418079 0.108538 0.903614 0.193798 0.366569 2 khoa_quan_tri_kinh_doanh_va_du_lich suite17 5530 166 0.030018 0.558182 0.924736 0.020026 0.020437 0.042374 0.012356 0.226040 0.753012 0.347705 0.513558 0.163855 0.819277 0.273092 0.455154 0.132911 0.885542 0.231132 0.415254 0.108538 0.903614 0.193798 0.366569 2 khoa_quan_tri_kinh_doanh_va_du_lich suite18 5530 166 0.030018 0.556925 0.923863 0.020030 0.020249 0.041880 0.011862 0.227848 0.759036 0.350487 0.517666 0.162651 0.813253 0.271084 0.451807 0.132007 0.879518 0.229560 0.412429 0.108538 0.903614 0.193798 0.366569 2 khoa_quan_tri_kinh_doanh_va_du_lich suite20 5530 166 0.030018 0.464043 0.941029 0.110732 0.181215 0.211233 0.181215 0.224231 0.746988 0.344924 0.509449 0.171084 0.855422 0.285141 0.475234 0.137432 0.915663 0.238994 0.429379 0.114327 0.951807 0.204134 0.386119 2 khoa_quan_tri_kinh_doanh_va_du_lich suite21 5530 166 0.030018 0.530865 0.926398 0.020894 0.026273 0.055663 0.025645 0.218807 0.728916 0.336579 0.497124 0.162651 0.813253 0.271084 0.451807 0.129295 0.861446 0.224843 0.403955 0.107815 0.897590 0.192506 0.364125 2 khoa_quan_tri_kinh_doanh_va_du_lich suite22 5530 166 0.030018 0.525015 0.926021 0.020145 0.015972 0.042136 0.012118 0.211573 0.704819 0.325452 0.480690 0.161446 0.807229 0.269076 0.448461 0.130199 0.867470 0.226415 0.406780 0.109986 0.915663 0.196382 0.371457 2 khoa_quan_tri_kinh_doanh_va_du_lich suite22_primary 5530 166 0.030018 0.447841 0.907996 0.023682 0.021600 0.049640 0.019622 0.191682 0.638554 0.294854 0.435497 0.149398 0.746988 0.248996 0.414993 0.119349 0.795181 0.207547 0.372881 0.103473 0.861446 0.184755 0.349462 2 khoa_quan_tri_kinh_doanh_va_du_lich suite22_relational 5530 166 0.030018 0.472086 0.935960 0.023730 0.027788 0.056341 0.026323 0.215190 0.716867 0.331015 0.488907 0.165060 0.825301 0.275100 0.458501 0.135624 0.903614 0.235849 0.423729 0.114327 0.951807 0.204134 0.386119 2 khoa_quan_tri_kinh_doanh_va_du_lich suite23 5530 166 0.030018 0.569418 0.929673 0.019078 0.017191 0.040018 0.010000 0.233273 0.777108 0.358832 0.529992 0.168675 0.843373 0.281124 0.468541 0.133816 0.891566 0.232704 0.418079 0.107091 0.891566 0.191214 0.361681 2 khoa_quan_tri_kinh_doanh_va_du_lich suite23_graph 5530 166 0.030018 0.514125 0.940697 0.023255 0.027259 0.046383 0.016365 0.227848 0.759036 0.350487 0.517666 0.173494 0.867470 0.289157 0.481928 0.134720 0.897590 0.234277 0.420904 0.112880 0.939759 0.201550 0.381232 2 khoa_quan_tri_kinh_doanh_va_du_lich suite24 5530 166 0.030018 0.582180 0.934937 0.018729 0.019918 0.047328 0.017310 0.231465 0.771084 0.356050 0.525883 0.171084 0.855422 0.285141 0.475234 0.131103 0.873494 0.227987 0.409605 0.109262 0.909639 0.195090 0.369013 2 khoa_quan_tri_kinh_doanh_va_du_lich suite24_posthoc 5530 166 0.030018 0.575343 0.931656 0.019051 0.022084 0.046921 0.016903 0.233273 0.777108 0.358832 0.529992 0.168675 0.843373 0.281124 0.468541 0.132911 0.885542 0.231132 0.415254 0.108538 0.903614 0.193798 0.366569 2 khoa_quan_tri_kinh_doanh_va_du_lich suite25 5530 166 0.030018 0.671142 0.945875 0.017395 0.015678 0.031532 0.001514 0.254973 0.849398 0.392211 0.579293 0.175904 0.879518 0.293173 0.488621 0.135624 0.903614 0.235849 0.423729 0.109986 0.915663 0.196382 0.371457 2 khoa_quan_tri_kinh_doanh_va_du_lich suite25_blend 5530 166 0.030018 0.595341 0.937321 0.018120 0.012651 0.036203 0.006184 0.235081 0.783133 0.361613 0.534100 0.165060 0.825301 0.275100 0.458501 0.129295 0.861446 0.224843 0.403955 0.107815 0.897590 0.192506 0.364125 2 khoa_quan_tri_kinh_doanh_va_du_lich suite26_committee_blend 5530 166 0.030018 0.549834 0.909619 0.019035 0.015487 0.041229 0.011211 0.220615 0.734940 0.339360 0.501233 0.160241 0.801205 0.267068 0.445114 0.125678 0.837349 0.218553 0.392655 0.104197 0.867470 0.186047 0.351906 2 khoa_quan_tri_kinh_doanh_va_du_lich suite26_joint_head 5530 166 0.030018 0.520949 0.911729 0.028955 0.055916 0.085934 0.055916 0.204340 0.680723 0.314325 0.464256 0.145783 0.728916 0.242972 0.404953 0.122966 0.819277 0.213836 0.384181 0.104197 0.867470 0.186047 0.351906 2 khoa_quan_tri_kinh_doanh_va_du_lich suite26_tair 5530 166 0.030018 0.357849 0.879287 0.023134 0.006290 0.029561 -0.000457 0.189873 0.632530 0.292072 0.431389 0.137349 0.686747 0.228916 0.381526 0.112116 0.746988 0.194969 0.350282 0.091896 0.765060 0.164083 0.310362 2 khoa_quan_tri_kinh_doanh_va_du_lich suite26_tree 5530 166 0.030018 0.364282 0.877147 0.025544 0.032688 0.062706 0.032688 0.188065 0.626506 0.289291 0.427280 0.134940 0.674699 0.224900 0.374833 0.112116 0.746988 0.194969 0.350282 0.090449 0.753012 0.161499 0.305474 2 khoa_quan_tri_kinh_doanh_va_du_lich suite26_tree_memory 5530 166 0.030018 0.404342 0.881084 0.022079 0.007900 0.030941 0.000923 0.189873 0.632530 0.292072 0.431389 0.137349 0.686747 0.228916 0.381526 0.112116 0.746988 0.194969 0.350282 0.091896 0.765060 0.164083 0.310362 2 khoa_quoc_te_hoc committee 2095 19 0.009069 0.466005 0.959462 0.006878 0.013799 0.022153 0.013083 0.085714 0.947368 0.157205 0.314685 0.057325 0.947368 0.108108 0.230769 0.042959 0.947368 0.082192 0.181818 0.034351 0.947368 0.066298 0.150000 2 khoa_quoc_te_hoc suite14 2095 19 0.009069 0.432276 0.960374 0.032502 0.114876 0.123945 0.114876 0.085714 0.947368 0.157205 0.314685 0.057325 0.947368 0.108108 0.230769 0.042959 0.947368 0.082192 0.181818 0.034351 0.947368 0.066298 0.150000 2 khoa_quoc_te_hoc suite16 2095 19 0.009069 0.473921 0.960780 0.024839 0.076802 0.085871 0.076802 0.085714 0.947368 0.157205 0.314685 0.057325 0.947368 0.108108 0.230769 0.042959 0.947368 0.082192 0.181818 0.034351 0.947368 0.066298 0.150000 2 khoa_quoc_te_hoc suite17 2095 19 0.009069 0.488217 0.961211 0.006948 0.016730 0.023198 0.014128 0.085714 0.947368 0.157205 0.314685 0.057325 0.947368 0.108108 0.230769 0.042959 0.947368 0.082192 0.181818 0.034351 0.947368 0.066298 0.150000 2 khoa_quoc_te_hoc suite18 2095 19 0.009069 0.473864 0.963264 0.006932 0.016883 0.022965 0.013896 0.085714 0.947368 0.157205 0.314685 0.057325 0.947368 0.108108 0.230769 0.042959 0.947368 0.082192 0.181818 0.034351 0.947368 0.066298 0.150000 2 khoa_quoc_te_hoc suite20 2095 19 0.009069 0.134788 0.931878 0.108362 0.144215 0.153284 0.144215 0.061905 0.684211 0.113537 0.227273 0.047771 0.789474 0.090090 0.192308 0.042959 0.947368 0.082192 0.181818 0.034351 0.947368 0.066298 0.150000 2 khoa_quoc_te_hoc suite21 2095 19 0.009069 0.507836 0.955430 0.009537 0.031238 0.039241 0.030172 0.085714 0.947368 0.157205 0.314685 0.057325 0.947368 0.108108 0.230769 0.042959 0.947368 0.082192 0.181818 0.034351 0.947368 0.066298 0.150000 2 khoa_quoc_te_hoc suite22 2095 19 0.009069 0.501735 0.941588 0.006779 0.012461 0.018420 0.009351 0.085714 0.947368 0.157205 0.314685 0.057325 0.947368 0.108108 0.230769 0.042959 0.947368 0.082192 0.181818 0.034351 0.947368 0.066298 0.150000 2 khoa_quoc_te_hoc suite22_primary 2095 19 0.009069 0.265678 0.880996 0.008173 0.011655 0.019388 0.010319 0.057143 0.631579 0.104803 0.209790 0.038217 0.631579 0.072072 0.153846 0.040573 0.894737 0.077626 0.171717 0.032443 0.894737 0.062615 0.141667 2 khoa_quoc_te_hoc suite22_relational 2095 19 0.009069 0.358624 0.953504 0.007682 0.008918 0.017025 0.007956 0.080952 0.894737 0.148472 0.297203 0.054140 0.894737 0.102102 0.217949 0.042959 0.947368 0.082192 0.181818 0.034351 0.947368 0.066298 0.150000 2 khoa_quoc_te_hoc suite23 2095 19 0.009069 0.467968 0.958929 0.006597 0.015104 0.020919 0.011850 0.085714 0.947368 0.157205 0.314685 0.057325 0.947368 0.108108 0.230769 0.042959 0.947368 0.082192 0.181818 0.034351 0.947368 0.066298 0.150000 2 khoa_quoc_te_hoc suite23_graph 2095 19 0.009069 0.314436 0.942780 0.008124 0.021962 0.027560 0.018491 0.085714 0.947368 0.157205 0.314685 0.057325 0.947368 0.108108 0.230769 0.042959 0.947368 0.082192 0.181818 0.034351 0.947368 0.066298 0.150000 2 khoa_quoc_te_hoc suite24 2095 19 0.009069 0.510274 0.969729 0.007706 0.025508 0.033916 0.024847 0.085714 0.947368 0.157205 0.314685 0.057325 0.947368 0.108108 0.230769 0.042959 0.947368 0.082192 0.181818 0.034351 0.947368 0.066298 0.150000 2 khoa_quoc_te_hoc suite24_posthoc 2095 19 0.009069 0.505414 0.968005 0.006781 0.023632 0.026180 0.017111 0.085714 0.947368 0.157205 0.314685 0.057325 0.947368 0.108108 0.230769 0.042959 0.947368 0.082192 0.181818 0.034351 0.947368 0.066298 0.150000 2 khoa_quoc_te_hoc suite25 2095 19 0.009069 0.415119 0.944706 0.007369 0.026174 0.033253 0.024183 0.085714 0.947368 0.157205 0.314685 0.057325 0.947368 0.108108 0.230769 0.042959 0.947368 0.082192 0.181818 0.034351 0.947368 0.066298 0.150000 2 khoa_quoc_te_hoc suite25_blend 2095 19 0.009069 0.511181 0.960729 0.006605 0.015906 0.022611 0.013542 0.085714 0.947368 0.157205 0.314685 0.057325 0.947368 0.108108 0.230769 0.042959 0.947368 0.082192 0.181818 0.034351 0.947368 0.066298 0.150000 2 khoa_quoc_te_hoc suite26_committee_blend 2095 19 0.009069 0.466005 0.959462 0.006878 0.013799 0.022153 0.013083 0.085714 0.947368 0.157205 0.314685 0.057325 0.947368 0.108108 0.230769 0.042959 0.947368 0.082192 0.181818 0.034351 0.947368 0.066298 0.150000 2 khoa_quoc_te_hoc suite26_joint_head 2095 19 0.009069 0.435087 0.946582 0.010040 0.035657 0.044671 0.035602 0.085714 0.947368 0.157205 0.314685 0.057325 0.947368 0.108108 0.230769 0.042959 0.947368 0.082192 0.181818 0.034351 0.947368 0.066298 0.150000 2 khoa_quoc_te_hoc suite26_tair 2095 19 0.009069 0.166065 0.884634 0.008158 0.010309 0.016401 0.007331 0.061905 0.684211 0.113537 0.227273 0.041401 0.684211 0.078078 0.166667 0.031026 0.684211 0.059361 0.131313 0.028626 0.789474 0.055249 0.125000 2 khoa_quoc_te_hoc suite26_tree 2095 19 0.009069 0.182826 0.885230 0.010270 0.027512 0.035179 0.026110 0.061905 0.684211 0.113537 0.227273 0.041401 0.684211 0.078078 0.166667 0.031026 0.684211 0.059361 0.131313 0.028626 0.789474 0.055249 0.125000 2 khoa_quoc_te_hoc suite26_tree_memory 2095 19 0.009069 0.286290 0.888386 0.007783 0.010624 0.017498 0.008428 0.061905 0.684211 0.113537 0.227273 0.041401 0.684211 0.078078 0.166667 0.031026 0.684211 0.059361 0.131313 0.028626 0.789474 0.055249 0.125000 2 khoa_tieng_anh committee 8328 122 0.014649 0.749047 0.977169 0.007211 0.012779 0.026267 0.011618 0.138055 0.942623 0.240838 0.435276 0.093675 0.959016 0.170678 0.336788 0.070228 0.959016 0.130872 0.271588 0.056676 0.967213 0.107078 0.229572 2 khoa_tieng_anh suite14 8328 122 0.014649 0.741424 0.977534 0.018661 0.051063 0.065676 0.051027 0.134454 0.918033 0.234555 0.423921 0.092074 0.942623 0.167761 0.331031 0.070228 0.959016 0.130872 0.271588 0.056676 0.967213 0.107078 0.229572 2 khoa_tieng_anh suite16 8328 122 0.014649 0.751928 0.980333 0.022554 0.053939 0.068589 0.053939 0.139256 0.950820 0.242932 0.439061 0.093675 0.959016 0.170678 0.336788 0.071429 0.975410 0.133110 0.276230 0.057157 0.975410 0.107985 0.231518 2 khoa_tieng_anh suite17 8328 122 0.014649 0.762055 0.977579 0.007457 0.015500 0.027612 0.012963 0.139256 0.950820 0.242932 0.439061 0.093675 0.959016 0.170678 0.336788 0.070828 0.967213 0.131991 0.273909 0.056676 0.967213 0.107078 0.229572 2 khoa_tieng_anh suite18 8328 122 0.014649 0.752168 0.977466 0.007442 0.014939 0.027294 0.012644 0.139256 0.950820 0.242932 0.439061 0.093675 0.959016 0.170678 0.336788 0.070828 0.967213 0.131991 0.273909 0.056676 0.967213 0.107078 0.229572 2 khoa_tieng_anh suite20 8328 122 0.014649 0.524562 0.941347 0.039041 0.079599 0.094249 0.079599 0.127251 0.868852 0.221990 0.401211 0.085669 0.877049 0.156090 0.308002 0.066026 0.901639 0.123043 0.255339 0.053314 0.909836 0.100726 0.215953 2 khoa_tieng_anh suite21 8328 122 0.014649 0.756798 0.976076 0.007117 0.012504 0.025747 0.011098 0.136855 0.934426 0.238743 0.431491 0.092874 0.950820 0.169220 0.333909 0.070228 0.959016 0.130872 0.271588 0.056676 0.967213 0.107078 0.229572 2 khoa_tieng_anh suite22 8328 122 0.014649 0.741836 0.974922 0.007174 0.013927 0.026139 0.011490 0.138055 0.942623 0.240838 0.435276 0.093675 0.959016 0.170678 0.336788 0.070228 0.959016 0.130872 0.271588 0.056196 0.959016 0.106171 0.227626 2 khoa_tieng_anh suite22_primary 8328 122 0.014649 0.661831 0.955490 0.009233 0.020296 0.031390 0.016741 0.127251 0.868852 0.221990 0.401211 0.087270 0.893443 0.159008 0.313759 0.068427 0.934426 0.127517 0.264624 0.055716 0.950820 0.105263 0.225681 2 khoa_tieng_anh suite22_relational 8328 122 0.014649 0.569195 0.943079 0.016643 0.028733 0.041023 0.026374 0.124850 0.852459 0.217801 0.393641 0.086469 0.885246 0.157549 0.310881 0.068427 0.934426 0.127517 0.264624 0.056196 0.959016 0.106171 0.227626 2 khoa_tieng_anh suite23 8328 122 0.014649 0.727079 0.978726 0.007763 0.012795 0.020054 0.005404 0.138055 0.942623 0.240838 0.435276 0.094476 0.967213 0.172137 0.339666 0.070828 0.967213 0.131991 0.273909 0.056676 0.967213 0.107078 0.229572 2 khoa_tieng_anh suite23_graph 8328 122 0.014649 0.608671 0.967922 0.010280 0.013484 0.019862 0.005213 0.136855 0.934426 0.238743 0.431491 0.091273 0.934426 0.166302 0.328152 0.070228 0.959016 0.130872 0.271588 0.057157 0.975410 0.107985 0.231518 2 khoa_tieng_anh suite24 8328 122 0.014649 0.743490 0.978501 0.007092 0.011270 0.025025 0.010375 0.139256 0.950820 0.242932 0.439061 0.094476 0.967213 0.172137 0.339666 0.070828 0.967213 0.131991 0.273909 0.056676 0.967213 0.107078 0.229572 2 khoa_tieng_anh suite24_posthoc 8328 122 0.014649 0.751918 0.979194 0.007022 0.013554 0.026169 0.011520 0.138055 0.942623 0.240838 0.435276 0.094476 0.967213 0.172137 0.339666 0.070828 0.967213 0.131991 0.273909 0.056676 0.967213 0.107078 0.229572 2 khoa_tieng_anh suite25 8328 122 0.014649 0.627411 0.956661 0.009338 0.013598 0.022500 0.007850 0.130852 0.893443 0.228272 0.412566 0.091273 0.934426 0.166302 0.328152 0.069028 0.942623 0.128635 0.266945 0.055716 0.950820 0.105263 0.225681 2 khoa_tieng_anh suite25_blend 8328 122 0.014649 0.760744 0.977266 0.006890 0.011680 0.023928 0.009279 0.136855 0.934426 0.238743 0.431491 0.092874 0.950820 0.169220 0.333909 0.070228 0.959016 0.130872 0.271588 0.057157 0.975410 0.107985 0.231518 2 khoa_tieng_anh suite26_committee_blend 8328 122 0.014649 0.749047 0.977169 0.007211 0.012779 0.026267 0.011618 0.138055 0.942623 0.240838 0.435276 0.093675 0.959016 0.170678 0.336788 0.070228 0.959016 0.130872 0.271588 0.056676 0.967213 0.107078 0.229572 2 khoa_tieng_anh suite26_joint_head 8328 122 0.014649 0.685622 0.961871 0.008439 0.019370 0.033034 0.018384 0.134454 0.918033 0.234555 0.423921 0.091273 0.934426 0.166302 0.328152 0.069628 0.950820 0.129754 0.269266 0.055716 0.950820 0.105263 0.225681 2 khoa_tieng_anh suite26_tair 8328 122 0.014649 0.642124 0.959726 0.008257 0.010522 0.021032 0.006383 0.133253 0.909836 0.232461 0.420136 0.090472 0.926230 0.164843 0.325273 0.069628 0.950820 0.129754 0.269266 0.056196 0.959016 0.106171 0.227626 2 khoa_tieng_anh suite26_tree 8328 122 0.014649 0.706409 0.965529 0.007724 0.015025 0.024959 0.010310 0.133253 0.909836 0.232461 0.420136 0.092074 0.942623 0.167761 0.331031 0.069628 0.950820 0.129754 0.269266 0.056196 0.959016 0.106171 0.227626 2 khoa_tieng_anh suite26_tree_memory 8328 122 0.014649 0.660967 0.960459 0.008128 0.010506 0.021081 0.006432 0.133253 0.909836 0.232461 0.420136 0.090472 0.926230 0.164843 0.325273 0.069628 0.950820 0.129754 0.269266 0.056196 0.959016 0.106171 0.227626 2 khoa_tieng_bo_dao_nha committee 716 30 0.041899 0.526647 0.943635 0.026265 0.019578 0.043389 0.001490 0.319444 0.766667 0.450980 0.598958 0.214953 0.766667 0.335766 0.506608 0.188811 0.900000 0.312139 0.513308 0.162011 0.966667 0.277512 0.484950 2 khoa_tieng_bo_dao_nha suite14 716 30 0.041899 0.520653 0.930029 0.052735 0.114265 0.155963 0.114063 0.305556 0.733333 0.431373 0.572917 0.214953 0.766667 0.335766 0.506608 0.181818 0.866667 0.300578 0.494297 0.150838 0.900000 0.258373 0.451505 2 khoa_tieng_bo_dao_nha suite16 716 30 0.041899 0.603194 0.961516 0.038244 0.069537 0.110707 0.068807 0.319444 0.766667 0.450980 0.598958 0.261682 0.933333 0.408759 0.616740 0.195804 0.933333 0.323699 0.532319 0.167598 1.000000 0.287081 0.501672 2 khoa_tieng_bo_dao_nha suite17 716 30 0.041899 0.546738 0.953693 0.026798 0.016812 0.043718 0.001818 0.319444 0.766667 0.450980 0.598958 0.252336 0.900000 0.394161 0.594714 0.195804 0.933333 0.323699 0.532319 0.162011 0.966667 0.277512 0.484950 2 khoa_tieng_bo_dao_nha suite18 716 30 0.041899 0.557300 0.954227 0.026498 0.017840 0.044467 0.002568 0.319444 0.766667 0.450980 0.598958 0.242991 0.866667 0.379562 0.572687 0.195804 0.933333 0.323699 0.532319 0.162011 0.966667 0.277512 0.484950 2 khoa_tieng_bo_dao_nha suite20 716 30 0.041899 0.211365 0.853741 0.172401 0.194542 0.235316 0.193416 0.222222 0.533333 0.313725 0.416667 0.177570 0.633333 0.277372 0.418502 0.146853 0.700000 0.242775 0.399240 0.128492 0.766667 0.220096 0.384615 2 khoa_tieng_bo_dao_nha suite21 716 30 0.041899 0.551242 0.938095 0.026173 0.022161 0.053571 0.011671 0.319444 0.766667 0.450980 0.598958 0.233645 0.833333 0.364964 0.550661 0.174825 0.833333 0.289017 0.475285 0.145251 0.866667 0.248804 0.434783 2 khoa_tieng_bo_dao_nha suite22 716 30 0.041899 0.494452 0.944461 0.029646 0.009077 0.032822 -0.009077 0.291667 0.700000 0.411765 0.546875 0.242991 0.866667 0.379562 0.572687 0.202797 0.966667 0.335260 0.551331 0.162011 0.966667 0.277512 0.484950 2 khoa_tieng_bo_dao_nha suite22_primary 716 30 0.041899 0.305053 0.904713 0.034193 0.010850 0.031050 -0.010850 0.250000 0.600000 0.352941 0.468750 0.214953 0.766667 0.335766 0.506608 0.174825 0.833333 0.289017 0.475285 0.150838 0.900000 0.258373 0.451505 2 khoa_tieng_bo_dao_nha suite22_relational 716 30 0.041899 0.366353 0.884014 0.032827 0.012840 0.031805 -0.010094 0.250000 0.600000 0.352941 0.468750 0.177570 0.633333 0.277372 0.418502 0.146853 0.700000 0.242775 0.399240 0.128492 0.766667 0.220096 0.384615 2 khoa_tieng_bo_dao_nha suite23 716 30 0.041899 0.526647 0.943635 0.026265 0.019578 0.043389 0.001490 0.319444 0.766667 0.450980 0.598958 0.214953 0.766667 0.335766 0.506608 0.188811 0.900000 0.312139 0.513308 0.162011 0.966667 0.277512 0.484950 2 khoa_tieng_bo_dao_nha suite23_graph 716 30 0.041899 0.367469 0.864091 0.035476 0.013522 0.046594 0.004695 0.194444 0.466667 0.274510 0.364583 0.168224 0.600000 0.262774 0.396476 0.146853 0.700000 0.242775 0.399240 0.134078 0.800000 0.229665 0.401338 2 khoa_tieng_bo_dao_nha suite24 716 30 0.041899 0.494691 0.944704 0.027669 0.022585 0.056247 0.014348 0.305556 0.733333 0.431373 0.572917 0.252336 0.900000 0.394161 0.594714 0.195804 0.933333 0.323699 0.532319 0.156425 0.933333 0.267943 0.468227 2 khoa_tieng_bo_dao_nha suite24_posthoc 716 30 0.041899 0.512364 0.954616 0.027288 0.019388 0.047349 0.005450 0.319444 0.766667 0.450980 0.598958 0.252336 0.900000 0.394161 0.594714 0.195804 0.933333 0.323699 0.532319 0.162011 0.966667 0.277512 0.484950 2 khoa_tieng_bo_dao_nha suite25 716 30 0.041899 0.470533 0.899611 0.028742 0.014114 0.034930 -0.006969 0.277778 0.666667 0.392157 0.520833 0.196262 0.700000 0.306569 0.462555 0.160839 0.766667 0.265896 0.437262 0.145251 0.866667 0.248804 0.434783 2 khoa_tieng_bo_dao_nha suite25_blend 716 30 0.041899 0.525934 0.937075 0.026821 0.014668 0.039872 -0.002028 0.319444 0.766667 0.450980 0.598958 0.214953 0.766667 0.335766 0.506608 0.174825 0.833333 0.289017 0.475285 0.156425 0.933333 0.267943 0.468227 2 khoa_tieng_bo_dao_nha suite26_committee_blend 716 30 0.041899 0.526647 0.943635 0.026265 0.019578 0.043389 0.001490 0.319444 0.766667 0.450980 0.598958 0.214953 0.766667 0.335766 0.506608 0.188811 0.900000 0.312139 0.513308 0.162011 0.966667 0.277512 0.484950 2 khoa_tieng_bo_dao_nha suite26_joint_head 716 30 0.041899 0.555834 0.952381 0.035720 0.061514 0.101042 0.059142 0.305556 0.733333 0.431373 0.572917 0.242991 0.866667 0.379562 0.572687 0.202797 0.966667 0.335260 0.551331 0.162011 0.966667 0.277512 0.484950 2 khoa_tieng_bo_dao_nha suite26_tair 716 30 0.041899 0.271955 0.922255 0.033960 0.020255 0.037431 -0.004468 0.305556 0.733333 0.431373 0.572917 0.214953 0.766667 0.335766 0.506608 0.181818 0.866667 0.300578 0.494297 0.150838 0.900000 0.258373 0.451505 2 khoa_tieng_bo_dao_nha suite26_tree 716 30 0.041899 0.256577 0.919728 0.038043 0.053298 0.082851 0.040951 0.305556 0.733333 0.431373 0.572917 0.214953 0.766667 0.335766 0.506608 0.181818 0.866667 0.300578 0.494297 0.150838 0.900000 0.258373 0.451505 2 khoa_tieng_bo_dao_nha suite26_tree_memory 716 30 0.041899 0.389747 0.925705 0.032293 0.014936 0.039182 -0.002717 0.305556 0.733333 0.431373 0.572917 0.214953 0.766667 0.335766 0.506608 0.181818 0.866667 0.300578 0.494297 0.150838 0.900000 0.258373 0.451505 2 khoa_tieng_duc committee 1893 53 0.027998 0.393037 0.833701 0.020484 0.012715 0.023670 -0.004328 0.148148 0.528302 0.231405 0.349127 0.109155 0.584906 0.183976 0.312500 0.089710 0.641509 0.157407 0.287648 0.082452 0.735849 0.148289 0.284672 2 khoa_tieng_duc suite14 1893 53 0.027998 0.396373 0.839489 0.031663 0.055186 0.083184 0.055186 0.158730 0.566038 0.247934 0.374065 0.112676 0.603774 0.189911 0.322581 0.097625 0.698113 0.171296 0.313029 0.082452 0.735849 0.148289 0.284672 2 khoa_tieng_duc suite16 1893 53 0.027998 0.393573 0.843355 0.027886 0.025939 0.053937 0.025939 0.164021 0.584906 0.256198 0.386534 0.130282 0.698113 0.219585 0.372984 0.100264 0.716981 0.175926 0.321489 0.084567 0.754717 0.152091 0.291971 2 khoa_tieng_duc suite17 1893 53 0.027998 0.405484 0.849000 0.020705 0.010197 0.023490 -0.004508 0.169312 0.603774 0.264463 0.399002 0.133803 0.716981 0.225519 0.383065 0.100264 0.716981 0.175926 0.321489 0.082452 0.735849 0.148289 0.284672 2 khoa_tieng_duc suite18 1893 53 0.027998 0.401777 0.850036 0.020747 0.009366 0.024058 -0.003939 0.169312 0.603774 0.264463 0.399002 0.133803 0.716981 0.225519 0.383065 0.100264 0.716981 0.175926 0.321489 0.082452 0.735849 0.148289 0.284672 2 khoa_tieng_duc suite20 1893 53 0.027998 0.410923 0.848523 0.100927 0.129844 0.157842 0.129844 0.201058 0.716981 0.314050 0.473815 0.140845 0.754717 0.237389 0.403226 0.108179 0.773585 0.189815 0.346870 0.088795 0.792453 0.159696 0.306569 2 khoa_tieng_duc suite21 1893 53 0.027998 0.417973 0.843037 0.020421 0.010614 0.026405 -0.001593 0.169312 0.603774 0.264463 0.399002 0.126761 0.679245 0.213650 0.362903 0.102902 0.735849 0.180556 0.329949 0.082452 0.735849 0.148289 0.284672 2 khoa_tieng_duc suite22 1893 53 0.027998 0.384675 0.850441 0.021094 0.009223 0.023755 -0.004243 0.158730 0.566038 0.247934 0.374065 0.109155 0.584906 0.183976 0.312500 0.084433 0.603774 0.148148 0.270728 0.088795 0.792453 0.159696 0.306569 2 khoa_tieng_duc suite22_primary 1893 53 0.027998 0.196050 0.829789 0.024885 0.006784 0.032285 0.004287 0.153439 0.547170 0.239669 0.361596 0.102113 0.547170 0.172107 0.292339 0.081794 0.584906 0.143519 0.262267 0.071882 0.641509 0.129278 0.248175 2 khoa_tieng_duc suite22_relational 1893 53 0.027998 0.287437 0.851538 0.023502 0.006221 0.033107 0.005110 0.164021 0.584906 0.256198 0.386534 0.116197 0.622642 0.195846 0.332661 0.097625 0.698113 0.171296 0.313029 0.082452 0.735849 0.148289 0.284672 2 khoa_tieng_duc suite23 1893 53 0.027998 0.407280 0.846370 0.020303 0.011288 0.022808 -0.005190 0.164021 0.584906 0.256198 0.386534 0.112676 0.603774 0.189911 0.322581 0.100264 0.716981 0.175926 0.321489 0.082452 0.735849 0.148289 0.284672 2 khoa_tieng_duc suite23_graph 1893 53 0.027998 0.322125 0.865833 0.023154 0.018210 0.032980 0.004982 0.185185 0.660377 0.289256 0.436409 0.133803 0.716981 0.225519 0.383065 0.102902 0.735849 0.180556 0.329949 0.084567 0.754717 0.152091 0.291971 2 khoa_tieng_duc suite24 1893 53 0.027998 0.401354 0.855671 0.020049 0.008886 0.026475 -0.001523 0.164021 0.584906 0.256198 0.386534 0.116197 0.622642 0.195846 0.332661 0.100264 0.716981 0.175926 0.321489 0.082452 0.735849 0.148289 0.284672 2 khoa_tieng_duc suite24_posthoc 1893 53 0.027998 0.408892 0.850369 0.020000 0.007643 0.024807 -0.003191 0.164021 0.584906 0.256198 0.386534 0.112676 0.603774 0.189911 0.322581 0.100264 0.716981 0.175926 0.321489 0.084567 0.754717 0.152091 0.291971 2 khoa_tieng_duc suite25 1893 53 0.027998 0.473203 0.837172 0.020322 0.009966 0.019029 -0.008969 0.158730 0.566038 0.247934 0.374065 0.109155 0.584906 0.183976 0.312500 0.089710 0.641509 0.157407 0.287648 0.084567 0.754717 0.152091 0.291971 2 khoa_tieng_duc suite25_blend 1893 53 0.027998 0.413610 0.841550 0.019954 0.012092 0.021292 -0.006706 0.164021 0.584906 0.256198 0.386534 0.112676 0.603774 0.189911 0.322581 0.084433 0.603774 0.148148 0.270728 0.082452 0.735849 0.148289 0.284672 2 khoa_tieng_duc suite26_committee_blend 1893 53 0.027998 0.393037 0.833701 0.020484 0.012715 0.023670 -0.004328 0.148148 0.528302 0.231405 0.349127 0.109155 0.584906 0.183976 0.312500 0.089710 0.641509 0.157407 0.287648 0.082452 0.735849 0.148289 0.284672 2 khoa_tieng_duc suite26_joint_head 1893 53 0.027998 0.406934 0.816397 0.022219 0.025579 0.052637 0.024639 0.158730 0.566038 0.247934 0.374065 0.123239 0.660377 0.207715 0.352823 0.097625 0.698113 0.171296 0.313029 0.078224 0.698113 0.140684 0.270073 2 khoa_tieng_duc suite26_tair 1893 53 0.027998 0.370694 0.802133 0.022807 0.011477 0.016521 -0.011477 0.158730 0.566038 0.247934 0.374065 0.116197 0.622642 0.195846 0.332661 0.097625 0.698113 0.171296 0.313029 0.080338 0.716981 0.144487 0.277372 2 khoa_tieng_duc suite26_tree 1893 53 0.027998 0.304623 0.802512 0.022091 0.015670 0.033038 0.005040 0.158730 0.566038 0.247934 0.374065 0.116197 0.622642 0.195846 0.332661 0.097625 0.698113 0.171296 0.313029 0.080338 0.716981 0.144487 0.277372 2 khoa_tieng_duc suite26_tree_memory 1893 53 0.027998 0.317191 0.801866 0.022889 0.010556 0.017800 -0.010198 0.158730 0.566038 0.247934 0.374065 0.116197 0.622642 0.195846 0.332661 0.097625 0.698113 0.171296 0.313029 0.080338 0.716981 0.144487 0.277372 2 khoa_tieng_han_quoc committee 3337 29 0.008690 0.379219 0.952899 0.007166 0.004409 0.009828 0.001137 0.074850 0.862069 0.137741 0.277778 0.051896 0.896552 0.098113 0.210697 0.038981 0.896552 0.074713 0.166028 0.032374 0.931034 0.062572 0.142105 2 khoa_tieng_han_quoc suite14 3337 29 0.008690 0.431556 0.954040 0.011508 0.024686 0.033228 0.024538 0.074850 0.862069 0.137741 0.277778 0.051896 0.896552 0.098113 0.210697 0.040480 0.931034 0.077586 0.172414 0.033573 0.965517 0.064890 0.147368 2 khoa_tieng_han_quoc suite16 3337 29 0.008690 0.406216 0.954197 0.011739 0.015601 0.024194 0.015503 0.074850 0.862069 0.137741 0.277778 0.049900 0.862069 0.094340 0.202593 0.041979 0.965517 0.080460 0.178799 0.033573 0.965517 0.064890 0.147368 2 khoa_tieng_han_quoc suite17 3337 29 0.008690 0.408215 0.956803 0.007153 0.003262 0.009704 0.001014 0.074850 0.862069 0.137741 0.277778 0.051896 0.896552 0.098113 0.210697 0.040480 0.931034 0.077586 0.172414 0.032374 0.931034 0.062572 0.142105 2 khoa_tieng_han_quoc suite18 3337 29 0.008690 0.425472 0.954708 0.007171 0.004979 0.009867 0.001177 0.074850 0.862069 0.137741 0.277778 0.049900 0.862069 0.094340 0.202593 0.040480 0.931034 0.077586 0.172414 0.032374 0.931034 0.062572 0.142105 2 khoa_tieng_han_quoc suite20 3337 29 0.008690 0.043091 0.856586 0.130061 0.155384 0.164075 0.155384 0.047904 0.551724 0.088154 0.177778 0.041916 0.724138 0.079245 0.170178 0.032984 0.758621 0.063218 0.140485 0.027578 0.793103 0.053302 0.121053 2 khoa_tieng_han_quoc suite21 3337 29 0.008690 0.404308 0.954520 0.006960 0.003347 0.008952 0.000261 0.074850 0.862069 0.137741 0.277778 0.051896 0.896552 0.098113 0.210697 0.040480 0.931034 0.077586 0.172414 0.032374 0.931034 0.062572 0.142105 2 khoa_tieng_han_quoc suite22 3337 29 0.008690 0.277417 0.946827 0.007372 0.003015 0.006042 -0.002648 0.074850 0.862069 0.137741 0.277778 0.049900 0.862069 0.094340 0.202593 0.038981 0.896552 0.074713 0.166028 0.032374 0.931034 0.062572 0.142105 2 khoa_tieng_han_quoc suite22_primary 3337 29 0.008690 0.086503 0.883115 0.008317 0.002964 0.007903 -0.000788 0.062874 0.724138 0.115702 0.233333 0.041916 0.724138 0.079245 0.170178 0.034483 0.793103 0.066092 0.146871 0.031175 0.896552 0.060255 0.136842 2 khoa_tieng_han_quoc suite22_relational 3337 29 0.008690 0.135326 0.875214 0.008070 0.003224 0.007263 -0.001427 0.056886 0.655172 0.104683 0.211111 0.047904 0.827586 0.090566 0.194489 0.037481 0.862069 0.071839 0.159642 0.029976 0.862069 0.057937 0.131579 2 khoa_tieng_han_quoc suite23 3337 29 0.008690 0.379219 0.952899 0.007166 0.004409 0.009828 0.001137 0.074850 0.862069 0.137741 0.277778 0.051896 0.896552 0.098113 0.210697 0.038981 0.896552 0.074713 0.166028 0.032374 0.931034 0.062572 0.142105 2 khoa_tieng_han_quoc suite23_graph 3337 29 0.008690 0.137382 0.865655 0.008046 0.004867 0.011135 0.002444 0.059880 0.689655 0.110193 0.222222 0.039920 0.689655 0.075472 0.162075 0.032984 0.758621 0.063218 0.140485 0.026379 0.758621 0.050985 0.115789 2 khoa_tieng_han_quoc suite24 3337 29 0.008690 0.417971 0.957616 0.007017 0.003689 0.011428 0.002738 0.077844 0.896552 0.143251 0.288889 0.053892 0.931034 0.101887 0.218801 0.040480 0.931034 0.077586 0.172414 0.033573 0.965517 0.064890 0.147368 2 khoa_tieng_han_quoc suite24_posthoc 3337 29 0.008690 0.436916 0.956313 0.006897 0.003319 0.009423 0.000733 0.074850 0.862069 0.137741 0.277778 0.051896 0.896552 0.098113 0.210697 0.040480 0.931034 0.077586 0.172414 0.032374 0.931034 0.062572 0.142105 2 khoa_tieng_han_quoc suite25 3337 29 0.008690 0.245599 0.937164 0.007716 0.002904 0.006035 -0.002655 0.068862 0.793103 0.126722 0.255556 0.049900 0.862069 0.094340 0.202593 0.037481 0.862069 0.071839 0.159642 0.029976 0.862069 0.057937 0.131579 2 khoa_tieng_han_quoc suite25_blend 3337 29 0.008690 0.399115 0.954708 0.006822 0.003348 0.007318 -0.001373 0.071856 0.827586 0.132231 0.266667 0.051896 0.896552 0.098113 0.210697 0.038981 0.896552 0.074713 0.166028 0.032374 0.931034 0.062572 0.142105 2 khoa_tieng_han_quoc suite26_committee_blend 3337 29 0.008690 0.379219 0.952899 0.007166 0.004409 0.009828 0.001137 0.074850 0.862069 0.137741 0.277778 0.051896 0.896552 0.098113 0.210697 0.038981 0.896552 0.074713 0.166028 0.032374 0.931034 0.062572 0.142105 2 khoa_tieng_han_quoc suite26_joint_head 3337 29 0.008690 0.228037 0.936601 0.007368 0.008518 0.013858 0.005167 0.071856 0.827586 0.132231 0.266667 0.051896 0.896552 0.098113 0.210697 0.038981 0.896552 0.074713 0.166028 0.031175 0.896552 0.060255 0.136842 2 khoa_tieng_han_quoc suite26_tair 3337 29 0.008690 0.291378 0.932588 0.007867 0.002565 0.006246 -0.002444 0.059880 0.689655 0.110193 0.222222 0.051896 0.896552 0.098113 0.210697 0.038981 0.896552 0.074713 0.166028 0.032374 0.931034 0.062572 0.142105 2 khoa_tieng_han_quoc suite26_tree 3337 29 0.008690 0.389860 0.935783 0.007122 0.006717 0.012493 0.003803 0.059880 0.689655 0.110193 0.222222 0.051896 0.896552 0.098113 0.210697 0.038981 0.896552 0.074713 0.166028 0.033573 0.965517 0.064890 0.147368 2 khoa_tieng_han_quoc suite26_tree_memory 3337 29 0.008690 0.291377 0.932530 0.007885 0.001819 0.006871 -0.001819 0.059880 0.689655 0.110193 0.222222 0.051896 0.896552 0.098113 0.210697 0.038981 0.896552 0.074713 0.166028 0.032374 0.931034 0.062572 0.142105 2 khoa_tieng_italia committee 2024 71 0.035079 0.683943 0.954970 0.018232 0.020605 0.047732 0.012653 0.297030 0.845070 0.439560 0.617284 0.210526 0.901408 0.341333 0.544218 0.160494 0.915493 0.273109 0.471698 0.128458 0.915493 0.225303 0.411392 2 khoa_tieng_italia suite14 2024 71 0.035079 0.679830 0.940092 0.043395 0.112155 0.147234 0.112155 0.292079 0.830986 0.432234 0.606996 0.210526 0.901408 0.341333 0.544218 0.158025 0.901408 0.268908 0.464441 0.130435 0.929577 0.228769 0.417722 2 khoa_tieng_italia suite16 2024 71 0.035079 0.679716 0.963328 0.036718 0.080925 0.116004 0.080925 0.297030 0.845070 0.439560 0.617284 0.210526 0.901408 0.341333 0.544218 0.160494 0.915493 0.273109 0.471698 0.128458 0.915493 0.225303 0.411392 2 khoa_tieng_italia suite17 2024 71 0.035079 0.700325 0.961302 0.019430 0.026355 0.046260 0.011181 0.311881 0.887324 0.461538 0.648148 0.210526 0.901408 0.341333 0.544218 0.160494 0.915493 0.273109 0.471698 0.132411 0.943662 0.232236 0.424051 2 khoa_tieng_italia suite18 2024 71 0.035079 0.691988 0.957739 0.019438 0.024861 0.045956 0.010877 0.311881 0.887324 0.461538 0.648148 0.210526 0.901408 0.341333 0.544218 0.158025 0.901408 0.268908 0.464441 0.130435 0.929577 0.228769 0.417722 2 khoa_tieng_italia suite20 2024 71 0.035079 0.335860 0.894730 0.087695 0.125940 0.161019 0.125940 0.242574 0.690141 0.358974 0.504115 0.174342 0.746479 0.282667 0.450680 0.140741 0.802817 0.239496 0.413643 0.118577 0.845070 0.207972 0.379747 2 khoa_tieng_italia suite21 2024 71 0.035079 0.668621 0.945551 0.019495 0.023986 0.056844 0.021765 0.292079 0.830986 0.432234 0.606996 0.200658 0.859155 0.325333 0.518707 0.160494 0.915493 0.273109 0.471698 0.128458 0.915493 0.225303 0.411392 2 khoa_tieng_italia suite22 2024 71 0.035079 0.629859 0.946100 0.021009 0.021316 0.045301 0.010222 0.311881 0.887324 0.461538 0.648148 0.210526 0.901408 0.341333 0.544218 0.158025 0.901408 0.268908 0.464441 0.128458 0.915493 0.225303 0.411392 2 khoa_tieng_italia suite22_primary 2024 71 0.035079 0.319704 0.894557 0.029352 0.020351 0.054906 0.019827 0.212871 0.605634 0.315018 0.442387 0.177632 0.760563 0.288000 0.459184 0.153086 0.873239 0.260504 0.449927 0.130435 0.929577 0.228769 0.417722 2 khoa_tieng_italia suite22_relational 2024 71 0.035079 0.411495 0.907589 0.026789 0.027304 0.057272 0.022193 0.277228 0.788732 0.410256 0.576132 0.197368 0.845070 0.320000 0.510204 0.150617 0.859155 0.256303 0.442671 0.122530 0.873239 0.214905 0.392405 2 khoa_tieng_italia suite23 2024 71 0.035079 0.683943 0.954970 0.018232 0.020605 0.047732 0.012653 0.297030 0.845070 0.439560 0.617284 0.210526 0.901408 0.341333 0.544218 0.160494 0.915493 0.273109 0.471698 0.128458 0.915493 0.225303 0.411392 2 khoa_tieng_italia suite23_graph 2024 71 0.035079 0.436468 0.896627 0.028129 0.033036 0.058575 0.023496 0.272277 0.774648 0.402930 0.565844 0.190789 0.816901 0.309333 0.493197 0.148148 0.845070 0.252101 0.435414 0.120553 0.859155 0.211438 0.386076 2 khoa_tieng_italia suite24 2024 71 0.035079 0.698582 0.950282 0.018006 0.018438 0.049098 0.014019 0.316832 0.901408 0.468864 0.658436 0.213816 0.915493 0.346667 0.552721 0.160494 0.915493 0.273109 0.471698 0.130435 0.929577 0.228769 0.417722 2 khoa_tieng_italia suite24_posthoc 2024 71 0.035079 0.708432 0.953715 0.018325 0.024938 0.047909 0.012830 0.311881 0.887324 0.461538 0.648148 0.210526 0.901408 0.341333 0.544218 0.160494 0.915493 0.273109 0.471698 0.130435 0.929577 0.228769 0.417722 2 khoa_tieng_italia suite25 2024 71 0.035079 0.538161 0.911981 0.022625 0.018762 0.040673 0.005594 0.272277 0.774648 0.402930 0.565844 0.180921 0.774648 0.293333 0.467687 0.145679 0.830986 0.247899 0.428157 0.120553 0.859155 0.211438 0.386076 2 khoa_tieng_italia suite25_blend 2024 71 0.035079 0.669254 0.948032 0.018355 0.020499 0.043909 0.008830 0.292079 0.830986 0.432234 0.606996 0.210526 0.901408 0.341333 0.544218 0.158025 0.901408 0.268908 0.464441 0.130435 0.929577 0.228769 0.417722 2 khoa_tieng_italia suite26_committee_blend 2024 71 0.035079 0.683943 0.954970 0.018232 0.020605 0.047732 0.012653 0.297030 0.845070 0.439560 0.617284 0.210526 0.901408 0.341333 0.544218 0.160494 0.915493 0.273109 0.471698 0.128458 0.915493 0.225303 0.411392 2 khoa_tieng_italia suite26_joint_head 2024 71 0.035079 0.716768 0.941700 0.028211 0.066105 0.099959 0.064880 0.306931 0.873239 0.454212 0.637860 0.210526 0.901408 0.341333 0.544218 0.158025 0.901408 0.268908 0.464441 0.132411 0.943662 0.232236 0.424051 2 khoa_tieng_italia suite26_tair 2024 71 0.035079 0.391160 0.928719 0.026403 0.017320 0.031674 -0.003405 0.311881 0.887324 0.461538 0.648148 0.210526 0.901408 0.341333 0.544218 0.160494 0.915493 0.273109 0.471698 0.130435 0.929577 0.228769 0.417722 2 khoa_tieng_italia suite26_tree 2024 71 0.035079 0.350135 0.927392 0.027259 0.045372 0.065789 0.030710 0.311881 0.887324 0.461538 0.648148 0.210526 0.901408 0.341333 0.544218 0.160494 0.915493 0.273109 0.471698 0.132411 0.943662 0.232236 0.424051 2 khoa_tieng_italia suite26_tree_memory 2024 71 0.035079 0.477986 0.930104 0.025996 0.019523 0.031913 -0.003166 0.311881 0.887324 0.461538 0.648148 0.210526 0.901408 0.341333 0.544218 0.160494 0.915493 0.273109 0.471698 0.130435 0.929577 0.228769 0.417722 2 khoa_tieng_nga committee 1567 83 0.052967 0.759518 0.978558 0.022839 0.032561 0.063397 0.010430 0.509554 0.963855 0.666667 0.817996 0.344681 0.975904 0.509434 0.714286 0.261981 0.987952 0.414141 0.635659 0.209184 0.987952 0.345263 0.566298 2 khoa_tieng_nga suite14 1567 83 0.052967 0.770371 0.977738 0.044012 0.110119 0.160255 0.107288 0.503185 0.951807 0.658333 0.807771 0.344681 0.975904 0.509434 0.714286 0.258786 0.975904 0.409091 0.627907 0.206633 0.975904 0.341053 0.559392 2 khoa_tieng_nga suite16 1567 83 0.052967 0.749233 0.981408 0.042080 0.103860 0.156827 0.103860 0.515924 0.975904 0.675000 0.828221 0.344681 0.975904 0.509434 0.714286 0.258786 0.975904 0.409091 0.627907 0.209184 0.987952 0.345263 0.566298 2 khoa_tieng_nga suite17 1567 83 0.052967 0.761006 0.981871 0.025570 0.042841 0.062003 0.009035 0.515924 0.975904 0.675000 0.828221 0.348936 0.987952 0.515723 0.723104 0.261981 0.987952 0.414141 0.635659 0.209184 0.987952 0.345263 0.566298 2 khoa_tieng_nga suite18 1567 83 0.052967 0.763746 0.981595 0.025339 0.044826 0.062033 0.009065 0.515924 0.975904 0.675000 0.828221 0.344681 0.975904 0.509434 0.714286 0.261981 0.987952 0.414141 0.635659 0.209184 0.987952 0.345263 0.566298 2 khoa_tieng_nga suite20 1567 83 0.052967 0.370213 0.905612 0.118658 0.151069 0.204036 0.151069 0.350318 0.662651 0.458333 0.562372 0.280851 0.795181 0.415094 0.582011 0.220447 0.831325 0.348485 0.534884 0.186224 0.879518 0.307368 0.504144 2 khoa_tieng_nga suite21 1567 83 0.052967 0.795589 0.980020 0.022406 0.042365 0.083476 0.030509 0.496815 0.939759 0.650000 0.797546 0.348936 0.987952 0.515723 0.723104 0.261981 0.987952 0.414141 0.635659 0.209184 0.987952 0.345263 0.566298 2 khoa_tieng_nga suite22 1567 83 0.052967 0.787882 0.982366 0.023866 0.043327 0.060440 0.007473 0.509554 0.963855 0.666667 0.817996 0.344681 0.975904 0.509434 0.714286 0.261981 0.987952 0.414141 0.635659 0.209184 0.987952 0.345263 0.566298 2 khoa_tieng_nga suite22_primary 1567 83 0.052967 0.613615 0.969392 0.030282 0.043397 0.065346 0.012379 0.458599 0.867470 0.600000 0.736196 0.323404 0.915663 0.477987 0.670194 0.261981 0.987952 0.414141 0.635659 0.209184 0.987952 0.345263 0.566298 2 khoa_tieng_nga suite22_relational 1567 83 0.052967 0.530908 0.960194 0.033149 0.044369 0.077384 0.024417 0.458599 0.867470 0.600000 0.736196 0.331915 0.939759 0.490566 0.687831 0.252396 0.951807 0.398990 0.612403 0.201531 0.951807 0.332632 0.545580 2 khoa_tieng_nga suite23 1567 83 0.052967 0.772787 0.979955 0.024918 0.042275 0.061074 0.008107 0.515924 0.975904 0.675000 0.828221 0.344681 0.975904 0.509434 0.714286 0.261981 0.987952 0.414141 0.635659 0.209184 0.987952 0.345263 0.566298 2 khoa_tieng_nga suite23_graph 1567 83 0.052967 0.514171 0.938095 0.040423 0.047233 0.072953 0.019985 0.356688 0.674699 0.466667 0.572597 0.293617 0.831325 0.433962 0.608466 0.246006 0.927711 0.388889 0.596899 0.198980 0.939759 0.328421 0.538674 2 khoa_tieng_nga suite24 1567 83 0.052967 0.740932 0.972380 0.024120 0.035216 0.076585 0.023618 0.471338 0.891566 0.616667 0.756646 0.340426 0.963855 0.503145 0.705467 0.261981 0.987952 0.414141 0.635659 0.209184 0.987952 0.345263 0.566298 2 khoa_tieng_nga suite24_posthoc 1567 83 0.052967 0.763308 0.978713 0.024437 0.040040 0.066518 0.013550 0.515924 0.975904 0.675000 0.828221 0.348936 0.987952 0.515723 0.723104 0.261981 0.987952 0.414141 0.635659 0.209184 0.987952 0.345263 0.566298 2 khoa_tieng_nga suite25 1567 83 0.052967 0.624487 0.960811 0.029219 0.021634 0.042910 -0.010057 0.471338 0.891566 0.616667 0.756646 0.344681 0.975904 0.509434 0.714286 0.258786 0.975904 0.409091 0.627907 0.206633 0.975904 0.341053 0.559392 2 khoa_tieng_nga suite25_blend 1567 83 0.052967 0.758718 0.978437 0.023418 0.031842 0.055557 0.002590 0.509554 0.963855 0.666667 0.817996 0.348936 0.987952 0.515723 0.723104 0.261981 0.987952 0.414141 0.635659 0.209184 0.987952 0.345263 0.566298 2 khoa_tieng_nga suite26_committee_blend 1567 83 0.052967 0.759518 0.978558 0.022839 0.032561 0.063397 0.010430 0.509554 0.963855 0.666667 0.817996 0.344681 0.975904 0.509434 0.714286 0.261981 0.987952 0.414141 0.635659 0.209184 0.987952 0.345263 0.566298 2 khoa_tieng_nga suite26_joint_head 1567 83 0.052967 0.745493 0.976975 0.027443 0.063122 0.115237 0.062269 0.522293 0.987952 0.683333 0.838446 0.348936 0.987952 0.515723 0.723104 0.261981 0.987952 0.414141 0.635659 0.209184 0.987952 0.345263 0.566298 2 khoa_tieng_nga suite26_tair 1567 83 0.052967 0.647196 0.974661 0.034184 0.042745 0.037988 -0.014979 0.522293 0.987952 0.683333 0.838446 0.348936 0.987952 0.515723 0.723104 0.261981 0.987952 0.414141 0.635659 0.209184 0.987952 0.345263 0.566298 2 khoa_tieng_nga suite26_tree 1567 83 0.052967 0.640859 0.973744 0.027526 0.051778 0.075745 0.022777 0.522293 0.987952 0.683333 0.838446 0.348936 0.987952 0.515723 0.723104 0.261981 0.987952 0.414141 0.635659 0.209184 0.987952 0.345263 0.566298 2 khoa_tieng_nga suite26_tree_memory 1567 83 0.052967 0.684811 0.975510 0.032801 0.041845 0.039547 -0.013420 0.522293 0.987952 0.683333 0.838446 0.348936 0.987952 0.515723 0.723104 0.261981 0.987952 0.414141 0.635659 0.209184 0.987952 0.345263 0.566298 2 khoa_tieng_nhat committee 2448 11 0.004493 0.542198 0.963778 0.002923 0.004700 0.007684 0.003190 0.032653 0.727273 0.062500 0.138408 0.029973 1.000000 0.058201 0.133820 0.022449 1.000000 0.043912 0.102996 0.017974 1.000000 0.035313 0.083841 2 khoa_tieng_nhat suite14 2448 11 0.004493 0.563690 0.982057 0.004714 0.017928 0.022346 0.017852 0.044898 1.000000 0.085937 0.190311 0.029973 1.000000 0.058201 0.133820 0.022449 1.000000 0.043912 0.102996 0.017974 1.000000 0.035313 0.083841 2 khoa_tieng_nhat suite16 2448 11 0.004493 0.539391 0.980863 0.005120 0.011041 0.015534 0.011041 0.044898 1.000000 0.085937 0.190311 0.029973 1.000000 0.058201 0.133820 0.022449 1.000000 0.043912 0.102996 0.017974 1.000000 0.035313 0.083841 2 khoa_tieng_nhat suite17 2448 11 0.004493 0.549583 0.978289 0.002972 0.004770 0.007543 0.003050 0.044898 1.000000 0.085937 0.190311 0.029973 1.000000 0.058201 0.133820 0.022449 1.000000 0.043912 0.102996 0.017974 1.000000 0.035313 0.083841 2 khoa_tieng_nhat suite18 2448 11 0.004493 0.548385 0.976760 0.003022 0.004880 0.007729 0.003235 0.044898 1.000000 0.085937 0.190311 0.029973 1.000000 0.058201 0.133820 0.022449 1.000000 0.043912 0.102996 0.017974 1.000000 0.035313 0.083841 2 khoa_tieng_nhat suite20 2448 11 0.004493 0.079983 0.933338 0.061499 0.081941 0.086435 0.081941 0.040816 0.909091 0.078125 0.173010 0.027248 0.909091 0.052910 0.121655 0.020408 0.909091 0.039920 0.093633 0.016340 0.909091 0.032103 0.076220 2 khoa_tieng_nhat suite21 2448 11 0.004493 0.581998 0.975715 0.003006 0.003278 0.007723 0.003230 0.040816 0.909091 0.078125 0.173010 0.029973 1.000000 0.058201 0.133820 0.022449 1.000000 0.043912 0.102996 0.017974 1.000000 0.035313 0.083841 2 khoa_tieng_nhat suite22 2448 11 0.004493 0.529305 0.982206 0.003064 0.002703 0.005909 0.001415 0.044898 1.000000 0.085937 0.190311 0.029973 1.000000 0.058201 0.133820 0.022449 1.000000 0.043912 0.102996 0.017974 1.000000 0.035313 0.083841 2 khoa_tieng_nhat suite22_primary 2448 11 0.004493 0.236341 0.975902 0.003890 0.004176 0.007682 0.003189 0.044898 1.000000 0.085937 0.190311 0.029973 1.000000 0.058201 0.133820 0.022449 1.000000 0.043912 0.102996 0.017974 1.000000 0.035313 0.083841 ============================================================================================================================================================================================== SUITE26 TARGET FOLD 3 ============================================================================================================================================================================================== [DATA] history=329,579 fail=6,495 (1.97%) train=219,176 validation=110,403 target=47,420 fail=1,103 (2.33%) [TREE] fitting selection tree on older training blocks only... [TREE] selection summary={'n_trees': 96, 'leaf_vocab_size': 73729, 'mean_leaves_per_tree': 768.0, 'min_leaves_per_tree': 768, 'max_leaves_per_tree': 768, 'training_oob_ap': 0.5661817646229108} [TREE-HISTORY-SEL] 50,000/329,579 [TREE-HISTORY-SEL] 100,000/329,579 [TREE-HISTORY-SEL] 150,000/329,579 [TREE-HISTORY-SEL] 200,000/329,579 [TREE-HISTORY-SEL] 250,000/329,579 [TREE-HISTORY-SEL] 300,000/329,579 [TREE-HISTORY-SEL] 329,579/329,579 [TREE] calibration a=0.8613 b=-1.8628 validation macroAP=0.2460 training_OOB_AP=0.5661817646229108 [HISTORY STORE] selection phase (memory candidates restricted to training partition)... [HISTORY STORE] 50,000/329,579 [HISTORY STORE] 100,000/329,579 [HISTORY STORE] 150,000/329,579 [HISTORY STORE] 200,000/329,579 [HISTORY STORE] 250,000/329,579 [HISTORY STORE] 300,000/329,579 FOLD 3 SELECTION STUDENT-HISTORY SUPPORT -------------------------------------------------------------------------------- faculty rows prevalence history_mean history_zero_rate history_failure_mean same_course_history_mean course_seen_mean new_course_rate history_grade_present_rate khoa_cong_nghe_thong_tin 28910 0.031719 7.969664 0.313629 0.105085 0.000035 727.280042 0.063819 1.0 khoa_quan_tri_kinh_doanh_va_du_lich 45639 0.029229 9.023554 0.272508 0.137667 0.000022 1116.792875 0.005281 1.0 khoa_quoc_te_hoc 14897 0.009935 7.516480 0.320669 0.022555 0.000000 712.587434 0.044707 1.0 khoa_tieng_anh 64490 0.016917 10.752861 0.264599 0.029788 0.000000 887.853683 0.035370 1.0 khoa_tieng_bo_dao_nha 5601 0.032673 10.590966 0.238172 0.111766 0.000000 767.143546 0.017140 1.0 khoa_tieng_duc 14676 0.018466 11.235487 0.272418 0.049332 0.000000 854.402494 0.000818 1.0 khoa_tieng_han_quoc 23343 0.005312 11.868569 0.249025 0.024376 0.000000 818.447029 0.027074 1.0 khoa_tieng_italia 14840 0.034232 10.576550 0.231334 0.115364 0.000000 768.999191 0.039420 1.0 khoa_tieng_nga 9763 0.046605 11.091058 0.290382 0.193998 0.000000 819.831814 0.001229 1.0 khoa_tieng_nhat 24331 0.009330 10.688504 0.284657 0.028647 0.000000 835.126094 0.011878 1.0 khoa_tieng_phap 20075 0.012951 10.129564 0.263960 0.038257 0.000000 773.266301 0.007970 1.0 khoa_tieng_tay_ban_nha 10668 0.025778 10.576865 0.251312 0.077897 0.000000 743.983877 0.016967 1.0 khoa_tieng_trung_quoc 45758 0.006469 10.330106 0.235784 0.028257 0.000000 964.655361 0.046986 1.0 khoa_viet_nam_hoc 6588 0.061627 8.229508 0.286126 0.311475 0.000000 153.209624 0.000000 1.0 ------------------------------------------------------------------------------------------------------------------------------------------------------ [VARIANT suite26_tree_memory] [SELECT MEMORY] epoch=01/12 loss=0.10793 BCE=0.07954 rank=0.12952 joint=0.05161 ability=0.00000 macroAP=0.2191 F2@20=0.2869 Brier=0.0266 best=01 [SELECT MEMORY] epoch=02/12 loss=0.10350 BCE=0.07910 rank=0.11002 joint=0.04412 ability=0.00000 macroAP=0.2279 F2@20=0.2790 Brier=0.0266 best=02 [SELECT MEMORY] epoch=03/12 loss=0.09273 BCE=0.07491 rank=0.07146 joint=0.03416 ability=0.00000 macroAP=0.2212 F2@20=0.2767 Brier=0.0268 best=02 [SELECT MEMORY] epoch=04/12 loss=0.08941 BCE=0.07363 rank=0.06602 joint=0.02811 ability=0.00000 macroAP=0.2286 F2@20=0.2729 Brier=0.0269 best=04 [SELECT MEMORY] epoch=05/12 loss=0.08423 BCE=0.07146 rank=0.04959 joint=0.02325 ability=0.00000 macroAP=0.2182 F2@20=0.2723 Brier=0.0271 best=04 [SELECT MEMORY] epoch=06/12 loss=0.08420 BCE=0.07163 rank=0.05026 joint=0.02199 ability=0.00000 macroAP=0.2285 F2@20=0.2726 Brier=0.0281 best=04 [SELECT MEMORY] epoch=07/12 loss=0.08272 BCE=0.07071 rank=0.04764 joint=0.02074 ability=0.00000 macroAP=0.2347 F2@20=0.2729 Brier=0.0272 best=07 [SELECT MEMORY] epoch=08/12 loss=0.08213 BCE=0.07090 rank=0.04315 joint=0.01976 ability=0.00000 macroAP=0.2307 F2@20=0.2723 Brier=0.0275 best=07 [SELECT MEMORY] epoch=09/12 loss=0.07932 BCE=0.06889 rank=0.03999 joint=0.01763 ability=0.00000 macroAP=0.2272 F2@20=0.2723 Brier=0.0271 best=07 [SELECT MEMORY] epoch=10/12 loss=0.08139 BCE=0.07025 rank=0.04490 joint=0.01825 ability=0.00000 macroAP=0.2264 F2@20=0.2723 Brier=0.0271 best=07 ------------------------------------------------------------------------------------------------------------------------------------------------------ [VARIANT suite26_tair] [SELECT TAIR] epoch=01/12 loss=0.11094 BCE=0.07887 rank=0.12322 joint=0.05129 ability=0.08270 macroAP=0.2231 F2@20=0.2744 Brier=0.0266 best=01 [SELECT TAIR] epoch=02/12 loss=0.10677 BCE=0.07865 rank=0.11547 joint=0.03987 ability=0.06784 macroAP=0.2291 F2@20=0.2754 Brier=0.0267 best=02 [SELECT TAIR] epoch=03/12 loss=0.09571 BCE=0.07485 rank=0.07223 joint=0.03075 ability=0.06356 macroAP=0.2207 F2@20=0.2738 Brier=0.0268 best=02 [SELECT TAIR] epoch=04/12 loss=0.08805 BCE=0.07221 rank=0.04937 joint=0.02316 ability=0.05699 macroAP=0.2279 F2@20=0.2726 Brier=0.0271 best=02 [SELECT TAIR] epoch=05/12 loss=0.08700 BCE=0.07140 rank=0.05204 joint=0.02068 ability=0.05565 macroAP=0.2268 F2@20=0.2727 Brier=0.0269 best=02 [COMMITTEE BLEND ABLATION] selected alpha=0.10 policyAP=0.4857 policyF2=0.3349 [TREE] fitting production tree on all permissible history... [TREE] production summary={'n_trees': 96, 'leaf_vocab_size': 73729, 'mean_leaves_per_tree': 768.0, 'min_leaves_per_tree': 768, 'max_leaves_per_tree': 768, 'training_oob_ap': 0.46163346080630047} [TREE-HISTORY-PROD] 50,000/329,579 [TREE-HISTORY-PROD] 100,000/329,579 [TREE-HISTORY-PROD] 150,000/329,579 [TREE-HISTORY-PROD] 200,000/329,579 [TREE-HISTORY-PROD] 250,000/329,579 [TREE-HISTORY-PROD] 300,000/329,579 [TREE-HISTORY-PROD] 329,579/329,579 [TREE-TARGET-PROD] 47,420/47,420 [HISTORY STORE] production history... [HISTORY STORE] 50,000/329,579 [HISTORY STORE] 100,000/329,579 [HISTORY STORE] 150,000/329,579 [HISTORY STORE] 200,000/329,579 [HISTORY STORE] 250,000/329,579 [HISTORY STORE] 300,000/329,579 [HISTORY STORE] production target... FOLD 3 TARGET STUDENT-HISTORY SUPPORT -------------------------------------------------------------------------------- faculty rows prevalence history_mean history_zero_rate history_failure_mean same_course_history_mean course_seen_mean new_course_rate history_grade_present_rate fold khoa_cong_nghe_thong_tin 6277 0.034730 12.181137 0.310977 0.187510 0.0 866.962721 0.041102 1.0 3 khoa_quan_tri_kinh_doanh_va_du_lich 6491 0.032198 9.991835 0.333693 0.170544 0.0 1222.025882 0.090895 1.0 3 khoa_quoc_te_hoc 2665 0.009756 9.956098 0.353471 0.033021 0.0 733.542589 0.130206 1.0 3 khoa_tieng_anh 7279 0.013876 14.459541 0.181481 0.045061 0.0 1182.973898 0.105509 1.0 3 khoa_tieng_bo_dao_nha 1032 0.048450 11.661822 0.256783 0.374031 0.0 949.683140 0.091085 1.0 3 khoa_tieng_duc 1909 0.024620 13.936092 0.232059 0.165008 0.0 988.390781 0.096386 1.0 3 khoa_tieng_han_quoc 3235 0.012983 13.909737 0.278516 0.067079 0.0 1115.516229 0.101700 1.0 3 khoa_tieng_italia 2145 0.031702 15.015851 0.185082 0.154312 0.0 989.841492 0.063403 1.0 3 khoa_tieng_nga 1996 0.046092 12.222445 0.233467 0.323647 0.0 1148.090180 0.105210 1.0 3 khoa_tieng_nhat 2588 0.006569 10.893740 0.389876 0.041345 0.0 1405.209042 0.065688 1.0 3 khoa_tieng_phap 2693 0.015967 13.847011 0.266246 0.038247 0.0 1078.132937 0.086892 1.0 3 khoa_tieng_tay_ban_nha 1417 0.038109 13.901905 0.254764 0.305575 0.0 1061.092449 0.122089 1.0 3 khoa_tieng_trung_quoc 6920 0.014884 15.050578 0.206069 0.036272 0.0 969.786416 0.147688 1.0 3 khoa_viet_nam_hoc 773 0.042691 7.610608 0.504528 0.135834 0.0 206.721863 0.087969 1.0 3 [REFIT MEMORY] epoch=01/7 loss=0.13178 BCE=0.10149 rank=0.13178 joint=0.05721 ability=0.00000 [REFIT MEMORY] epoch=07/7 loss=0.11030 BCE=0.09404 rank=0.06300 joint=0.02832 ability=0.00000 [VARIANT suite26_tree_memory] selected_epochs=7 target macroAP=0.3019 [REFIT TAIR] epoch=01/2 loss=0.13606 BCE=0.10112 rank=0.13332 joint=0.05827 ability=0.08490 [REFIT TAIR] epoch=02/2 loss=0.12985 BCE=0.09962 rank=0.11998 joint=0.04597 ability=0.07145 [VARIANT suite26_tair] selected_epochs=2 target macroAP=0.3065 FOLD 3 TREE CURRENT-STATE FEATURE IMPORTANCE -------------------------------------------------------------------------------- rank feature importance fold 1 hist_course_pass_rate 0.063378 3 2 prev_semester_gpa10 0.063181 3 3 course_status_FIT ||| ứng_dụng_công_nghệ_thông_tin ||| Computer Skills 0.062244 3 4 recent3_semester_gpa10_mean 0.044196 3 5 prev_outstanding_failed_credits 0.030576 3 6 prev_failed_credits 0.028213 3 7 hist_course_grade10_mean 0.025556 3 8 hist_component_K2_mean 0.022639 3 9 prev_cumulative_gpa10 0.020616 3 10 recent3_course_grade10_mean 0.020408 3 11 hist_semester_gpa10_mean 0.020194 3 12 recent3_course_grade10_std 0.019555 3 13 hist_component_grade_mean 0.016613 3 14 recent3_course_grade10_min 0.015567 3 15 recent3_warning_count 0.014883 3 16 hist_passed_credits_sum 0.014294 3 17 recent3_course_grade10_median 0.013763 3 18 hist_course_grade10_std 0.013304 3 19 hist_component_low_rate 0.011869 3 20 target_semester_registered_credits 0.011821 3 21 recent3_component_grade_mean 0.011044 3 22 recent3_semester_count 0.010710 3 23 hist_course_grade10_median 0.010541 3 24 hist_component_special_rate 0.010107 3 25 target_semester_difficulty_weighted_workload 0.009823 3 26 hist_warning_in_last_semester 0.008939 3 27 hist_component_T1_special_count 0.008878 3 28 hist_component_grade_min 0.008018 3 29 recent3_component_grade_std 0.007987 3 30 student_prior_course_count_log 0.007871 3 31 hist_component_grade_std 0.007551 3 32 prev_ssvhk_semester_ordinal 0.007440 3 33 hist_cumulative_gpa10_mean 0.007345 3 34 target_semester_average_course_difficulty 0.007243 3 35 recent3_course_grade10_count 0.007182 3 36 recent3_course_grade10_max 0.007085 3 37 hist_registered_credits_mean 0.006895 3 38 hist_component_T1_count 0.006893 3 39 reg_last_days_from_open 0.006752 3 40 hist_course_grade10_min 0.006597 3 SUITE26 TARGET FOLD 3 — NEW + AVAILABLE REFERENCE RESULTS -------------------------------------------------------------------------------- fold faculty model rows failures prevalence ap auc brier ece10 mean_score calibration_gap precision_at_10 recall_at_10 f1_at_10 fbeta_at_10 precision_at_15 recall_at_15 f1_at_15 fbeta_at_15 precision_at_20 recall_at_20 f1_at_20 fbeta_at_20 precision_at_25 recall_at_25 f1_at_25 fbeta_at_25 3 khoa_cong_nghe_thong_tin committee 6277 218 0.034730 0.273839 0.850644 0.030542 0.032493 0.067100 0.032370 0.179936 0.518349 0.267139 0.376667 0.144374 0.623853 0.234483 0.374862 0.128287 0.738532 0.218601 0.378467 0.112811 0.811927 0.198097 0.362556 3 khoa_cong_nghe_thong_tin council 6277 218 0.034730 0.349713 0.869215 0.037664 0.070288 0.104926 0.070196 0.199045 0.573394 0.295508 0.416667 0.145435 0.628440 0.236207 0.377619 0.124303 0.715596 0.211813 0.366714 0.108349 0.779817 0.190263 0.348218 3 khoa_cong_nghe_thong_tin suite14 6277 218 0.034730 0.288386 0.825265 0.041959 0.060453 0.095183 0.060453 0.199045 0.573394 0.295508 0.416667 0.143312 0.619266 0.232759 0.372106 0.117131 0.674312 0.199593 0.345557 0.100701 0.724771 0.176833 0.323638 3 khoa_cong_nghe_thong_tin suite16 6277 218 0.034730 0.253664 0.846362 0.113280 0.216679 0.251409 0.216679 0.170382 0.490826 0.252955 0.356667 0.143312 0.619266 0.232759 0.372106 0.119522 0.688073 0.203666 0.352609 0.101976 0.733945 0.179071 0.327735 3 khoa_cong_nghe_thong_tin suite17 6277 218 0.034730 0.272571 0.860449 0.030952 0.034562 0.068180 0.033450 0.179936 0.518349 0.267139 0.376667 0.148620 0.642202 0.241379 0.385888 0.126693 0.729358 0.215886 0.373766 0.111536 0.802752 0.195859 0.358460 3 khoa_cong_nghe_thong_tin suite18 6277 218 0.034730 0.275123 0.862874 0.030766 0.034562 0.067810 0.033080 0.178344 0.513761 0.264775 0.373333 0.152866 0.660550 0.248276 0.396913 0.132271 0.761468 0.225390 0.390221 0.113448 0.816514 0.199217 0.364605 3 khoa_cong_nghe_thong_tin suite20 6277 218 0.034730 0.226538 0.847466 0.072905 0.093965 0.128695 0.093965 0.191083 0.550459 0.283688 0.400000 0.140127 0.605505 0.227586 0.363837 0.123506 0.711009 0.210455 0.364363 0.107712 0.775229 0.189144 0.346170 3 khoa_cong_nghe_thong_tin suite21 6277 218 0.034730 0.282764 0.852740 0.030451 0.032149 0.066707 0.031977 0.184713 0.532110 0.274232 0.386667 0.144374 0.623853 0.234483 0.374862 0.125896 0.724771 0.214528 0.371415 0.111536 0.802752 0.195859 0.358460 3 khoa_cong_nghe_thong_tin suite22 6277 218 0.034730 0.282771 0.862385 0.029457 0.018426 0.052332 0.017602 0.184713 0.532110 0.274232 0.386667 0.150743 0.651376 0.244828 0.391400 0.129880 0.747706 0.221317 0.383169 0.111536 0.802752 0.195859 0.358460 3 khoa_cong_nghe_thong_tin suite22_primary 6277 218 0.034730 0.275517 0.858734 0.029655 0.011604 0.036570 0.001840 0.184713 0.532110 0.274232 0.386667 0.143312 0.619266 0.232759 0.372106 0.120319 0.692661 0.205024 0.354960 0.106437 0.766055 0.186905 0.342073 3 khoa_cong_nghe_thong_tin suite22_relational 6277 218 0.034730 0.264619 0.871179 0.029798 0.014421 0.048414 0.013684 0.189490 0.545872 0.281324 0.396667 0.148620 0.642202 0.241379 0.385888 0.128287 0.738532 0.218601 0.378467 0.109624 0.788991 0.192501 0.352315 3 khoa_cong_nghe_thong_tin suite23 6277 218 0.034730 0.280618 0.856670 0.031756 0.047220 0.080587 0.045857 0.186306 0.536697 0.276596 0.390000 0.152866 0.660550 0.248276 0.396913 0.127490 0.733945 0.217244 0.376117 0.105800 0.761468 0.185786 0.340025 3 khoa_cong_nghe_thong_tin suite23_graph 6277 218 0.034730 0.211298 0.829977 0.039017 0.077991 0.112721 0.077991 0.186306 0.536697 0.276596 0.390000 0.141189 0.610092 0.229310 0.366593 0.120319 0.692661 0.205024 0.354960 0.103888 0.747706 0.182429 0.333880 3 khoa_cong_nghe_thong_tin suite24 6277 218 0.034730 0.273727 0.853848 0.032010 0.038695 0.073224 0.038494 0.176752 0.509174 0.262411 0.370000 0.149682 0.646789 0.243103 0.388644 0.124303 0.715596 0.211813 0.366714 0.105163 0.756881 0.184667 0.337976 3 khoa_cong_nghe_thong_tin suite24_posthoc 6277 218 0.034730 0.286961 0.858941 0.029535 0.022962 0.056421 0.021691 0.191083 0.550459 0.283688 0.400000 0.147558 0.637615 0.239655 0.383131 0.125896 0.724771 0.214528 0.371415 0.108349 0.779817 0.190263 0.348218 3 khoa_cong_nghe_thong_tin suite25 6277 218 0.034730 0.280168 0.841323 0.033395 0.048903 0.083381 0.048651 0.195860 0.564220 0.290780 0.410000 0.143312 0.619266 0.232759 0.372106 0.118725 0.683486 0.202308 0.350259 0.104525 0.752294 0.183548 0.335928 3 khoa_cong_nghe_thong_tin suite25_blend 6277 218 0.034730 0.296711 0.857120 0.029912 0.032433 0.066544 0.031814 0.189490 0.545872 0.281324 0.396667 0.148620 0.642202 0.241379 0.385888 0.133068 0.766055 0.226748 0.392572 0.113448 0.816514 0.199217 0.364605 3 khoa_cong_nghe_thong_tin suite26_committee_blend 6277 218 0.034730 0.287352 0.857741 0.030064 0.032221 0.066373 0.031643 0.189490 0.545872 0.281324 0.396667 0.148620 0.642202 0.241379 0.385888 0.132271 0.761468 0.225390 0.390221 0.112173 0.807339 0.196978 0.360508 3 khoa_cong_nghe_thong_tin suite26_joint_head 6277 218 0.034730 0.367508 0.863883 0.032204 0.057167 0.090309 0.055579 0.195860 0.564220 0.290780 0.410000 0.144374 0.623853 0.234483 0.374862 0.123506 0.711009 0.210455 0.364363 0.107075 0.770642 0.188025 0.344121 3 khoa_cong_nghe_thong_tin suite26_tair 6277 218 0.034730 0.324512 0.852190 0.032031 0.046726 0.079364 0.044634 0.195860 0.564220 0.290780 0.410000 0.154989 0.669725 0.251724 0.402426 0.128287 0.738532 0.218601 0.378467 0.106437 0.766055 0.186905 0.342073 3 khoa_cong_nghe_thong_tin suite26_tree 6277 218 0.034730 0.322331 0.857399 0.033932 0.048990 0.082348 0.047618 0.184713 0.532110 0.274232 0.386667 0.151805 0.655963 0.246552 0.394157 0.124303 0.715596 0.211813 0.366714 0.108349 0.779817 0.190263 0.348218 3 khoa_cong_nghe_thong_tin suite26_tree_memory 6277 218 0.034730 0.341581 0.849830 0.031372 0.045309 0.076448 0.041718 0.186306 0.536697 0.276596 0.390000 0.151805 0.655963 0.246552 0.394157 0.126693 0.729358 0.215886 0.373766 0.107075 0.770642 0.188025 0.344121 3 khoa_cong_nghe_thong_tin v2 6277 218 0.034730 0.225600 0.868996 0.126963 0.224629 0.259359 0.224629 0.179936 0.518349 0.267139 0.376667 0.154989 0.669725 0.251724 0.402426 0.131474 0.756881 0.224033 0.387870 0.117272 0.844037 0.205932 0.376895 3 khoa_quan_tri_kinh_doanh_va_du_lich committee 6491 209 0.032198 0.384599 0.912642 0.025929 0.030317 0.061832 0.029633 0.211094 0.655502 0.319347 0.461279 0.167351 0.779904 0.275571 0.450276 0.136364 0.846890 0.234904 0.414714 0.112754 0.875598 0.199782 0.372102 3 khoa_quan_tri_kinh_doanh_va_du_lich suite14 6491 209 0.032198 0.410315 0.908408 0.029278 0.017511 0.049709 0.017511 0.214176 0.665072 0.324009 0.468013 0.161191 0.751196 0.265427 0.433702 0.130200 0.808612 0.224287 0.395970 0.110290 0.856459 0.195415 0.363969 3 khoa_quan_tri_kinh_doanh_va_du_lich suite16 6491 209 0.032198 0.388950 0.911929 0.082912 0.175514 0.207713 0.175514 0.206471 0.641148 0.312354 0.451178 0.165298 0.770335 0.272189 0.444751 0.134823 0.837321 0.232250 0.410028 0.110906 0.861244 0.196507 0.366002 3 khoa_quan_tri_kinh_doanh_va_du_lich suite17 6491 209 0.032198 0.394712 0.916415 0.026664 0.036569 0.065205 0.033007 0.226502 0.703349 0.342657 0.494949 0.168378 0.784689 0.277261 0.453039 0.133282 0.827751 0.229595 0.405342 0.110290 0.856459 0.195415 0.363969 3 khoa_quan_tri_kinh_doanh_va_du_lich suite18 6491 209 0.032198 0.392208 0.918589 0.026625 0.035282 0.064469 0.032271 0.215716 0.669856 0.326340 0.471380 0.169405 0.789474 0.278952 0.455801 0.137904 0.856459 0.237558 0.419400 0.115219 0.894737 0.204148 0.380236 3 khoa_quan_tri_kinh_doanh_va_du_lich suite20 6491 209 0.032198 0.294483 0.890058 0.055236 0.078592 0.110790 0.078592 0.200308 0.622010 0.303030 0.437710 0.152977 0.712919 0.251902 0.411602 0.126348 0.784689 0.217651 0.384255 0.107825 0.837321 0.191048 0.355836 3 khoa_quan_tri_kinh_doanh_va_du_lich suite21 6491 209 0.032198 0.396604 0.913265 0.025649 0.030148 0.061594 0.029395 0.214176 0.665072 0.324009 0.468013 0.162218 0.755981 0.267117 0.436464 0.137134 0.851675 0.236231 0.417057 0.113986 0.885167 0.201965 0.376169 3 khoa_quan_tri_kinh_doanh_va_du_lich suite22 6491 209 0.032198 0.412248 0.920702 0.024430 0.018097 0.048144 0.015946 0.223421 0.693780 0.337995 0.488215 0.172485 0.803828 0.284024 0.464088 0.137904 0.856459 0.237558 0.419400 0.115219 0.894737 0.204148 0.380236 3 khoa_quan_tri_kinh_doanh_va_du_lich suite22_primary 6491 209 0.032198 0.386371 0.910107 0.024415 0.003332 0.032283 0.000084 0.220339 0.684211 0.333333 0.481481 0.162218 0.755981 0.267117 0.436464 0.129430 0.803828 0.222960 0.393627 0.111522 0.866029 0.197598 0.368036 3 khoa_quan_tri_kinh_doanh_va_du_lich suite22_relational 6491 209 0.032198 0.406466 0.897137 0.025417 0.013275 0.042830 0.010631 0.200308 0.622010 0.303030 0.437710 0.149897 0.698565 0.246830 0.403315 0.122496 0.760766 0.211015 0.372540 0.105360 0.818182 0.186681 0.347702 3 khoa_quan_tri_kinh_doanh_va_du_lich suite23 6491 209 0.032198 0.402569 0.912421 0.026208 0.036643 0.066276 0.034078 0.215716 0.669856 0.326340 0.471380 0.168378 0.784689 0.277261 0.453039 0.135593 0.842105 0.233577 0.412371 0.114603 0.889952 0.203057 0.378203 3 khoa_quan_tri_kinh_doanh_va_du_lich suite23_graph 6491 209 0.032198 0.343607 0.873878 0.030623 0.057675 0.086062 0.053864 0.187982 0.583732 0.284382 0.410774 0.148871 0.693780 0.245139 0.400552 0.117103 0.727273 0.201725 0.356139 0.103512 0.803828 0.183406 0.341602 3 khoa_quan_tri_kinh_doanh_va_du_lich suite24 6491 209 0.032198 0.383951 0.908401 0.028343 0.045452 0.077095 0.044897 0.212635 0.660287 0.321678 0.464646 0.164271 0.765550 0.270499 0.441989 0.130200 0.808612 0.224287 0.395970 0.111522 0.866029 0.197598 0.368036 3 khoa_quan_tri_kinh_doanh_va_du_lich suite24_posthoc 6491 209 0.032198 0.400526 0.921175 0.025189 0.025721 0.055253 0.023055 0.231125 0.717703 0.349650 0.505051 0.173511 0.808612 0.285714 0.466851 0.134823 0.837321 0.232250 0.410028 0.115219 0.894737 0.204148 0.380236 3 khoa_quan_tri_kinh_doanh_va_du_lich suite25 6491 209 0.032198 0.274610 0.879604 0.030330 0.046673 0.078871 0.046673 0.187982 0.583732 0.284382 0.410774 0.140657 0.655502 0.231615 0.378453 0.119414 0.741627 0.205707 0.363168 0.101047 0.784689 0.179039 0.333469 3 khoa_quan_tri_kinh_doanh_va_du_lich suite25_blend 6491 209 0.032198 0.394980 0.914765 0.025813 0.031200 0.062274 0.030076 0.212635 0.660287 0.321678 0.464646 0.166324 0.775120 0.273880 0.447514 0.139445 0.866029 0.240212 0.424086 0.113986 0.885167 0.201965 0.376169 3 khoa_quan_tri_kinh_doanh_va_du_lich suite26_committee_blend 6491 209 0.032198 0.391607 0.914313 0.025967 0.032132 0.063314 0.031116 0.214176 0.665072 0.324009 0.468013 0.165298 0.770335 0.272189 0.444751 0.134052 0.832536 0.230922 0.407685 0.114603 0.889952 0.203057 0.378203 3 khoa_quan_tri_kinh_doanh_va_du_lich suite26_joint_head 6491 209 0.032198 0.430695 0.912640 0.030763 0.070279 0.099550 0.067352 0.206471 0.641148 0.312354 0.451178 0.157084 0.732057 0.258664 0.422652 0.132512 0.822967 0.228268 0.402999 0.113370 0.880383 0.200873 0.374136 3 khoa_quan_tri_kinh_doanh_va_du_lich suite26_tair 6491 209 0.032198 0.334769 0.904621 0.031090 0.057380 0.086217 0.054018 0.204931 0.636364 0.310023 0.447811 0.152977 0.712919 0.251902 0.411602 0.127119 0.789474 0.218978 0.386598 0.112138 0.870813 0.198690 0.370069 3 khoa_quan_tri_kinh_doanh_va_du_lich suite26_tree 6491 209 0.032198 0.328595 0.911067 0.029112 0.048831 0.081029 0.048831 0.211094 0.655502 0.319347 0.461279 0.166324 0.775120 0.273880 0.447514 0.129430 0.803828 0.222960 0.393627 0.110290 0.856459 0.195415 0.363969 3 khoa_quan_tri_kinh_doanh_va_du_lich suite26_tree_memory 6491 209 0.032198 0.342854 0.906067 0.030712 0.053280 0.084216 0.052018 0.204931 0.636364 0.310023 0.447811 0.156057 0.727273 0.256974 0.419890 0.128659 0.799043 0.221632 0.391284 0.112138 0.870813 0.198690 0.370069 3 khoa_quoc_te_hoc committee 2665 26 0.009756 0.199138 0.814302 0.009094 0.014132 0.022704 0.012948 0.048872 0.500000 0.089041 0.175676 0.040000 0.615385 0.075117 0.158730 0.030019 0.615385 0.057245 0.125589 0.027027 0.692308 0.052023 0.116883 3 khoa_quoc_te_hoc suite14 2665 26 0.009756 0.142260 0.811088 0.014789 0.010698 0.020454 0.010698 0.037594 0.384615 0.068493 0.135135 0.032500 0.500000 0.061033 0.128968 0.028143 0.576923 0.053667 0.117739 0.027027 0.692308 0.052023 0.116883 3 khoa_quoc_te_hoc suite16 2665 26 0.009756 0.195628 0.808727 0.034446 0.095273 0.105029 0.095273 0.052632 0.538462 0.095890 0.189189 0.040000 0.615385 0.075117 0.158730 0.031895 0.653846 0.060823 0.133438 0.025526 0.653846 0.049133 0.110390 3 khoa_quoc_te_hoc suite17 2665 26 0.009756 0.193277 0.817945 0.009314 0.014312 0.023822 0.014066 0.052632 0.538462 0.095890 0.189189 0.042500 0.653846 0.079812 0.168651 0.033771 0.692308 0.064401 0.141287 0.028529 0.730769 0.054913 0.123377 3 khoa_quoc_te_hoc suite18 2665 26 0.009756 0.188385 0.832665 0.009265 0.013995 0.023550 0.013794 0.052632 0.538462 0.095890 0.189189 0.042500 0.653846 0.079812 0.168651 0.033771 0.692308 0.064401 0.141287 0.028529 0.730769 0.054913 0.123377 3 khoa_quoc_te_hoc suite20 2665 26 0.009756 0.150915 0.769187 0.038417 0.050707 0.060463 0.050707 0.048872 0.500000 0.089041 0.175676 0.037500 0.576923 0.070423 0.148810 0.030019 0.615385 0.057245 0.125589 0.027027 0.692308 0.052023 0.116883 3 khoa_quoc_te_hoc suite21 2665 26 0.009756 0.196525 0.816553 0.009205 0.014866 0.023338 0.013582 0.052632 0.538462 0.095890 0.189189 0.037500 0.576923 0.070423 0.148810 0.030019 0.615385 0.057245 0.125589 0.027027 0.692308 0.052023 0.116883 3 khoa_quoc_te_hoc suite22 2665 26 0.009756 0.171784 0.816247 0.008869 0.010513 0.018730 0.008974 0.052632 0.538462 0.095890 0.189189 0.037500 0.576923 0.070423 0.148810 0.031895 0.653846 0.060823 0.133438 0.027027 0.692308 0.052023 0.116883 3 khoa_quoc_te_hoc suite22_primary 2665 26 0.009756 0.177036 0.796208 0.008913 0.007149 0.014651 0.004895 0.052632 0.538462 0.095890 0.189189 0.037500 0.576923 0.070423 0.148810 0.031895 0.653846 0.060823 0.133438 0.025526 0.653846 0.049133 0.110390 3 khoa_quoc_te_hoc suite22_relational 2665 26 0.009756 0.121251 0.811263 0.009528 0.004489 0.012324 0.002568 0.048872 0.500000 0.089041 0.175676 0.040000 0.615385 0.075117 0.158730 0.031895 0.653846 0.060823 0.133438 0.025526 0.653846 0.049133 0.110390 3 khoa_quoc_te_hoc suite23 2665 26 0.009756 0.187661 0.829131 0.009280 0.015705 0.024931 0.015174 0.052632 0.538462 0.095890 0.189189 0.040000 0.615385 0.075117 0.158730 0.033771 0.692308 0.064401 0.141287 0.028529 0.730769 0.054913 0.123377 3 khoa_quoc_te_hoc suite23_graph 2665 26 0.009756 0.100840 0.811569 0.011785 0.034981 0.044616 0.034860 0.056391 0.576923 0.102740 0.202703 0.040000 0.615385 0.075117 0.158730 0.030019 0.615385 0.057245 0.125589 0.024024 0.615385 0.046243 0.103896 3 khoa_quoc_te_hoc suite24 2665 26 0.009756 0.186269 0.843895 0.010087 0.022011 0.031083 0.021327 0.056391 0.576923 0.102740 0.202703 0.042500 0.653846 0.079812 0.168651 0.031895 0.653846 0.060823 0.133438 0.030030 0.769231 0.057803 0.129870 3 khoa_quoc_te_hoc suite24_posthoc 2665 26 0.009756 0.148819 0.843837 0.009233 0.013653 0.023409 0.013653 0.052632 0.538462 0.095890 0.189189 0.042500 0.653846 0.079812 0.168651 0.033771 0.692308 0.064401 0.141287 0.028529 0.730769 0.054913 0.123377 3 khoa_quoc_te_hoc suite25 2665 26 0.009756 0.286752 0.842408 0.012121 0.036504 0.045325 0.035569 0.048872 0.500000 0.089041 0.175676 0.035000 0.538462 0.065728 0.138889 0.030019 0.615385 0.057245 0.125589 0.025526 0.653846 0.049133 0.110390 3 khoa_quoc_te_hoc suite25_blend 2665 26 0.009756 0.207563 0.824394 0.008985 0.014892 0.023353 0.013597 0.056391 0.576923 0.102740 0.202703 0.040000 0.615385 0.075117 0.158730 0.030019 0.615385 0.057245 0.125589 0.027027 0.692308 0.052023 0.116883 3 khoa_quoc_te_hoc suite26_committee_blend 2665 26 0.009756 0.203167 0.827069 0.009109 0.014799 0.023992 0.014236 0.052632 0.538462 0.095890 0.189189 0.040000 0.615385 0.075117 0.158730 0.030019 0.615385 0.057245 0.125589 0.027027 0.692308 0.052023 0.116883 3 khoa_quoc_te_hoc suite26_joint_head 2665 26 0.009756 0.350126 0.869662 0.011650 0.045852 0.053587 0.043831 0.063910 0.653846 0.116438 0.229730 0.045000 0.692308 0.084507 0.178571 0.033771 0.692308 0.064401 0.141287 0.027027 0.692308 0.052023 0.116883 3 khoa_quoc_te_hoc suite26_tair 2665 26 0.009756 0.191475 0.849397 0.014414 0.046274 0.055290 0.045534 0.045113 0.461538 0.082192 0.162162 0.032500 0.500000 0.061033 0.128968 0.028143 0.576923 0.053667 0.117739 0.024024 0.615385 0.046243 0.103896 3 khoa_quoc_te_hoc suite26_tree 2665 26 0.009756 0.152227 0.859832 0.012864 0.038182 0.046721 0.036965 0.060150 0.615385 0.109589 0.216216 0.040000 0.615385 0.075117 0.158730 0.033771 0.692308 0.064401 0.141287 0.030030 0.769231 0.057803 0.129870 3 khoa_quoc_te_hoc suite26_tree_memory 2665 26 0.009756 0.173011 0.847662 0.014219 0.043860 0.053616 0.043860 0.045113 0.461538 0.082192 0.162162 0.032500 0.500000 0.061033 0.128968 0.028143 0.576923 0.053667 0.117739 0.024024 0.615385 0.046243 0.103896 3 khoa_tieng_anh committee 7279 101 0.013876 0.346834 0.940849 0.011179 0.012806 0.025715 0.011839 0.111264 0.801980 0.195416 0.357774 0.084249 0.910891 0.154233 0.307487 0.064560 0.930693 0.120745 0.252688 0.051648 0.930693 0.097866 0.211331 3 khoa_tieng_anh suite14 7279 101 0.013876 0.320806 0.906215 0.013917 0.027554 0.041077 0.027201 0.081044 0.584158 0.142340 0.260601 0.065934 0.712871 0.120704 0.240642 0.059066 0.851485 0.110469 0.231183 0.050000 0.900990 0.094742 0.204586 3 khoa_tieng_anh suite16 7279 101 0.013876 0.362907 0.958968 0.030675 0.082267 0.096142 0.082267 0.123626 0.891089 0.217129 0.397527 0.086081 0.930693 0.157586 0.314171 0.067995 0.980198 0.127168 0.266129 0.054945 0.990099 0.104112 0.224820 3 khoa_tieng_anh suite17 7279 101 0.013876 0.377574 0.956844 0.011076 0.017212 0.028871 0.014995 0.122253 0.881188 0.214717 0.393110 0.086996 0.940594 0.159262 0.317513 0.067995 0.980198 0.127168 0.266129 0.054945 0.990099 0.104112 0.224820 3 khoa_tieng_anh suite18 7279 101 0.013876 0.371242 0.955575 0.011039 0.017101 0.028545 0.014669 0.119505 0.861386 0.209891 0.384276 0.086996 0.940594 0.159262 0.317513 0.067308 0.970297 0.125883 0.263441 0.054945 0.990099 0.104112 0.224820 3 khoa_tieng_anh suite20 7279 101 0.013876 0.461653 0.947451 0.031635 0.038904 0.052779 0.038904 0.108516 0.782178 0.190591 0.348940 0.081502 0.881188 0.149204 0.297460 0.065934 0.950495 0.123314 0.258065 0.053846 0.970297 0.102030 0.220324 3 khoa_tieng_anh suite21 7279 101 0.013876 0.383605 0.947709 0.010871 0.014284 0.025795 0.011920 0.116758 0.841584 0.205066 0.375442 0.083333 0.900990 0.152557 0.304144 0.065247 0.940594 0.122030 0.255376 0.052198 0.940594 0.098907 0.213579 3 khoa_tieng_anh suite22 7279 101 0.013876 0.414925 0.953997 0.010493 0.007131 0.017144 0.003268 0.119505 0.861386 0.209891 0.384276 0.085165 0.920792 0.155909 0.310829 0.064560 0.930693 0.120745 0.252688 0.052747 0.950495 0.099948 0.215827 3 khoa_tieng_anh suite22_primary 7279 101 0.013876 0.429238 0.950565 0.010655 0.006457 0.010526 -0.003350 0.118132 0.851485 0.207479 0.379859 0.083333 0.900990 0.152557 0.304144 0.063874 0.920792 0.119461 0.250000 0.052198 0.940594 0.098907 0.213579 3 khoa_tieng_anh suite22_relational 7279 101 0.013876 0.282679 0.929496 0.011448 0.006530 0.009464 -0.004411 0.114011 0.821782 0.200241 0.366608 0.081502 0.881188 0.149204 0.297460 0.061126 0.881188 0.114322 0.239247 0.048901 0.881188 0.092660 0.200090 3 khoa_tieng_anh suite23 7279 101 0.013876 0.394045 0.949436 0.010850 0.014877 0.026545 0.012670 0.118132 0.851485 0.207479 0.379859 0.084249 0.910891 0.154233 0.307487 0.064560 0.930693 0.120745 0.252688 0.053297 0.960396 0.100989 0.218076 3 khoa_tieng_anh suite23_graph 7279 101 0.013876 0.313080 0.931558 0.012501 0.025648 0.038397 0.024522 0.103022 0.742574 0.180941 0.331272 0.076923 0.831683 0.140821 0.280749 0.065247 0.940594 0.122030 0.255376 0.052198 0.940594 0.098907 0.213579 3 khoa_tieng_anh suite24 7279 101 0.013876 0.396828 0.940969 0.010655 0.011793 0.024272 0.010397 0.109890 0.792079 0.193004 0.353357 0.082418 0.891089 0.150880 0.300802 0.063874 0.920792 0.119461 0.250000 0.052747 0.950495 0.099948 0.215827 3 khoa_tieng_anh suite24_posthoc 7279 101 0.013876 0.421314 0.952721 0.010581 0.010569 0.020180 0.006304 0.123626 0.891089 0.217129 0.397527 0.084249 0.910891 0.154233 0.307487 0.065247 0.940594 0.122030 0.255376 0.053297 0.960396 0.100989 0.218076 3 khoa_tieng_anh suite25 7279 101 0.013876 0.384453 0.929574 0.011152 0.016603 0.028976 0.015101 0.097527 0.702970 0.171291 0.313604 0.076923 0.831683 0.140821 0.280749 0.064560 0.930693 0.120745 0.252688 0.052198 0.940594 0.098907 0.213579 3 khoa_tieng_anh suite25_blend 7279 101 0.013876 0.377543 0.945316 0.010933 0.014851 0.025227 0.011351 0.119505 0.861386 0.209891 0.384276 0.085165 0.920792 0.155909 0.310829 0.064560 0.930693 0.120745 0.252688 0.052198 0.940594 0.098907 0.213579 3 khoa_tieng_anh suite26_committee_blend 7279 101 0.013876 0.364493 0.945396 0.010966 0.013962 0.024604 0.010728 0.116758 0.841584 0.205066 0.375442 0.083333 0.900990 0.152557 0.304144 0.065247 0.940594 0.122030 0.255376 0.052198 0.940594 0.098907 0.213579 3 khoa_tieng_anh suite26_joint_head 7279 101 0.013876 0.410658 0.935980 0.010865 0.018877 0.030826 0.016951 0.109890 0.792079 0.193004 0.353357 0.077839 0.841584 0.142498 0.284091 0.062500 0.900990 0.116891 0.244624 0.052747 0.950495 0.099948 0.215827 3 khoa_tieng_anh suite26_tair 7279 101 0.013876 0.380548 0.897647 0.011503 0.015219 0.027624 0.013749 0.085165 0.613861 0.149578 0.273852 0.061355 0.663366 0.112322 0.223930 0.047390 0.683168 0.088632 0.185484 0.052198 0.940594 0.098907 0.213579 3 khoa_tieng_anh suite26_tree 7279 101 0.013876 0.402627 0.944262 0.011116 0.012997 0.025632 0.011757 0.112637 0.811881 0.197829 0.362191 0.086996 0.940594 0.159262 0.317513 0.065247 0.940594 0.122030 0.255376 0.053297 0.960396 0.100989 0.218076 3 khoa_tieng_anh suite26_tree_memory 7279 101 0.013876 0.352896 0.897764 0.011232 0.014113 0.026876 0.013001 0.083791 0.603960 0.147165 0.269435 0.061355 0.663366 0.112322 0.223930 0.047390 0.683168 0.088632 0.185484 0.052198 0.940594 0.098907 0.213579 3 khoa_tieng_bo_dao_nha committee 1032 50 0.048450 0.348897 0.909959 0.038416 0.027383 0.060127 0.011678 0.368932 0.760000 0.496732 0.627063 0.251613 0.780000 0.380488 0.549296 0.208738 0.860000 0.335938 0.529557 0.174419 0.900000 0.292208 0.491266 3 khoa_tieng_bo_dao_nha suite14 1032 50 0.048450 0.444556 0.904705 0.040251 0.034001 0.078617 0.030167 0.359223 0.740000 0.483660 0.610561 0.245161 0.760000 0.370732 0.535211 0.184466 0.760000 0.296875 0.467980 0.158915 0.820000 0.266234 0.447598 3 khoa_tieng_bo_dao_nha suite16 1032 50 0.048450 0.382743 0.913218 0.103843 0.201871 0.250321 0.201871 0.339806 0.700000 0.457516 0.577558 0.264516 0.820000 0.400000 0.577465 0.208738 0.860000 0.335938 0.529557 0.178295 0.920000 0.298701 0.502183 3 khoa_tieng_bo_dao_nha suite17 1032 50 0.048450 0.363423 0.920530 0.038856 0.023248 0.060796 0.012346 0.359223 0.740000 0.483660 0.610561 0.258065 0.800000 0.390244 0.563380 0.208738 0.860000 0.335938 0.529557 0.174419 0.900000 0.292208 0.491266 3 khoa_tieng_bo_dao_nha suite18 1032 50 0.048450 0.343661 0.913727 0.039030 0.022790 0.060700 0.012251 0.359223 0.740000 0.483660 0.610561 0.251613 0.780000 0.380488 0.549296 0.208738 0.860000 0.335938 0.529557 0.174419 0.900000 0.292208 0.491266 3 khoa_tieng_bo_dao_nha suite20 1032 50 0.048450 0.484337 0.932525 0.069934 0.067814 0.115448 0.066998 0.339806 0.700000 0.457516 0.577558 0.264516 0.820000 0.400000 0.577465 0.213592 0.880000 0.343750 0.541872 0.178295 0.920000 0.298701 0.502183 3 khoa_tieng_bo_dao_nha suite21 1032 50 0.048450 0.396907 0.919654 0.036294 0.037994 0.060956 0.012507 0.378641 0.780000 0.509804 0.643564 0.251613 0.780000 0.380488 0.549296 0.208738 0.860000 0.335938 0.529557 0.178295 0.920000 0.298701 0.502183 3 khoa_tieng_bo_dao_nha suite22 1032 50 0.048450 0.377368 0.922729 0.037521 0.030519 0.042842 -0.005608 0.368932 0.760000 0.496732 0.627063 0.264516 0.820000 0.400000 0.577465 0.218447 0.900000 0.351562 0.554187 0.178295 0.920000 0.298701 0.502183 3 khoa_tieng_bo_dao_nha suite22_primary 1032 50 0.048450 0.414117 0.919043 0.038547 0.025549 0.023679 -0.024771 0.359223 0.740000 0.483660 0.610561 0.264516 0.820000 0.400000 0.577465 0.203883 0.840000 0.328125 0.517241 0.178295 0.920000 0.298701 0.502183 3 khoa_tieng_bo_dao_nha suite22_relational 1032 50 0.048450 0.464143 0.933747 0.034966 0.020996 0.027454 -0.020996 0.359223 0.740000 0.483660 0.610561 0.264516 0.820000 0.400000 0.577465 0.218447 0.900000 0.351562 0.554187 0.186047 0.960000 0.311688 0.524017 3 khoa_tieng_bo_dao_nha suite23 1032 50 0.048450 0.348897 0.909959 0.038416 0.027383 0.060127 0.011678 0.368932 0.760000 0.496732 0.627063 0.251613 0.780000 0.380488 0.549296 0.208738 0.860000 0.335938 0.529557 0.174419 0.900000 0.292208 0.491266 3 khoa_tieng_bo_dao_nha suite23_graph 1032 50 0.048450 0.399114 0.916599 0.042721 0.077768 0.123367 0.074917 0.330097 0.680000 0.444444 0.561056 0.251613 0.780000 0.380488 0.549296 0.199029 0.820000 0.320312 0.504926 0.170543 0.880000 0.285714 0.480349 3 khoa_tieng_bo_dao_nha suite24 1032 50 0.048450 0.341537 0.906823 0.038150 0.031178 0.068443 0.019994 0.330097 0.680000 0.444444 0.561056 0.238710 0.740000 0.360976 0.521127 0.199029 0.820000 0.320312 0.504926 0.166667 0.860000 0.279221 0.469432 3 khoa_tieng_bo_dao_nha suite24_posthoc 1032 50 0.048450 0.384548 0.919145 0.037653 0.027721 0.055127 0.006678 0.339806 0.700000 0.457516 0.577558 0.258065 0.800000 0.390244 0.563380 0.213592 0.880000 0.343750 0.541872 0.178295 0.920000 0.298701 0.502183 3 khoa_tieng_bo_dao_nha suite25 1032 50 0.048450 0.448327 0.913870 0.037668 0.029924 0.076223 0.027773 0.320388 0.660000 0.431373 0.544554 0.264516 0.820000 0.400000 0.577465 0.213592 0.880000 0.343750 0.541872 0.178295 0.920000 0.298701 0.502183 3 khoa_tieng_bo_dao_nha suite25_blend 1032 50 0.048450 0.367851 0.914684 0.037802 0.026239 0.060488 0.012039 0.368932 0.760000 0.496732 0.627063 0.251613 0.780000 0.380488 0.549296 0.208738 0.860000 0.335938 0.529557 0.178295 0.920000 0.298701 0.502183 3 khoa_tieng_bo_dao_nha suite26_committee_blend 1032 50 0.048450 0.371152 0.913279 0.037579 0.027061 0.061460 0.013010 0.378641 0.780000 0.509804 0.643564 0.251613 0.780000 0.380488 0.549296 0.208738 0.860000 0.335938 0.529557 0.174419 0.900000 0.292208 0.491266 3 khoa_tieng_bo_dao_nha suite26_joint_head 1032 50 0.048450 0.500269 0.927128 0.035866 0.050188 0.091089 0.042640 0.359223 0.740000 0.483660 0.610561 0.270968 0.840000 0.409756 0.591549 0.213592 0.880000 0.343750 0.541872 0.182171 0.940000 0.305195 0.513100 3 khoa_tieng_bo_dao_nha suite26_tair 1032 50 0.048450 0.452872 0.914664 0.035955 0.040578 0.084993 0.036543 0.359223 0.740000 0.483660 0.610561 0.251613 0.780000 0.380488 0.549296 0.194175 0.800000 0.312500 0.492611 0.162791 0.840000 0.272727 0.458515 3 khoa_tieng_bo_dao_nha suite26_tree 1032 50 0.048450 0.352189 0.924022 0.043728 0.060824 0.101781 0.053331 0.330097 0.680000 0.444444 0.561056 0.258065 0.800000 0.390244 0.563380 0.213592 0.880000 0.343750 0.541872 0.186047 0.960000 0.311688 0.524017 3 khoa_tieng_bo_dao_nha suite26_tree_memory 1032 50 0.048450 0.490350 0.911100 0.036720 0.039239 0.085996 0.037547 0.339806 0.700000 0.457516 0.577558 0.251613 0.780000 0.380488 0.549296 0.194175 0.800000 0.312500 0.492611 0.162791 0.840000 0.272727 0.458515 3 khoa_tieng_duc committee 1909 47 0.024620 0.247552 0.852915 0.022254 0.034028 0.057899 0.033279 0.162304 0.659574 0.260504 0.408971 0.122378 0.744681 0.210210 0.369198 0.094241 0.765957 0.167832 0.315789 0.075472 0.765957 0.137405 0.270677 3 khoa_tieng_duc suite14 1909 47 0.024620 0.205287 0.856069 0.043384 0.080132 0.104752 0.080132 0.136126 0.553191 0.218487 0.343008 0.108392 0.659574 0.186186 0.327004 0.091623 0.744681 0.163170 0.307018 0.079665 0.808511 0.145038 0.285714 3 khoa_tieng_duc suite16 1909 47 0.024620 0.212514 0.892257 0.092964 0.199525 0.224145 0.199525 0.146597 0.595745 0.235294 0.369393 0.129371 0.787234 0.222222 0.390295 0.096859 0.787234 0.172494 0.324561 0.079665 0.808511 0.145038 0.285714 3 khoa_tieng_duc suite17 1909 47 0.024620 0.267260 0.887435 0.022219 0.037266 0.056659 0.032038 0.167539 0.680851 0.268908 0.422164 0.122378 0.744681 0.210210 0.369198 0.096859 0.787234 0.172494 0.324561 0.079665 0.808511 0.145038 0.285714 3 khoa_tieng_duc suite18 1909 47 0.024620 0.282976 0.888852 0.022190 0.036711 0.056984 0.032364 0.167539 0.680851 0.268908 0.422164 0.118881 0.723404 0.204204 0.358650 0.096859 0.787234 0.172494 0.324561 0.079665 0.808511 0.145038 0.285714 3 khoa_tieng_duc suite20 1909 47 0.024620 0.219488 0.906655 0.062231 0.061847 0.086468 0.061847 0.157068 0.638298 0.252101 0.395778 0.129371 0.787234 0.222222 0.390295 0.107330 0.872340 0.191142 0.359649 0.085954 0.872340 0.156489 0.308271 3 khoa_tieng_duc suite21 1909 47 0.024620 0.241119 0.865759 0.022892 0.034324 0.058913 0.034293 0.167539 0.680851 0.268908 0.422164 0.122378 0.744681 0.210210 0.369198 0.096859 0.787234 0.172494 0.324561 0.077568 0.787234 0.141221 0.278195 3 khoa_tieng_duc suite22 1909 47 0.024620 0.333258 0.897936 0.020291 0.019097 0.041211 0.016591 0.162304 0.659574 0.260504 0.408971 0.125874 0.765957 0.216216 0.379747 0.096859 0.787234 0.172494 0.324561 0.081761 0.829787 0.148855 0.293233 3 khoa_tieng_duc suite22_primary 1909 47 0.024620 0.357600 0.906266 0.019484 0.007646 0.027251 0.002631 0.162304 0.659574 0.260504 0.408971 0.125874 0.765957 0.216216 0.379747 0.104712 0.851064 0.186480 0.350877 0.090147 0.914894 0.164122 0.323308 3 khoa_tieng_duc suite22_relational 1909 47 0.024620 0.409484 0.926172 0.018760 0.005359 0.027407 0.002787 0.183246 0.744681 0.294118 0.461741 0.136364 0.829787 0.234234 0.411392 0.107330 0.872340 0.191142 0.359649 0.090147 0.914894 0.164122 0.323308 3 khoa_tieng_duc suite23 1909 47 0.024620 0.282070 0.878008 0.022002 0.034966 0.057889 0.033268 0.167539 0.680851 0.268908 0.422164 0.122378 0.744681 0.210210 0.369198 0.096859 0.787234 0.172494 0.324561 0.077568 0.787234 0.141221 0.278195 3 khoa_tieng_duc suite23_graph 1909 47 0.024620 0.303875 0.903375 0.025509 0.049632 0.073744 0.049124 0.178010 0.723404 0.285714 0.448549 0.125874 0.765957 0.216216 0.379747 0.099476 0.808511 0.177156 0.333333 0.085954 0.872340 0.156489 0.308271 3 khoa_tieng_duc suite24 1909 47 0.024620 0.274217 0.841203 0.023267 0.038583 0.063203 0.038583 0.167539 0.680851 0.268908 0.422164 0.111888 0.680851 0.192192 0.337553 0.086387 0.702128 0.153846 0.289474 0.075472 0.765957 0.137405 0.270677 3 khoa_tieng_duc suite24_posthoc 1909 47 0.024620 0.312040 0.870306 0.020939 0.026870 0.047791 0.023171 0.167539 0.680851 0.268908 0.422164 0.118881 0.723404 0.204204 0.358650 0.096859 0.787234 0.172494 0.324561 0.077568 0.787234 0.141221 0.278195 3 khoa_tieng_duc suite25 1909 47 0.024620 0.394182 0.905169 0.024824 0.047407 0.069870 0.045249 0.167539 0.680851 0.268908 0.422164 0.125874 0.765957 0.216216 0.379747 0.104712 0.851064 0.186480 0.350877 0.090147 0.914894 0.164122 0.323308 3 khoa_tieng_duc suite25_blend 1909 47 0.024620 0.285838 0.875597 0.021942 0.033421 0.057443 0.032822 0.162304 0.659574 0.260504 0.408971 0.125874 0.765957 0.216216 0.379747 0.094241 0.765957 0.167832 0.315789 0.077568 0.787234 0.141221 0.278195 3 khoa_tieng_duc suite26_committee_blend 1909 47 0.024620 0.295805 0.867027 0.021677 0.031680 0.055216 0.030596 0.162304 0.659574 0.260504 0.408971 0.115385 0.702128 0.198198 0.348101 0.094241 0.765957 0.167832 0.315789 0.075472 0.765957 0.137405 0.270677 3 khoa_tieng_duc suite26_joint_head 1909 47 0.024620 0.553716 0.927543 0.017836 0.036764 0.055483 0.030863 0.198953 0.808511 0.319328 0.501319 0.136364 0.829787 0.234234 0.411392 0.102094 0.829787 0.181818 0.342105 0.085954 0.872340 0.156489 0.308271 3 khoa_tieng_duc suite26_tair 1909 47 0.024620 0.377255 0.888966 0.020570 0.023513 0.045951 0.021331 0.141361 0.574468 0.226891 0.356201 0.111888 0.680851 0.192192 0.337553 0.094241 0.765957 0.167832 0.315789 0.081761 0.829787 0.148855 0.293233 3 khoa_tieng_duc suite26_tree 1909 47 0.024620 0.354709 0.920413 0.019515 0.026419 0.049110 0.024490 0.162304 0.659574 0.260504 0.408971 0.122378 0.744681 0.210210 0.369198 0.107330 0.872340 0.191142 0.359649 0.094340 0.957447 0.171756 0.338346 3 khoa_tieng_duc suite26_tree_memory 1909 47 0.024620 0.301537 0.872609 0.021119 0.021460 0.044781 0.020160 0.136126 0.553191 0.218487 0.343008 0.111888 0.680851 0.192192 0.337553 0.086387 0.702128 0.153846 0.289474 0.071279 0.723404 0.129771 0.255639 3 khoa_tieng_han_quoc committee 3235 42 0.012983 0.214705 0.841066 0.011907 0.017082 0.026409 0.013426 0.080247 0.619048 0.142077 0.264228 0.057732 0.666667 0.106262 0.214395 0.043277 0.666667 0.081277 0.171779 0.038319 0.738095 0.072855 0.158649 3 khoa_tieng_han_quoc suite14 3235 42 0.012983 0.137334 0.833177 0.027323 0.064849 0.077832 0.064849 0.064815 0.500000 0.114754 0.213415 0.051546 0.595238 0.094877 0.191424 0.044822 0.690476 0.084180 0.177914 0.035847 0.690476 0.068155 0.148414 3 khoa_tieng_han_quoc suite16 3235 42 0.012983 0.218216 0.851468 0.033047 0.094078 0.107061 0.094078 0.083333 0.642857 0.147541 0.274390 0.065979 0.761905 0.121442 0.245023 0.052550 0.809524 0.098694 0.208589 0.042027 0.809524 0.079906 0.174002 3 khoa_tieng_han_quoc suite17 3235 42 0.012983 0.253086 0.861908 0.011717 0.020093 0.030276 0.017293 0.092593 0.714286 0.163934 0.304878 0.065979 0.761905 0.121442 0.245023 0.051005 0.785714 0.095791 0.202454 0.042027 0.809524 0.079906 0.174002 3 khoa_tieng_han_quoc suite18 3235 42 0.012983 0.250176 0.864160 0.011746 0.020395 0.030077 0.017094 0.086420 0.666667 0.153005 0.284553 0.065979 0.761905 0.121442 0.245023 0.052550 0.809524 0.098694 0.208589 0.042027 0.809524 0.079906 0.174002 3 khoa_tieng_han_quoc suite20 3235 42 0.012983 0.196312 0.841357 0.061651 0.069322 0.082305 0.069322 0.083333 0.642857 0.147541 0.274390 0.061856 0.714286 0.113852 0.229709 0.052550 0.809524 0.098694 0.208589 0.042027 0.809524 0.079906 0.174002 3 khoa_tieng_han_quoc suite21 3235 42 0.012983 0.229856 0.849008 0.011523 0.016029 0.025891 0.012908 0.086420 0.666667 0.153005 0.284553 0.057732 0.666667 0.106262 0.214395 0.046368 0.714286 0.087083 0.184049 0.039555 0.761905 0.075206 0.163767 3 khoa_tieng_han_quoc suite22 3235 42 0.012983 0.278722 0.867605 0.011094 0.007883 0.016990 0.004007 0.095679 0.738095 0.169399 0.315041 0.068041 0.785714 0.125237 0.252680 0.052550 0.809524 0.098694 0.208589 0.042027 0.809524 0.079906 0.174002 3 khoa_tieng_han_quoc suite22_primary 3235 42 0.012983 0.352874 0.855607 0.010403 0.003428 0.011186 -0.001797 0.101852 0.785714 0.180328 0.335366 0.068041 0.785714 0.125237 0.252680 0.052550 0.809524 0.098694 0.208589 0.042027 0.809524 0.079906 0.174002 3 khoa_tieng_han_quoc suite22_relational 3235 42 0.012983 0.323710 0.850119 0.010862 0.006883 0.009283 -0.003700 0.092593 0.714286 0.163934 0.304878 0.068041 0.785714 0.125237 0.252680 0.052550 0.809524 0.098694 0.208589 0.042027 0.809524 0.079906 0.174002 3 khoa_tieng_han_quoc suite23 3235 42 0.012983 0.279797 0.859559 0.011625 0.018562 0.027748 0.014765 0.086420 0.666667 0.153005 0.284553 0.065979 0.761905 0.121442 0.245023 0.049459 0.761905 0.092888 0.196319 0.039555 0.761905 0.075206 0.163767 3 khoa_tieng_han_quoc suite23_graph 3235 42 0.012983 0.298919 0.845413 0.013871 0.031289 0.044098 0.031115 0.086420 0.666667 0.153005 0.284553 0.059794 0.690476 0.110057 0.222052 0.051005 0.785714 0.095791 0.202454 0.040791 0.785714 0.077556 0.168884 3 khoa_tieng_han_quoc suite24 3235 42 0.012983 0.194055 0.830634 0.012138 0.019090 0.029226 0.016243 0.077160 0.595238 0.136612 0.254065 0.055670 0.642857 0.102467 0.206738 0.044822 0.690476 0.084180 0.177914 0.035847 0.690476 0.068155 0.148414 3 khoa_tieng_han_quoc suite24_posthoc 3235 42 0.012983 0.250643 0.836450 0.011620 0.011952 0.021593 0.008610 0.080247 0.619048 0.142077 0.264228 0.055670 0.642857 0.102467 0.206738 0.046368 0.714286 0.087083 0.184049 0.038319 0.738095 0.072855 0.158649 3 khoa_tieng_han_quoc suite25 3235 42 0.012983 0.366791 0.847598 0.011349 0.014109 0.025627 0.012644 0.092593 0.714286 0.163934 0.304878 0.068041 0.785714 0.125237 0.252680 0.051005 0.785714 0.095791 0.202454 0.042027 0.809524 0.079906 0.174002 3 khoa_tieng_han_quoc suite25_blend 3235 42 0.012983 0.264631 0.853496 0.011634 0.015587 0.025222 0.012239 0.083333 0.642857 0.147541 0.274390 0.061856 0.714286 0.113852 0.229709 0.047913 0.738095 0.089985 0.190184 0.039555 0.761905 0.075206 0.163767 3 khoa_tieng_han_quoc suite26_committee_blend 3235 42 0.012983 0.226878 0.841976 0.011803 0.016781 0.025904 0.012921 0.083333 0.642857 0.147541 0.274390 0.057732 0.666667 0.106262 0.214395 0.043277 0.666667 0.081277 0.171779 0.037083 0.714286 0.070505 0.153531 3 khoa_tieng_han_quoc suite26_joint_head 3235 42 0.012983 0.358586 0.832677 0.011371 0.025492 0.036204 0.023221 0.092593 0.714286 0.163934 0.304878 0.063918 0.738095 0.117647 0.237366 0.051005 0.785714 0.095791 0.202454 0.040791 0.785714 0.077556 0.168884 3 khoa_tieng_han_quoc suite26_tair 3235 42 0.012983 0.175188 0.801426 0.012649 0.017576 0.030154 0.017171 0.067901 0.523810 0.120219 0.223577 0.051546 0.595238 0.094877 0.191424 0.044822 0.690476 0.084180 0.177914 0.037083 0.714286 0.070505 0.153531 3 khoa_tieng_han_quoc suite26_tree 3235 42 0.012983 0.296206 0.841547 0.010834 0.011663 0.023771 0.010788 0.089506 0.690476 0.158470 0.294715 0.068041 0.785714 0.125237 0.252680 0.051005 0.785714 0.095791 0.202454 0.040791 0.785714 0.077556 0.168884 3 khoa_tieng_han_quoc suite26_tree_memory 3235 42 0.012983 0.161852 0.802772 0.012644 0.017575 0.029154 0.016171 0.070988 0.547619 0.125683 0.233740 0.049485 0.571429 0.091082 0.183767 0.044822 0.690476 0.084180 0.177914 0.037083 0.714286 0.070505 0.153531 3 khoa_tieng_italia committee 2145 68 0.031702 0.207328 0.833251 0.029431 0.034903 0.064843 0.033141 0.135514 0.426471 0.205674 0.298354 0.111801 0.529412 0.184615 0.303030 0.100233 0.632353 0.173038 0.306705 0.082090 0.647059 0.145695 0.272277 3 khoa_tieng_italia suite14 2145 68 0.031702 0.181800 0.769336 0.037335 0.042334 0.072988 0.041286 0.098131 0.308824 0.148936 0.216049 0.083851 0.397059 0.138462 0.227273 0.088578 0.558824 0.152918 0.271041 0.076493 0.602941 0.135762 0.253713 3 khoa_tieng_italia suite16 2145 68 0.031702 0.267848 0.865396 0.099754 0.210833 0.242534 0.210833 0.172897 0.544118 0.262411 0.380658 0.133540 0.632353 0.220513 0.361953 0.107226 0.676471 0.185111 0.328103 0.091418 0.720588 0.162252 0.303218 3 khoa_tieng_italia suite17 2145 68 0.031702 0.258617 0.877375 0.028946 0.040957 0.065232 0.033530 0.168224 0.529412 0.255319 0.370370 0.124224 0.588235 0.205128 0.336700 0.116550 0.735294 0.201207 0.356633 0.098881 0.779412 0.175497 0.327970 3 khoa_tieng_italia suite18 2145 68 0.031702 0.256135 0.876724 0.028999 0.037578 0.065320 0.033619 0.158879 0.500000 0.241135 0.349794 0.124224 0.588235 0.205128 0.336700 0.109557 0.691176 0.189135 0.335235 0.108209 0.852941 0.192053 0.358911 3 khoa_tieng_italia suite20 2145 68 0.031702 0.182696 0.844310 0.083755 0.091420 0.114088 0.082386 0.126168 0.397059 0.191489 0.277778 0.096273 0.455882 0.158974 0.260943 0.086247 0.544118 0.148893 0.263909 0.095149 0.750000 0.168874 0.315594 3 khoa_tieng_italia suite21 2145 68 0.031702 0.206976 0.835049 0.030006 0.037895 0.067967 0.036266 0.135514 0.426471 0.205674 0.298354 0.105590 0.500000 0.174359 0.286195 0.093240 0.588235 0.160966 0.285307 0.085821 0.676471 0.152318 0.284653 3 khoa_tieng_italia suite22 2145 68 0.031702 0.271716 0.880399 0.027217 0.018345 0.047698 0.015997 0.172897 0.544118 0.262411 0.380658 0.133540 0.632353 0.220513 0.361953 0.118881 0.750000 0.205231 0.363766 0.102612 0.808824 0.182119 0.340347 3 khoa_tieng_italia suite22_primary 2145 68 0.031702 0.216908 0.872809 0.027618 0.003920 0.034844 0.003142 0.177570 0.558824 0.269504 0.390947 0.139752 0.661765 0.230769 0.378788 0.125874 0.794118 0.217304 0.385164 0.102612 0.808824 0.182119 0.340347 3 khoa_tieng_italia suite22_relational 2145 68 0.031702 0.213833 0.870139 0.028822 0.018923 0.037297 0.005595 0.126168 0.397059 0.191489 0.277778 0.121118 0.573529 0.200000 0.328283 0.118881 0.750000 0.205231 0.363766 0.100746 0.794118 0.178808 0.334158 3 khoa_tieng_italia suite23 2145 68 0.031702 0.207328 0.833251 0.029431 0.034903 0.064843 0.033141 0.135514 0.426471 0.205674 0.298354 0.111801 0.529412 0.184615 0.303030 0.100233 0.632353 0.173038 0.306705 0.082090 0.647059 0.145695 0.272277 3 khoa_tieng_italia suite23_graph 2145 68 0.031702 0.190476 0.856680 0.033666 0.059104 0.090806 0.059104 0.168224 0.529412 0.255319 0.370370 0.133540 0.632353 0.220513 0.361953 0.116550 0.735294 0.201207 0.356633 0.095149 0.750000 0.168874 0.315594 3 khoa_tieng_italia suite24 2145 68 0.031702 0.215837 0.817454 0.030943 0.038342 0.069018 0.037317 0.144860 0.455882 0.219858 0.318930 0.105590 0.500000 0.174359 0.286195 0.088578 0.558824 0.152918 0.271041 0.080224 0.632353 0.142384 0.266089 3 khoa_tieng_italia suite24_posthoc 2145 68 0.031702 0.231373 0.844841 0.028174 0.022054 0.051374 0.019672 0.149533 0.470588 0.226950 0.329218 0.118012 0.558824 0.194872 0.319865 0.100233 0.632353 0.173038 0.306705 0.091418 0.720588 0.162252 0.303218 3 khoa_tieng_italia suite25 2145 68 0.031702 0.339924 0.887245 0.028704 0.033924 0.061660 0.029958 0.168224 0.529412 0.255319 0.370370 0.139752 0.661765 0.230769 0.378788 0.118881 0.750000 0.205231 0.363766 0.108209 0.852941 0.192053 0.358911 3 khoa_tieng_italia suite25_blend 2145 68 0.031702 0.220574 0.857650 0.028889 0.033028 0.062914 0.031212 0.144860 0.455882 0.219858 0.318930 0.118012 0.558824 0.194872 0.319865 0.102564 0.647059 0.177062 0.313837 0.091418 0.720588 0.162252 0.303218 3 khoa_tieng_italia suite26_committee_blend 2145 68 0.031702 0.226282 0.842795 0.028923 0.032329 0.062341 0.030639 0.135514 0.426471 0.205674 0.298354 0.118012 0.558824 0.194872 0.319865 0.097902 0.617647 0.169014 0.299572 0.087687 0.691176 0.155629 0.290842 3 khoa_tieng_italia suite26_joint_head 2145 68 0.031702 0.353009 0.929621 0.025533 0.025878 0.052731 0.021030 0.233645 0.735294 0.354610 0.514403 0.177019 0.838235 0.292308 0.479798 0.149184 0.941176 0.257545 0.456491 0.119403 0.941176 0.211921 0.396040 3 khoa_tieng_italia suite26_tair 2145 68 0.031702 0.202799 0.861965 0.030292 0.024820 0.056521 0.024820 0.163551 0.514706 0.248227 0.360082 0.121118 0.573529 0.200000 0.328283 0.102564 0.647059 0.177062 0.313837 0.089552 0.705882 0.158940 0.297030 3 khoa_tieng_italia suite26_tree 2145 68 0.031702 0.203922 0.885330 0.032438 0.036312 0.068013 0.036312 0.149533 0.470588 0.226950 0.329218 0.139752 0.661765 0.230769 0.378788 0.128205 0.808824 0.221328 0.392297 0.110075 0.867647 0.195364 0.365099 3 khoa_tieng_italia suite26_tree_memory 2145 68 0.031702 0.207192 0.866305 0.030057 0.023387 0.055088 0.023387 0.163551 0.514706 0.248227 0.360082 0.133540 0.632353 0.220513 0.361953 0.107226 0.676471 0.185111 0.328103 0.089552 0.705882 0.158940 0.297030 3 khoa_tieng_nga committee 1996 92 0.046092 0.421984 0.931432 0.034452 0.035830 0.069994 0.023902 0.340000 0.739130 0.465753 0.598592 0.250836 0.815217 0.383632 0.562219 0.197995 0.858696 0.321792 0.514993 0.162325 0.880435 0.274112 0.467128 3 khoa_tieng_nga suite14 1996 92 0.046092 0.430375 0.921144 0.039912 0.041027 0.086314 0.040222 0.280000 0.608696 0.383562 0.492958 0.237458 0.771739 0.363171 0.532234 0.190476 0.826087 0.309572 0.495437 0.166333 0.902174 0.280880 0.478662 3 khoa_tieng_nga suite16 1996 92 0.046092 0.424612 0.932653 0.098656 0.210658 0.256751 0.210658 0.310000 0.673913 0.424658 0.545775 0.250836 0.815217 0.383632 0.562219 0.203008 0.880435 0.329939 0.528031 0.170341 0.923913 0.287648 0.490196 3 khoa_tieng_nga suite17 1996 92 0.046092 0.424649 0.933858 0.035079 0.044946 0.069618 0.023526 0.350000 0.760870 0.479452 0.616197 0.254181 0.826087 0.388747 0.569715 0.208020 0.902174 0.338086 0.541069 0.168337 0.913043 0.284264 0.484429 3 khoa_tieng_nga suite18 1996 92 0.046092 0.419681 0.935079 0.034986 0.040758 0.069761 0.023669 0.345000 0.750000 0.472603 0.607394 0.257525 0.836957 0.393862 0.577211 0.200501 0.869565 0.325866 0.521512 0.168337 0.913043 0.284264 0.484429 3 khoa_tieng_nga suite20 1996 92 0.046092 0.380608 0.931626 0.083794 0.089171 0.135263 0.089171 0.310000 0.673913 0.424658 0.545775 0.237458 0.771739 0.363171 0.532234 0.200501 0.869565 0.325866 0.521512 0.174349 0.945652 0.294416 0.501730 3 khoa_tieng_nga suite21 1996 92 0.046092 0.456810 0.942284 0.033091 0.038008 0.070874 0.024782 0.345000 0.750000 0.472603 0.607394 0.254181 0.826087 0.388747 0.569715 0.208020 0.902174 0.338086 0.541069 0.172345 0.934783 0.291032 0.495963 3 khoa_tieng_nga suite22 1996 92 0.046092 0.467471 0.943745 0.032052 0.022979 0.053061 0.006969 0.355000 0.771739 0.486301 0.625000 0.270903 0.880435 0.414322 0.607196 0.208020 0.902174 0.338086 0.541069 0.172345 0.934783 0.291032 0.495963 3 khoa_tieng_nga suite22_primary 1996 92 0.046092 0.543715 0.945955 0.030258 0.010046 0.036047 -0.010046 0.355000 0.771739 0.486301 0.625000 0.270903 0.880435 0.414322 0.607196 0.208020 0.902174 0.338086 0.541069 0.170341 0.923913 0.287648 0.490196 3 khoa_tieng_nga suite22_relational 1996 92 0.046092 0.458311 0.929656 0.032843 0.010782 0.049031 0.002939 0.325000 0.706522 0.445205 0.572183 0.267559 0.869565 0.409207 0.599700 0.208020 0.902174 0.338086 0.541069 0.172345 0.934783 0.291032 0.495963 3 khoa_tieng_nga suite23 1996 92 0.046092 0.448413 0.937882 0.033438 0.035023 0.067647 0.021555 0.350000 0.760870 0.479452 0.616197 0.257525 0.836957 0.393862 0.577211 0.203008 0.880435 0.329939 0.528031 0.168337 0.913043 0.284264 0.484429 3 khoa_tieng_nga suite23_graph 1996 92 0.046092 0.468971 0.933418 0.033085 0.035772 0.067372 0.021279 0.345000 0.750000 0.472603 0.607394 0.244147 0.793478 0.373402 0.547226 0.205514 0.891304 0.334012 0.534550 0.168337 0.913043 0.284264 0.484429 3 khoa_tieng_nga suite24 1996 92 0.046092 0.420392 0.931363 0.034633 0.037547 0.077335 0.031243 0.315000 0.684783 0.431507 0.554577 0.244147 0.793478 0.373402 0.547226 0.200501 0.869565 0.325866 0.521512 0.168337 0.913043 0.284264 0.484429 3 khoa_tieng_nga suite24_posthoc 1996 92 0.046092 0.445741 0.939464 0.033296 0.029500 0.060650 0.014558 0.345000 0.750000 0.472603 0.607394 0.257525 0.836957 0.393862 0.577211 0.203008 0.880435 0.329939 0.528031 0.168337 0.913043 0.284264 0.484429 3 khoa_tieng_nga suite25 1996 92 0.046092 0.374895 0.928703 0.034994 0.035613 0.077637 0.031544 0.325000 0.706522 0.445205 0.572183 0.250836 0.815217 0.383632 0.562219 0.210526 0.913043 0.342159 0.547588 0.170341 0.923913 0.287648 0.490196 3 khoa_tieng_nga suite25_blend 1996 92 0.046092 0.439819 0.935137 0.033712 0.037839 0.069432 0.023340 0.345000 0.750000 0.472603 0.607394 0.257525 0.836957 0.393862 0.577211 0.200501 0.869565 0.325866 0.521512 0.166333 0.902174 0.280880 0.478662 3 khoa_tieng_nga suite26_committee_blend 1996 92 0.046092 0.446320 0.934583 0.033560 0.035966 0.069417 0.023325 0.350000 0.760870 0.479452 0.616197 0.250836 0.815217 0.383632 0.562219 0.197995 0.858696 0.321792 0.514993 0.162325 0.880435 0.274112 0.467128 3 khoa_tieng_nga suite26_joint_head 1996 92 0.046092 0.557954 0.942906 0.031153 0.035834 0.078038 0.031946 0.360000 0.782609 0.493151 0.633803 0.264214 0.858696 0.404092 0.592204 0.208020 0.902174 0.338086 0.541069 0.170341 0.923913 0.287648 0.490196 3 khoa_tieng_nga suite26_tair 1996 92 0.046092 0.582557 0.927638 0.031107 0.042445 0.077897 0.031805 0.335000 0.728261 0.458904 0.589789 0.230769 0.750000 0.352941 0.517241 0.175439 0.760870 0.285132 0.456323 0.148297 0.804348 0.250423 0.426759 3 khoa_tieng_nga suite26_tree 1996 92 0.046092 0.516331 0.934511 0.035418 0.044953 0.085687 0.039595 0.355000 0.771739 0.486301 0.625000 0.260870 0.847826 0.398977 0.584708 0.203008 0.880435 0.329939 0.528031 0.170341 0.923913 0.287648 0.490196 3 khoa_tieng_nga suite26_tree_memory 1996 92 0.046092 0.588804 0.925320 0.031196 0.039664 0.076572 0.030480 0.325000 0.706522 0.445205 0.572183 0.227425 0.739130 0.347826 0.509745 0.172932 0.750000 0.281059 0.449804 0.148297 0.804348 0.250423 0.426759 3 khoa_tieng_nhat committee 2588 17 0.006569 0.377311 0.940273 0.005765 0.014185 0.018554 0.011985 0.057915 0.882353 0.108696 0.229358 0.038660 0.882353 0.074074 0.164474 0.030888 0.941176 0.059813 0.136519 0.024730 0.941176 0.048193 0.111888 3 khoa_tieng_nhat suite14 2588 17 0.006569 0.357011 0.909237 0.012615 0.041325 0.047667 0.041098 0.034749 0.529412 0.065217 0.137615 0.028351 0.647059 0.054321 0.120614 0.028958 0.882353 0.056075 0.127986 0.023184 0.882353 0.045181 0.104895 3 khoa_tieng_nhat suite16 2588 17 0.006569 0.309216 0.939312 0.022760 0.069478 0.076046 0.069478 0.054054 0.823529 0.101449 0.214067 0.038660 0.882353 0.074074 0.164474 0.028958 0.882353 0.056075 0.127986 0.023184 0.882353 0.045181 0.104895 3 khoa_tieng_nhat suite17 2588 17 0.006569 0.374713 0.937310 0.006397 0.017579 0.022973 0.016405 0.057915 0.882353 0.108696 0.229358 0.038660 0.882353 0.074074 0.164474 0.028958 0.882353 0.056075 0.127986 0.024730 0.941176 0.048193 0.111888 3 khoa_tieng_nhat suite18 2588 17 0.006569 0.374306 0.936006 0.006289 0.016597 0.022309 0.015741 0.057915 0.882353 0.108696 0.229358 0.038660 0.882353 0.074074 0.164474 0.028958 0.882353 0.056075 0.127986 0.024730 0.941176 0.048193 0.111888 3 khoa_tieng_nhat suite20 2588 17 0.006569 0.180518 0.924337 0.041997 0.056645 0.063214 0.056645 0.046332 0.705882 0.086957 0.183486 0.036082 0.823529 0.069136 0.153509 0.030888 0.941176 0.059813 0.136519 0.024730 0.941176 0.048193 0.111888 3 khoa_tieng_nhat suite21 2588 17 0.006569 0.362570 0.940399 0.005590 0.013074 0.017806 0.011237 0.057915 0.882353 0.108696 0.229358 0.038660 0.882353 0.074074 0.164474 0.030888 0.941176 0.059813 0.136519 0.024730 0.941176 0.048193 0.111888 3 khoa_tieng_nhat suite22 2588 17 0.006569 0.334171 0.940696 0.005471 0.007009 0.011833 0.005265 0.057915 0.882353 0.108696 0.229358 0.041237 0.941176 0.079012 0.175439 0.030888 0.941176 0.059813 0.136519 0.024730 0.941176 0.048193 0.111888 3 khoa_tieng_nhat suite22_primary 2588 17 0.006569 0.277747 0.935113 0.005556 0.003030 0.005734 -0.000835 0.054054 0.823529 0.101449 0.214067 0.038660 0.882353 0.074074 0.164474 0.030888 0.941176 0.059813 0.136519 0.024730 0.941176 0.048193 0.111888 ============================================================================================================================================================================================== SUITE26 TARGET FOLD 4 ============================================================================================================================================================================================== [DATA] history=376,999 fail=7,598 (2.02%) train=254,508 validation=122,491 target=41,376 fail=1,100 (2.66%) [TREE] fitting selection tree on older training blocks only... [TREE] selection summary={'n_trees': 96, 'leaf_vocab_size': 73729, 'mean_leaves_per_tree': 768.0, 'min_leaves_per_tree': 768, 'max_leaves_per_tree': 768, 'training_oob_ap': 0.5262798638315697} [TREE-HISTORY-SEL] 50,000/376,999 [TREE-HISTORY-SEL] 100,000/376,999 [TREE-HISTORY-SEL] 150,000/376,999 [TREE-HISTORY-SEL] 200,000/376,999 [TREE-HISTORY-SEL] 250,000/376,999 [TREE-HISTORY-SEL] 300,000/376,999 [TREE-HISTORY-SEL] 350,000/376,999 [TREE-HISTORY-SEL] 376,999/376,999 [TREE] calibration a=0.8788 b=-1.9182 validation macroAP=0.2623 training_OOB_AP=0.5262798638315697 [HISTORY STORE] selection phase (memory candidates restricted to training partition)... [HISTORY STORE] 50,000/376,999 [HISTORY STORE] 100,000/376,999 [HISTORY STORE] 150,000/376,999 [HISTORY STORE] 200,000/376,999 [HISTORY STORE] 250,000/376,999 [HISTORY STORE] 300,000/376,999 [HISTORY STORE] 350,000/376,999 FOLD 4 SELECTION STUDENT-HISTORY SUPPORT -------------------------------------------------------------------------------- faculty rows prevalence history_mean history_zero_rate history_failure_mean same_course_history_mean course_seen_mean new_course_rate history_grade_present_rate khoa_cong_nghe_thong_tin 35187 0.032256 8.368147 0.375821 0.107256 0.000028 815.972547 0.050416 1.0 khoa_quan_tri_kinh_doanh_va_du_lich 52130 0.029599 9.208709 0.229925 0.143411 0.000019 1253.598734 0.012085 1.0 khoa_quoc_te_hoc 17562 0.009908 7.566450 0.387712 0.025737 0.000000 785.828038 0.059503 1.0 khoa_tieng_anh 71769 0.016609 11.265407 0.233708 0.032326 0.000000 1025.591272 0.048154 1.0 khoa_tieng_bo_dao_nha 6633 0.035127 10.495553 0.301673 0.146842 0.000000 855.606965 0.016131 1.0 khoa_tieng_duc 16585 0.019174 10.589147 0.307808 0.046367 0.000000 929.407356 0.012059 1.0 khoa_tieng_han_quoc 26578 0.006246 11.058846 0.290955 0.022236 0.000000 901.906351 0.059410 1.0 khoa_tieng_italia 16985 0.033912 11.063762 0.279894 0.122520 0.000000 867.306447 0.030439 1.0 khoa_tieng_nga 11759 0.046518 9.894124 0.366698 0.178587 0.000000 917.818352 0.018794 1.0 khoa_tieng_nhat 26919 0.009064 10.859876 0.323378 0.030239 0.000000 969.274007 0.014005 1.0 khoa_tieng_phap 22768 0.013308 10.458407 0.310040 0.041286 0.000000 877.078707 0.017525 1.0 khoa_tieng_tay_ban_nha 12085 0.027224 10.877120 0.297807 0.097973 0.000000 846.800248 0.030782 1.0 khoa_tieng_trung_quoc 52678 0.007574 10.654562 0.287691 0.027070 0.000000 1056.291583 0.054957 1.0 khoa_viet_nam_hoc 7361 0.059639 8.226464 0.335145 0.293574 0.000000 176.522891 0.009374 1.0 ------------------------------------------------------------------------------------------------------------------------------------------------------ [VARIANT suite26_tree_memory] [SELECT MEMORY] epoch=01/12 loss=0.11227 BCE=0.08438 rank=0.12397 joint=0.05020 ability=0.00000 macroAP=0.2225 F2@20=0.2617 Brier=0.0304 best=01 [SELECT MEMORY] epoch=02/12 loss=0.10591 BCE=0.08389 rank=0.09610 joint=0.03757 ability=0.00000 macroAP=0.2273 F2@20=0.2625 Brier=0.0303 best=02 [SELECT MEMORY] epoch=03/12 loss=0.09708 BCE=0.07969 rank=0.07065 joint=0.02955 ability=0.00000 macroAP=0.2236 F2@20=0.2617 Brier=0.0304 best=02 [SELECT MEMORY] epoch=04/12 loss=0.09309 BCE=0.07818 rank=0.05707 joint=0.02542 ability=0.00000 macroAP=0.2265 F2@20=0.2617 Brier=0.0304 best=02 [SELECT MEMORY] epoch=05/12 loss=0.09185 BCE=0.07816 rank=0.05295 joint=0.02306 ability=0.00000 macroAP=0.2227 F2@20=0.2617 Brier=0.0304 best=02 ------------------------------------------------------------------------------------------------------------------------------------------------------ [VARIANT suite26_tair] [SELECT TAIR] epoch=01/12 loss=0.11741 BCE=0.08443 rank=0.12732 joint=0.05269 ability=0.08425 macroAP=0.2233 F2@20=0.2628 Brier=0.0303 best=01 [SELECT TAIR] epoch=02/12 loss=0.11618 BCE=0.08598 rank=0.12226 joint=0.04493 ability=0.07241 macroAP=0.2236 F2@20=0.2630 Brier=0.0303 best=02 [SELECT TAIR] epoch=03/12 loss=0.10629 BCE=0.08234 rank=0.08787 joint=0.03605 ability=0.06545 macroAP=0.2226 F2@20=0.2620 Brier=0.0304 best=02 [SELECT TAIR] epoch=04/12 loss=0.09774 BCE=0.07913 rank=0.05880 joint=0.02817 ability=0.05890 macroAP=0.2251 F2@20=0.2624 Brier=0.0304 best=04 [SELECT TAIR] epoch=05/12 loss=0.09591 BCE=0.07833 rank=0.05653 joint=0.02538 ability=0.05460 macroAP=0.2238 F2@20=0.2617 Brier=0.0304 best=04 [SELECT TAIR] epoch=06/12 loss=0.09438 BCE=0.07785 rank=0.05135 joint=0.02320 ability=0.05426 macroAP=0.2219 F2@20=0.2616 Brier=0.0306 best=04 [SELECT TAIR] epoch=07/12 loss=0.09305 BCE=0.07711 rank=0.05077 joint=0.02191 ability=0.05164 macroAP=0.2263 F2@20=0.2619 Brier=0.0309 best=07 [SELECT TAIR] epoch=08/12 loss=0.09257 BCE=0.07703 rank=0.05064 joint=0.02081 ability=0.05079 macroAP=0.2295 F2@20=0.2617 Brier=0.0305 best=08 [SELECT TAIR] epoch=09/12 loss=0.09145 BCE=0.07654 rank=0.04942 joint=0.01901 ability=0.04967 macroAP=0.2278 F2@20=0.2616 Brier=0.0306 best=08 [SELECT TAIR] epoch=10/12 loss=0.09080 BCE=0.07640 rank=0.04708 joint=0.01836 ability=0.04817 macroAP=0.2242 F2@20=0.2617 Brier=0.0304 best=08 [SELECT TAIR] epoch=11/12 loss=0.08893 BCE=0.07486 rank=0.04451 joint=0.01757 ability=0.04760 macroAP=0.2314 F2@20=0.2616 Brier=0.0304 best=11 [SELECT TAIR] epoch=12/12 loss=0.08864 BCE=0.07577 rank=0.03818 joint=0.01665 ability=0.04637 macroAP=0.2228 F2@20=0.2617 Brier=0.0304 best=11 [COMMITTEE BLEND ABLATION] selected alpha=0.50 policyAP=0.3188 policyF2=0.3215 [TREE] fitting production tree on all permissible history... [TREE] production summary={'n_trees': 96, 'leaf_vocab_size': 73729, 'mean_leaves_per_tree': 768.0, 'min_leaves_per_tree': 768, 'max_leaves_per_tree': 768, 'training_oob_ap': 0.4111635127118629} [TREE-HISTORY-PROD] 50,000/376,999 [TREE-HISTORY-PROD] 100,000/376,999 [TREE-HISTORY-PROD] 150,000/376,999 [TREE-HISTORY-PROD] 200,000/376,999 [TREE-HISTORY-PROD] 250,000/376,999 [TREE-HISTORY-PROD] 300,000/376,999 [TREE-HISTORY-PROD] 350,000/376,999 [TREE-HISTORY-PROD] 376,999/376,999 [TREE-TARGET-PROD] 41,376/41,376 [HISTORY STORE] production history... [HISTORY STORE] 50,000/376,999 [HISTORY STORE] 100,000/376,999 [HISTORY STORE] 150,000/376,999 [HISTORY STORE] 200,000/376,999 [HISTORY STORE] 250,000/376,999 [HISTORY STORE] 300,000/376,999 [HISTORY STORE] 350,000/376,999 [HISTORY STORE] production target... FOLD 4 TARGET STUDENT-HISTORY SUPPORT -------------------------------------------------------------------------------- faculty rows prevalence history_mean history_zero_rate history_failure_mean same_course_history_mean course_seen_mean new_course_rate history_grade_present_rate fold khoa_cong_nghe_thong_tin 5072 0.048107 15.150237 0.002169 0.247831 0.000000 1003.122043 0.039432 1.0 4 khoa_quan_tri_kinh_doanh_va_du_lich 6440 0.037422 12.765373 0.002795 0.264596 0.000000 1420.512733 0.023913 1.0 4 khoa_quoc_te_hoc 2202 0.015895 14.110354 0.007266 0.061308 0.000000 1033.341508 0.084923 1.0 4 khoa_tieng_anh 6636 0.010247 16.213532 0.027125 0.047920 0.000151 1113.740808 0.118143 1.0 4 khoa_tieng_bo_dao_nha 869 0.073648 17.965478 0.001151 0.563867 0.000000 1074.139241 0.065593 1.0 4 khoa_tieng_duc 1746 0.025200 18.759450 0.004582 0.222222 0.000000 1009.792096 0.053837 1.0 4 khoa_tieng_han_quoc 3351 0.011340 17.250373 0.020591 0.089824 0.000000 1166.204417 0.088630 1.0 4 khoa_tieng_italia 1795 0.018942 19.078552 0.000000 0.137604 0.000557 1010.030641 0.183287 1.0 4 khoa_tieng_nga 1659 0.068716 16.852923 0.001808 0.458107 0.000000 1166.962025 0.200121 1.0 4 khoa_tieng_nhat 2413 0.015748 16.651471 0.001658 0.066722 0.000000 1406.732283 0.070452 1.0 4 khoa_tieng_phap 2275 0.008352 16.243077 0.000000 0.096703 0.000000 1140.031209 0.157802 1.0 4 khoa_tieng_tay_ban_nha 1306 0.029862 16.735835 0.000000 0.429556 0.000000 1020.066616 0.118683 1.0 4 khoa_tieng_trung_quoc 5107 0.020364 16.345604 0.032896 0.081065 0.000000 948.604856 0.198943 1.0 4 khoa_viet_nam_hoc 505 0.035644 12.207921 0.000000 0.170297 0.000000 203.655446 0.142574 1.0 4 [REFIT MEMORY] epoch=01/2 loss=0.14718 BCE=0.11359 rank=0.15504 joint=0.05991 ability=0.00000 [REFIT MEMORY] epoch=02/2 loss=0.14015 BCE=0.11153 rank=0.13364 joint=0.04776 ability=0.00000 [VARIANT suite26_tree_memory] selected_epochs=2 target macroAP=0.3627 [REFIT TAIR] epoch=01/11 loss=0.15312 BCE=0.11440 rank=0.15433 joint=0.06301 ability=0.09181 [REFIT TAIR] epoch=11/11 loss=0.12096 BCE=0.10429 rank=0.05289 joint=0.02277 ability=0.05443 [VARIANT suite26_tair] selected_epochs=11 target macroAP=0.3358 FOLD 4 TREE CURRENT-STATE FEATURE IMPORTANCE -------------------------------------------------------------------------------- rank feature importance fold 1 hist_course_pass_rate 0.068307 4 2 prev_semester_gpa10 0.063276 4 3 course_status_FIT ||| ứng_dụng_công_nghệ_thông_tin ||| Computer Skills 0.056767 4 4 prev_cumulative_gpa10 0.052496 4 5 recent3_semester_gpa10_mean 0.040821 4 6 prev_failed_credits 0.032721 4 7 recent3_course_grade10_mean 0.029235 4 8 hist_component_K2_mean 0.025672 4 9 hist_semester_gpa10_mean 0.024860 4 10 prev_outstanding_failed_credits 0.020038 4 11 hist_course_grade10_mean 0.018964 4 12 hist_passed_credits_sum 0.018428 4 13 recent3_course_grade10_min 0.015446 4 14 hist_course_grade10_median 0.014056 4 15 hist_warning_in_last_semester 0.013767 4 16 recent3_component_grade_mean 0.013676 4 17 recent3_course_grade10_std 0.012916 4 18 target_semester_registered_credits 0.012869 4 19 hist_course_grade10_std 0.010637 4 20 recent3_component_grade_std 0.010062 4 21 hist_component_grade_mean 0.009339 4 22 hist_failed_credits_sum 0.009012 4 23 target_semester_difficulty_weighted_workload 0.008995 4 24 recent3_course_grade10_count 0.008917 4 25 recent3_course_grade10_median 0.008865 4 26 hist_component_T1_special_count 0.008625 4 27 hist_component_T1_count 0.008121 4 28 hist_cumulative_gpa10_mean 0.007863 4 29 hist_component_courses 0.007630 4 30 recent3_warning_count 0.007355 4 31 hist_warning_rate 0.007352 4 32 recent3_semester_count 0.006792 4 33 hist_component_low_rate 0.006774 4 34 prev_ssvhk_semester_ordinal 0.006771 4 35 prev_passed_credits 0.006732 4 36 hist_registered_credits_mean 0.006378 4 37 student_prior_course_count_log 0.006375 4 38 hist_course_grade10_max 0.006336 4 39 hist_course_grade10_min 0.006313 4 40 reg_last_days_from_open 0.006302 4 SUITE26 TARGET FOLD 4 — NEW + AVAILABLE REFERENCE RESULTS -------------------------------------------------------------------------------- fold faculty model rows failures prevalence ap auc brier ece10 mean_score calibration_gap precision_at_10 recall_at_10 f1_at_10 fbeta_at_10 precision_at_15 recall_at_15 f1_at_15 fbeta_at_15 precision_at_20 recall_at_20 f1_at_20 fbeta_at_20 precision_at_25 recall_at_25 f1_at_25 fbeta_at_25 4 khoa_cong_nghe_thong_tin committee 5072 244 0.048107 0.378777 0.887995 0.037427 0.017945 0.056748 0.008641 0.287968 0.598361 0.388815 0.492245 0.235217 0.733607 0.356219 0.515256 0.189349 0.786885 0.305246 0.482412 0.162461 0.844262 0.272487 0.459002 4 khoa_cong_nghe_thong_tin council 5072 244 0.048107 0.414418 0.903728 0.036559 0.023658 0.070543 0.022436 0.311637 0.647541 0.420772 0.532704 0.237845 0.741803 0.360199 0.521013 0.198225 0.823770 0.319555 0.505025 0.167192 0.868852 0.280423 0.472371 4 khoa_cong_nghe_thong_tin suite14 5072 244 0.048107 0.378777 0.887995 0.037427 0.017945 0.056748 0.008641 0.287968 0.598361 0.388815 0.492245 0.235217 0.733607 0.356219 0.515256 0.189349 0.786885 0.305246 0.482412 0.162461 0.844262 0.272487 0.459002 4 khoa_cong_nghe_thong_tin suite16 5072 244 0.048107 0.385248 0.893210 0.045897 0.060652 0.108760 0.060652 0.291913 0.606557 0.394141 0.498989 0.235217 0.733607 0.356219 0.515256 0.196252 0.815574 0.316375 0.500000 0.164038 0.852459 0.275132 0.463458 4 khoa_cong_nghe_thong_tin suite17 5072 244 0.048107 0.387517 0.895507 0.036382 0.016993 0.060573 0.012466 0.295858 0.614754 0.399467 0.505732 0.235217 0.733607 0.356219 0.515256 0.198225 0.823770 0.319555 0.505025 0.165615 0.860656 0.277778 0.467914 4 khoa_cong_nghe_thong_tin suite18 5072 244 0.048107 0.388248 0.896229 0.036372 0.014992 0.060887 0.012780 0.295858 0.614754 0.399467 0.505732 0.233903 0.729508 0.354229 0.512378 0.196252 0.815574 0.316375 0.500000 0.163249 0.848361 0.273810 0.461230 4 khoa_cong_nghe_thong_tin suite20 5072 244 0.048107 0.296976 0.861361 0.095693 0.149447 0.197554 0.149447 0.260355 0.540984 0.351531 0.445044 0.207622 0.647541 0.314428 0.454807 0.168639 0.700820 0.271860 0.429648 0.145899 0.758197 0.244709 0.412210 4 khoa_cong_nghe_thong_tin suite21 5072 244 0.048107 0.388536 0.893152 0.036970 0.012038 0.055940 0.007833 0.287968 0.598361 0.388815 0.492245 0.228647 0.713115 0.346269 0.500864 0.190335 0.790984 0.306836 0.484925 0.163249 0.848361 0.273810 0.461230 4 khoa_cong_nghe_thong_tin suite22 5072 244 0.048107 0.399243 0.897276 0.036307 0.016298 0.051045 0.002938 0.305720 0.635246 0.412783 0.522589 0.239159 0.745902 0.362189 0.523892 0.194280 0.807377 0.313196 0.494975 0.164038 0.852459 0.275132 0.463458 4 khoa_cong_nghe_thong_tin suite22_primary 5072 244 0.048107 0.378661 0.881782 0.036795 0.004919 0.044225 -0.003882 0.285996 0.594262 0.386152 0.488874 0.218134 0.680328 0.330348 0.477835 0.179487 0.745902 0.289348 0.457286 0.157729 0.819672 0.264550 0.445633 4 khoa_cong_nghe_thong_tin suite22_relational 5072 244 0.048107 0.339791 0.860343 0.038752 0.022547 0.027585 -0.020522 0.246548 0.512295 0.332889 0.421443 0.195795 0.610656 0.296517 0.428900 0.160750 0.668033 0.259141 0.409548 0.147476 0.766393 0.247354 0.416667 4 khoa_cong_nghe_thong_tin suite23 5072 244 0.048107 0.407552 0.898207 0.036349 0.015804 0.049194 0.001087 0.299803 0.622951 0.404794 0.512475 0.231275 0.721311 0.350249 0.506621 0.192308 0.799180 0.310016 0.489950 0.163249 0.848361 0.273810 0.461230 4 khoa_cong_nghe_thong_tin suite23_graph 5072 244 0.048107 0.342413 0.866389 0.038784 0.016898 0.049016 0.000909 0.266272 0.553279 0.359521 0.455158 0.212878 0.663934 0.322388 0.466321 0.172584 0.717213 0.278219 0.439698 0.150631 0.782787 0.252646 0.425579 4 khoa_cong_nghe_thong_tin suite24 5072 244 0.048107 0.380217 0.889591 0.037151 0.009468 0.046878 -0.001229 0.291913 0.606557 0.394141 0.498989 0.233903 0.729508 0.354229 0.512378 0.193294 0.803279 0.311606 0.492462 0.167192 0.868852 0.280423 0.472371 4 khoa_cong_nghe_thong_tin suite24_posthoc 5072 244 0.048107 0.387963 0.890068 0.036884 0.008792 0.044235 -0.003873 0.280079 0.581967 0.378162 0.478759 0.227332 0.709016 0.344279 0.497985 0.189349 0.786885 0.305246 0.482412 0.163249 0.848361 0.273810 0.461230 4 khoa_cong_nghe_thong_tin suite25 5072 244 0.048107 0.406807 0.866577 0.037310 0.039985 0.083176 0.035069 0.284024 0.590164 0.383489 0.485502 0.207622 0.647541 0.314428 0.454807 0.173570 0.721311 0.279809 0.442211 0.149054 0.774590 0.250000 0.421123 4 khoa_cong_nghe_thong_tin suite25_blend 5072 244 0.048107 0.412275 0.894115 0.035743 0.021235 0.064743 0.016635 0.309665 0.643443 0.418109 0.529332 0.231275 0.721311 0.350249 0.506621 0.190335 0.790984 0.306836 0.484925 0.160095 0.831967 0.268519 0.452317 4 khoa_cong_nghe_thong_tin suite26_committee_blend 5072 244 0.048107 0.355554 0.879324 0.037736 0.008182 0.049907 0.001800 0.260355 0.540984 0.351531 0.445044 0.218134 0.680328 0.330348 0.477835 0.187377 0.778689 0.302067 0.477387 0.159306 0.827869 0.267196 0.450089 4 khoa_cong_nghe_thong_tin suite26_joint_head 5072 244 0.048107 0.328559 0.824790 0.039619 0.022362 0.026434 -0.021673 0.216963 0.450820 0.292943 0.370870 0.182654 0.569672 0.276617 0.400115 0.153846 0.639344 0.248013 0.391960 0.134069 0.696721 0.224868 0.378788 4 khoa_cong_nghe_thong_tin suite26_tair 5072 244 0.048107 0.309774 0.847146 0.039487 0.009691 0.046995 -0.001112 0.218935 0.454918 0.295606 0.374241 0.173456 0.540984 0.262687 0.379965 0.152860 0.635246 0.246423 0.389447 0.140379 0.729508 0.235450 0.396613 4 khoa_cong_nghe_thong_tin suite26_tree 5072 244 0.048107 0.259337 0.840879 0.046526 0.043365 0.091472 0.043365 0.214990 0.446721 0.290280 0.367498 0.168200 0.524590 0.254726 0.368451 0.147929 0.614754 0.238474 0.376884 0.137224 0.713115 0.230159 0.387701 4 khoa_cong_nghe_thong_tin suite26_tree_memory 5072 244 0.048107 0.339086 0.867863 0.038876 0.012914 0.060433 0.012325 0.262327 0.545082 0.354194 0.448415 0.210250 0.655738 0.318408 0.460564 0.171598 0.713115 0.276630 0.437186 0.149842 0.778689 0.251323 0.423351 4 khoa_cong_nghe_thong_tin v2 5072 244 0.048107 0.393242 0.892005 0.088444 0.168180 0.216287 0.168180 0.293886 0.610656 0.396804 0.502360 0.227332 0.709016 0.344279 0.497985 0.189349 0.786885 0.305246 0.482412 0.160883 0.836066 0.269841 0.454545 4 khoa_quan_tri_kinh_doanh_va_du_lich committee 6440 241 0.037422 0.432508 0.920474 0.027709 0.021085 0.058019 0.020596 0.271739 0.726141 0.395480 0.544154 0.201863 0.809129 0.323115 0.505181 0.163043 0.871369 0.274689 0.466252 0.133540 0.892116 0.232307 0.417638 4 khoa_quan_tri_kinh_doanh_va_du_lich suite14 6440 241 0.037422 0.432508 0.920474 0.027709 0.021085 0.058019 0.020596 0.271739 0.726141 0.395480 0.544154 0.201863 0.809129 0.323115 0.505181 0.163043 0.871369 0.274689 0.466252 0.133540 0.892116 0.232307 0.417638 4 khoa_quan_tri_kinh_doanh_va_du_lich suite16 6440 241 0.037422 0.442292 0.927777 0.042402 0.078336 0.115759 0.078336 0.277950 0.742739 0.404520 0.556592 0.208075 0.834025 0.333057 0.520725 0.164596 0.879668 0.277305 0.470693 0.137267 0.917012 0.238790 0.429293 4 khoa_quan_tri_kinh_doanh_va_du_lich suite17 6440 241 0.037422 0.443585 0.929220 0.028190 0.026084 0.062501 0.025079 0.282609 0.755187 0.411299 0.565920 0.207039 0.829876 0.331400 0.518135 0.163043 0.871369 0.274689 0.466252 0.134783 0.900415 0.234468 0.421523 4 khoa_quan_tri_kinh_doanh_va_du_lich suite18 6440 241 0.037422 0.443761 0.929665 0.028241 0.027026 0.062986 0.025564 0.282609 0.755187 0.411299 0.565920 0.207039 0.829876 0.331400 0.518135 0.163043 0.871369 0.274689 0.466252 0.136025 0.908714 0.236629 0.425408 4 khoa_quan_tri_kinh_doanh_va_du_lich suite20 6440 241 0.037422 0.269802 0.897731 0.106162 0.162863 0.200286 0.162863 0.226708 0.605809 0.329944 0.453980 0.174948 0.701245 0.280033 0.437824 0.145186 0.775934 0.244604 0.415187 0.129193 0.863071 0.224743 0.404040 4 khoa_quan_tri_kinh_doanh_va_du_lich suite21 6440 241 0.037422 0.438791 0.925347 0.027500 0.020974 0.058020 0.020598 0.273292 0.730290 0.397740 0.547264 0.207039 0.829876 0.331400 0.518135 0.164596 0.879668 0.277305 0.470693 0.135404 0.904564 0.235548 0.423465 4 khoa_quan_tri_kinh_doanh_va_du_lich suite22 6440 241 0.037422 0.456000 0.930370 0.026676 0.015946 0.052899 0.015477 0.282609 0.755187 0.411299 0.565920 0.208075 0.834025 0.333057 0.520725 0.164596 0.879668 0.277305 0.470693 0.137888 0.921162 0.239870 0.431235 4 khoa_quan_tri_kinh_doanh_va_du_lich suite22_primary 6440 241 0.037422 0.407717 0.933004 0.028158 0.012083 0.049506 0.012083 0.273292 0.730290 0.397740 0.547264 0.203934 0.817427 0.326429 0.510363 0.163820 0.875519 0.275997 0.468472 0.137888 0.921162 0.239870 0.431235 4 khoa_quan_tri_kinh_doanh_va_du_lich suite22_relational 6440 241 0.037422 0.382417 0.929036 0.031323 0.024484 0.061906 0.024484 0.263975 0.705394 0.384181 0.528607 0.203934 0.817427 0.326429 0.510363 0.165373 0.883817 0.278613 0.472913 0.137888 0.921162 0.239870 0.431235 4 khoa_quan_tri_kinh_doanh_va_du_lich suite23 6440 241 0.037422 0.491526 0.939974 0.026477 0.018636 0.041056 0.003634 0.288820 0.771784 0.420339 0.578358 0.212215 0.850622 0.339685 0.531088 0.168478 0.900415 0.283846 0.481794 0.140373 0.937759 0.244192 0.439005 4 khoa_quan_tri_kinh_doanh_va_du_lich suite23_graph 6440 241 0.037422 0.428389 0.930343 0.028980 0.015252 0.033992 -0.003430 0.263975 0.705394 0.384181 0.528607 0.207039 0.829876 0.331400 0.518135 0.164596 0.879668 0.277305 0.470693 0.138509 0.925311 0.240951 0.433178 4 khoa_quan_tri_kinh_doanh_va_du_lich suite24 6440 241 0.037422 0.442857 0.928442 0.026680 0.011726 0.046251 0.008829 0.276398 0.738589 0.402260 0.553483 0.203934 0.817427 0.326429 0.510363 0.164596 0.879668 0.277305 0.470693 0.137267 0.917012 0.238790 0.429293 4 khoa_quan_tri_kinh_doanh_va_du_lich suite24_posthoc 6440 241 0.037422 0.457135 0.936060 0.026759 0.016417 0.042641 0.005219 0.282609 0.755187 0.411299 0.565920 0.210145 0.842324 0.336371 0.525907 0.166149 0.887967 0.279922 0.475133 0.137267 0.917012 0.238790 0.429293 4 khoa_quan_tri_kinh_doanh_va_du_lich suite25 6440 241 0.037422 0.456472 0.911248 0.031347 0.054838 0.090823 0.053401 0.265528 0.709544 0.386441 0.531716 0.191511 0.767635 0.306545 0.479275 0.152174 0.813278 0.256377 0.435169 0.126708 0.846473 0.220421 0.396270 4 khoa_quan_tri_kinh_doanh_va_du_lich suite25_blend 6440 241 0.037422 0.495533 0.925637 0.027004 0.033266 0.068417 0.030994 0.284161 0.759336 0.413559 0.569030 0.199793 0.800830 0.319801 0.500000 0.157609 0.842324 0.265533 0.450710 0.133540 0.892116 0.232307 0.417638 4 khoa_quan_tri_kinh_doanh_va_du_lich suite26_committee_blend 6440 241 0.037422 0.436234 0.916284 0.027279 0.015218 0.048322 0.010900 0.260870 0.697095 0.379661 0.522388 0.200828 0.804979 0.321458 0.502591 0.158385 0.846473 0.266841 0.452931 0.131677 0.879668 0.229065 0.411810 4 khoa_quan_tri_kinh_doanh_va_du_lich suite26_joint_head 6440 241 0.037422 0.471522 0.895594 0.027431 0.010554 0.027538 -0.009884 0.245342 0.655602 0.357062 0.491294 0.190476 0.763485 0.304888 0.476684 0.154503 0.825726 0.260301 0.441829 0.128571 0.858921 0.223663 0.402098 4 khoa_quan_tri_kinh_doanh_va_du_lich suite26_tair 6440 241 0.037422 0.410175 0.898944 0.028238 0.011305 0.042679 0.005257 0.229814 0.614108 0.334463 0.460199 0.183230 0.734440 0.293289 0.458549 0.147516 0.788382 0.248528 0.421847 0.125466 0.838174 0.218260 0.392385 4 khoa_quan_tri_kinh_doanh_va_du_lich suite26_tree 6440 241 0.037422 0.305036 0.895105 0.035102 0.045502 0.082924 0.045502 0.228261 0.609959 0.332203 0.457090 0.183230 0.734440 0.293289 0.458549 0.147516 0.788382 0.248528 0.421847 0.125466 0.838174 0.218260 0.392385 4 khoa_quan_tri_kinh_doanh_va_du_lich suite26_tree_memory 6440 241 0.037422 0.429262 0.911787 0.028317 0.021800 0.057606 0.020184 0.251553 0.672199 0.366102 0.503731 0.192547 0.771784 0.308202 0.481865 0.159161 0.850622 0.268149 0.455151 0.130435 0.871369 0.226904 0.407925 4 khoa_quoc_te_hoc committee 2202 35 0.015895 0.097129 0.880691 0.016323 0.009167 0.025061 0.009167 0.081818 0.514286 0.141176 0.250000 0.066667 0.628571 0.120548 0.234043 0.065909 0.828571 0.122105 0.250000 0.054545 0.857143 0.102564 0.217391 4 khoa_quoc_te_hoc suite14 2202 35 0.015895 0.097129 0.880691 0.016323 0.009167 0.025061 0.009167 0.081818 0.514286 0.141176 0.250000 0.066667 0.628571 0.120548 0.234043 0.065909 0.828571 0.122105 0.250000 0.054545 0.857143 0.102564 0.217391 4 khoa_quoc_te_hoc suite16 2202 35 0.015895 0.105504 0.879161 0.022624 0.037741 0.053635 0.037741 0.072727 0.457143 0.125490 0.222222 0.069697 0.657143 0.126027 0.244681 0.063636 0.800000 0.117895 0.241379 0.054545 0.857143 0.102564 0.217391 4 khoa_quoc_te_hoc suite17 2202 35 0.015895 0.101694 0.890553 0.016091 0.011415 0.027310 0.011415 0.081818 0.514286 0.141176 0.250000 0.078788 0.742857 0.142466 0.276596 0.063636 0.800000 0.117895 0.241379 0.058182 0.914286 0.109402 0.231884 4 khoa_quoc_te_hoc suite18 2202 35 0.015895 0.097812 0.883723 0.016301 0.011726 0.027620 0.011726 0.086364 0.542857 0.149020 0.263889 0.072727 0.685714 0.131507 0.255319 0.059091 0.742857 0.109474 0.224138 0.056364 0.885714 0.105983 0.224638 4 khoa_quoc_te_hoc suite20 2202 35 0.015895 0.100794 0.882458 0.164017 0.222128 0.238022 0.222128 0.090909 0.571429 0.156863 0.277778 0.069697 0.657143 0.126027 0.244681 0.063636 0.800000 0.117895 0.241379 0.052727 0.828571 0.099145 0.210145 4 khoa_quoc_te_hoc suite21 2202 35 0.015895 0.097628 0.890883 0.017242 0.011164 0.027059 0.011164 0.090909 0.571429 0.156863 0.277778 0.072727 0.685714 0.131507 0.255319 0.068182 0.857143 0.126316 0.258621 0.056364 0.885714 0.105983 0.224638 4 khoa_quoc_te_hoc suite22 2202 35 0.015895 0.107635 0.889037 0.015877 0.005750 0.021363 0.005469 0.086364 0.542857 0.149020 0.263889 0.072727 0.685714 0.131507 0.255319 0.063636 0.800000 0.117895 0.241379 0.058182 0.914286 0.109402 0.231884 4 khoa_quoc_te_hoc suite22_primary 2202 35 0.015895 0.100975 0.870407 0.016903 0.009130 0.019408 0.003513 0.086364 0.542857 0.149020 0.263889 0.066667 0.628571 0.120548 0.234043 0.054545 0.685714 0.101053 0.206897 0.047273 0.742857 0.088889 0.188406 4 khoa_quoc_te_hoc suite22_relational 2202 35 0.015895 0.090497 0.855864 0.018111 0.011443 0.023820 0.007925 0.081818 0.514286 0.141176 0.250000 0.060606 0.571429 0.109589 0.212766 0.052273 0.657143 0.096842 0.198276 0.043636 0.685714 0.082051 0.173913 4 khoa_quoc_te_hoc suite23 2202 35 0.015895 0.097129 0.880691 0.016323 0.009167 0.025061 0.009167 0.081818 0.514286 0.141176 0.250000 0.066667 0.628571 0.120548 0.234043 0.065909 0.828571 0.122105 0.250000 0.054545 0.857143 0.102564 0.217391 4 khoa_quoc_te_hoc suite23_graph 2202 35 0.015895 0.106832 0.823561 0.015253 0.011438 0.027210 0.011315 0.081818 0.514286 0.141176 0.250000 0.069697 0.657143 0.126027 0.244681 0.054545 0.685714 0.101053 0.206897 0.047273 0.742857 0.088889 0.188406 4 khoa_quoc_te_hoc suite24 2202 35 0.015895 0.103266 0.886097 0.016067 0.006129 0.022024 0.006129 0.081818 0.514286 0.141176 0.250000 0.075758 0.714286 0.136986 0.265957 0.063636 0.800000 0.117895 0.241379 0.054545 0.857143 0.102564 0.217391 4 khoa_quoc_te_hoc suite24_posthoc 2202 35 0.015895 0.099057 0.881508 0.015337 0.005810 0.021705 0.005810 0.090909 0.571429 0.156863 0.277778 0.066667 0.628571 0.120548 0.234043 0.059091 0.742857 0.109474 0.224138 0.052727 0.828571 0.099145 0.210145 4 khoa_quoc_te_hoc suite25 2202 35 0.015895 0.096448 0.876142 0.016732 0.024130 0.039498 0.023603 0.077273 0.485714 0.133333 0.236111 0.060606 0.571429 0.109589 0.212766 0.065909 0.828571 0.122105 0.250000 0.054545 0.857143 0.102564 0.217391 4 khoa_quoc_te_hoc suite25_blend 2202 35 0.015895 0.115715 0.895062 0.015763 0.013541 0.028290 0.012395 0.100000 0.628571 0.172549 0.305556 0.078788 0.742857 0.142466 0.276596 0.063636 0.800000 0.117895 0.241379 0.058182 0.914286 0.109402 0.231884 4 khoa_quoc_te_hoc suite26_committee_blend 2202 35 0.015895 0.121797 0.875127 0.015361 0.009238 0.024349 0.008454 0.086364 0.542857 0.149020 0.263889 0.060606 0.571429 0.109589 0.212766 0.059091 0.742857 0.109474 0.224138 0.052727 0.828571 0.099145 0.210145 4 khoa_quoc_te_hoc suite26_joint_head 2202 35 0.015895 0.093908 0.760775 0.015143 0.010654 0.010876 -0.005019 0.068182 0.428571 0.117647 0.208333 0.051515 0.485714 0.093151 0.180851 0.045455 0.571429 0.084211 0.172414 0.038182 0.600000 0.071795 0.152174 4 khoa_quoc_te_hoc suite26_tair 2202 35 0.015895 0.125835 0.855244 0.016764 0.012146 0.028041 0.012146 0.072727 0.457143 0.125490 0.222222 0.060606 0.571429 0.109589 0.212766 0.052273 0.657143 0.096842 0.198276 0.045455 0.714286 0.085470 0.181159 4 khoa_quoc_te_hoc suite26_tree 2202 35 0.015895 0.085676 0.843385 0.021942 0.037019 0.052914 0.037019 0.059091 0.371429 0.101961 0.180556 0.051515 0.485714 0.093151 0.180851 0.052273 0.657143 0.096842 0.198276 0.045455 0.714286 0.085470 0.181159 4 khoa_quoc_te_hoc suite26_tree_memory 2202 35 0.015895 0.130935 0.858896 0.017356 0.015691 0.031586 0.015691 0.077273 0.485714 0.133333 0.236111 0.063636 0.600000 0.115068 0.223404 0.052273 0.657143 0.096842 0.198276 0.043636 0.685714 0.082051 0.173913 4 khoa_tieng_anh committee 6636 68 0.010247 0.449701 0.922113 0.007513 0.010167 0.018988 0.008741 0.079819 0.779412 0.144809 0.283120 0.054271 0.794118 0.101599 0.213102 0.042200 0.823529 0.080287 0.175109 0.036166 0.882353 0.069485 0.155360 4 khoa_tieng_anh suite14 6636 68 0.010247 0.484360 0.928595 0.007377 0.010686 0.020110 0.009863 0.079819 0.779412 0.144809 0.283120 0.054271 0.794118 0.101599 0.213102 0.043708 0.852941 0.083154 0.181363 0.036769 0.897059 0.070643 0.157949 4 khoa_tieng_anh suite16 6636 68 0.010247 0.417198 0.916158 0.014352 0.038411 0.048659 0.038411 0.078313 0.764706 0.142077 0.277778 0.053266 0.779412 0.099718 0.209155 0.041447 0.808824 0.078853 0.171982 0.036166 0.882353 0.069485 0.155360 4 khoa_tieng_anh suite17 6636 68 0.010247 0.456514 0.929144 0.008202 0.014501 0.021870 0.011623 0.076807 0.750000 0.139344 0.272436 0.054271 0.794118 0.101599 0.213102 0.042200 0.823529 0.080287 0.175109 0.037372 0.911765 0.071801 0.160539 4 khoa_tieng_anh suite18 6636 68 0.010247 0.459148 0.930781 0.008166 0.014378 0.021983 0.011736 0.076807 0.750000 0.139344 0.272436 0.054271 0.794118 0.101599 0.213102 0.042954 0.838235 0.081720 0.178236 0.035564 0.867647 0.068327 0.152771 4 khoa_tieng_anh suite20 6636 68 0.010247 0.381805 0.926278 0.016485 0.032988 0.043235 0.032988 0.076807 0.750000 0.139344 0.272436 0.055276 0.808824 0.103481 0.217048 0.044461 0.867647 0.084588 0.184490 0.038577 0.941176 0.074117 0.165717 4 khoa_tieng_anh suite21 6636 68 0.010247 0.460794 0.925951 0.007353 0.008698 0.017863 0.007616 0.081325 0.794118 0.147541 0.288462 0.055276 0.808824 0.103481 0.217048 0.042200 0.823529 0.080287 0.175109 0.036769 0.897059 0.070643 0.157949 4 khoa_tieng_anh suite22 6636 68 0.010247 0.490961 0.937294 0.007094 0.005994 0.013786 0.003539 0.078313 0.764706 0.142077 0.277778 0.054271 0.794118 0.101599 0.213102 0.044461 0.867647 0.084588 0.184490 0.037372 0.911765 0.071801 0.160539 4 khoa_tieng_anh suite22_primary 6636 68 0.010247 0.330010 0.947123 0.008053 0.002590 0.009276 -0.000971 0.090361 0.882353 0.163934 0.320513 0.063317 0.926471 0.118532 0.248619 0.047476 0.926471 0.090323 0.196998 0.037975 0.926471 0.072959 0.163128 4 khoa_tieng_anh suite22_relational 6636 68 0.010247 0.357815 0.937025 0.007913 0.002806 0.009900 -0.000347 0.082831 0.808824 0.150273 0.293803 0.057286 0.838235 0.107244 0.224941 0.044461 0.867647 0.084588 0.184490 0.037975 0.926471 0.072959 0.163128 4 khoa_tieng_anh suite23 6636 68 0.010247 0.495981 0.929560 0.007723 0.013107 0.020216 0.009969 0.079819 0.779412 0.144809 0.283120 0.054271 0.794118 0.101599 0.213102 0.042200 0.823529 0.080287 0.175109 0.036166 0.882353 0.069485 0.155360 4 khoa_tieng_anh suite23_graph 6636 68 0.010247 0.214202 0.899634 0.009688 0.020454 0.029531 0.019284 0.075301 0.735294 0.136612 0.267094 0.055276 0.808824 0.103481 0.217048 0.042200 0.823529 0.080287 0.175109 0.033755 0.823529 0.064852 0.145003 4 khoa_tieng_anh suite24 6636 68 0.010247 0.475767 0.926153 0.007143 0.007338 0.015713 0.005465 0.079819 0.779412 0.144809 0.283120 0.054271 0.794118 0.101599 0.213102 0.041447 0.808824 0.078853 0.171982 0.037372 0.911765 0.071801 0.160539 4 khoa_tieng_anh suite24_posthoc 6636 68 0.010247 0.491552 0.921650 0.007477 0.009437 0.015367 0.005120 0.078313 0.764706 0.142077 0.277778 0.055276 0.808824 0.103481 0.217048 0.042200 0.823529 0.080287 0.175109 0.034961 0.852941 0.067169 0.150181 4 khoa_tieng_anh suite25 6636 68 0.010247 0.402178 0.921204 0.007853 0.011532 0.020317 0.010070 0.076807 0.750000 0.139344 0.272436 0.055276 0.808824 0.103481 0.217048 0.045215 0.882353 0.086022 0.187617 0.036769 0.897059 0.070643 0.157949 4 khoa_tieng_anh suite25_blend 6636 68 0.010247 0.458320 0.928839 0.007373 0.008843 0.017143 0.006895 0.079819 0.779412 0.144809 0.283120 0.054271 0.794118 0.101599 0.213102 0.043708 0.852941 0.083154 0.181363 0.037372 0.911765 0.071801 0.160539 4 khoa_tieng_anh suite26_committee_blend 6636 68 0.010247 0.440128 0.927610 0.007716 0.009090 0.017081 0.006834 0.079819 0.779412 0.144809 0.283120 0.054271 0.794118 0.101599 0.213102 0.040693 0.794118 0.077419 0.168856 0.036769 0.897059 0.070643 0.157949 4 khoa_tieng_anh suite26_joint_head 6636 68 0.010247 0.414903 0.814271 0.007794 0.007656 0.014498 0.004251 0.069277 0.676471 0.125683 0.245726 0.046231 0.676471 0.086548 0.181531 0.036925 0.720588 0.070251 0.153221 0.030741 0.750000 0.059062 0.132056 4 khoa_tieng_anh suite26_tair 6636 68 0.010247 0.243797 0.912723 0.009008 0.009497 0.018577 0.008329 0.073795 0.720588 0.133880 0.261752 0.050251 0.735294 0.094073 0.197316 0.039940 0.779412 0.075986 0.165729 0.038577 0.941176 0.074117 0.165717 4 khoa_tieng_anh suite26_tree 6636 68 0.010247 0.257005 0.916613 0.009717 0.018798 0.027879 0.017632 0.073795 0.720588 0.133880 0.261752 0.050251 0.735294 0.094073 0.197316 0.039940 0.779412 0.075986 0.165729 0.038577 0.941176 0.074117 0.165717 4 khoa_tieng_anh suite26_tree_memory 6636 68 0.010247 0.286901 0.935756 0.008852 0.013001 0.022260 0.012013 0.084337 0.823529 0.153005 0.299145 0.059296 0.867647 0.111007 0.232833 0.046722 0.911765 0.088889 0.193871 0.037975 0.926471 0.072959 0.163128 4 khoa_tieng_bo_dao_nha committee 869 64 0.073648 0.656224 0.958521 0.037391 0.021204 0.074782 0.001134 0.574713 0.781250 0.662252 0.728863 0.438462 0.890625 0.587629 0.738342 0.344828 0.937500 0.504202 0.697674 0.285714 0.968750 0.441281 0.655391 4 khoa_tieng_bo_dao_nha suite14 869 64 0.073648 0.656224 0.958521 0.037391 0.021204 0.074782 0.001134 0.574713 0.781250 0.662252 0.728863 0.438462 0.890625 0.587629 0.738342 0.344828 0.937500 0.504202 0.697674 0.285714 0.968750 0.441281 0.655391 4 khoa_tieng_bo_dao_nha suite16 869 64 0.073648 0.643426 0.960637 0.043323 0.052213 0.125861 0.052213 0.586207 0.796875 0.675497 0.743440 0.438462 0.890625 0.587629 0.738342 0.356322 0.968750 0.521008 0.720930 0.285714 0.968750 0.441281 0.655391 4 khoa_tieng_bo_dao_nha suite17 869 64 0.073648 0.657468 0.961607 0.039466 0.032287 0.074429 0.000781 0.586207 0.796875 0.675497 0.743440 0.438462 0.890625 0.587629 0.738342 0.344828 0.937500 0.504202 0.697674 0.285714 0.968750 0.441281 0.655391 4 khoa_tieng_bo_dao_nha suite18 869 64 0.073648 0.657732 0.961762 0.039377 0.031976 0.074678 0.001030 0.574713 0.781250 0.662252 0.728863 0.438462 0.890625 0.587629 0.738342 0.344828 0.937500 0.504202 0.697674 0.285714 0.968750 0.441281 0.655391 4 khoa_tieng_bo_dao_nha suite20 869 64 0.073648 0.410617 0.911258 0.127290 0.155506 0.229154 0.155506 0.356322 0.484375 0.410596 0.451895 0.384615 0.781250 0.515464 0.647668 0.310345 0.843750 0.453782 0.627907 0.253456 0.859375 0.391459 0.581395 4 khoa_tieng_bo_dao_nha suite21 869 64 0.073648 0.660654 0.960578 0.037231 0.021642 0.077528 0.003880 0.563218 0.765625 0.649007 0.714286 0.446154 0.906250 0.597938 0.751295 0.356322 0.968750 0.521008 0.720930 0.285714 0.968750 0.441281 0.655391 4 khoa_tieng_bo_dao_nha suite22 869 64 0.073648 0.645344 0.956483 0.039321 0.019242 0.063078 -0.010570 0.540230 0.734375 0.622517 0.685131 0.423077 0.859375 0.567010 0.712435 0.339080 0.921875 0.495798 0.686047 0.285714 0.968750 0.441281 0.655391 4 khoa_tieng_bo_dao_nha suite22_primary 869 64 0.073648 0.458059 0.919973 0.052553 0.034537 0.051706 -0.021942 0.471264 0.640625 0.543046 0.597668 0.369231 0.750000 0.494845 0.621762 0.310345 0.843750 0.453782 0.627907 0.267281 0.906250 0.412811 0.613108 4 khoa_tieng_bo_dao_nha suite22_relational 869 64 0.073648 0.361754 0.919759 0.054638 0.029768 0.065166 -0.008481 0.402299 0.546875 0.463576 0.510204 0.376923 0.765625 0.505155 0.634715 0.327586 0.890625 0.478992 0.662791 0.267281 0.906250 0.412811 0.613108 4 khoa_tieng_bo_dao_nha suite23 869 64 0.073648 0.656224 0.958521 0.037391 0.021204 0.074782 0.001134 0.574713 0.781250 0.662252 0.728863 0.438462 0.890625 0.587629 0.738342 0.344828 0.937500 0.504202 0.697674 0.285714 0.968750 0.441281 0.655391 4 khoa_tieng_bo_dao_nha suite23_graph 869 64 0.073648 0.513767 0.936297 0.052712 0.030949 0.044714 -0.028934 0.505747 0.687500 0.582781 0.641399 0.392308 0.796875 0.525773 0.660622 0.339080 0.921875 0.495798 0.686047 0.281106 0.953125 0.434164 0.644820 4 khoa_tieng_bo_dao_nha suite24 869 64 0.073648 0.694238 0.966149 0.035531 0.031774 0.066476 -0.007172 0.574713 0.781250 0.662252 0.728863 0.461538 0.937500 0.618557 0.777202 0.350575 0.953125 0.512605 0.709302 0.285714 0.968750 0.441281 0.655391 4 khoa_tieng_bo_dao_nha suite24_posthoc 869 64 0.073648 0.664871 0.964557 0.041870 0.036199 0.059199 -0.014448 0.586207 0.796875 0.675497 0.743440 0.438462 0.890625 0.587629 0.738342 0.350575 0.953125 0.512605 0.709302 0.290323 0.984375 0.448399 0.665962 4 khoa_tieng_bo_dao_nha suite25 869 64 0.073648 0.524488 0.929911 0.046571 0.026937 0.072388 -0.001260 0.448276 0.609375 0.516556 0.568513 0.407692 0.828125 0.546392 0.686528 0.333333 0.906250 0.487395 0.674419 0.276498 0.937500 0.427046 0.634249 4 khoa_tieng_bo_dao_nha suite25_blend 869 64 0.073648 0.615900 0.955357 0.040554 0.029929 0.069669 -0.003979 0.563218 0.765625 0.649007 0.714286 0.446154 0.906250 0.597938 0.751295 0.344828 0.937500 0.504202 0.697674 0.281106 0.953125 0.434164 0.644820 4 khoa_tieng_bo_dao_nha suite26_committee_blend 869 64 0.073648 0.634930 0.951475 0.040298 0.020241 0.071124 -0.002524 0.540230 0.734375 0.622517 0.685131 0.430769 0.875000 0.577320 0.725389 0.333333 0.906250 0.487395 0.674419 0.276498 0.937500 0.427046 0.634249 4 khoa_tieng_bo_dao_nha suite26_joint_head 869 64 0.073648 0.548996 0.916052 0.048074 0.034779 0.047853 -0.025795 0.551724 0.750000 0.635762 0.699708 0.400000 0.812500 0.536082 0.673575 0.321839 0.875000 0.470588 0.651163 0.258065 0.875000 0.398577 0.591966 4 khoa_tieng_bo_dao_nha suite26_tair 869 64 0.073648 0.494772 0.926495 0.048284 0.021261 0.074541 0.000893 0.425287 0.578125 0.490066 0.539359 0.384615 0.781250 0.515464 0.647668 0.310345 0.843750 0.453782 0.627907 0.262673 0.890625 0.405694 0.602537 4 khoa_tieng_bo_dao_nha suite26_tree 869 64 0.073648 0.508981 0.920332 0.056383 0.054419 0.127742 0.054094 0.425287 0.578125 0.490066 0.539359 0.369231 0.750000 0.494845 0.621762 0.304598 0.828125 0.445378 0.616279 0.258065 0.875000 0.398577 0.591966 4 khoa_tieng_bo_dao_nha suite26_tree_memory 869 64 0.073648 0.533877 0.930435 0.046976 0.027268 0.099624 0.025976 0.505747 0.687500 0.582781 0.641399 0.400000 0.812500 0.536082 0.673575 0.327586 0.890625 0.478992 0.662791 0.267281 0.906250 0.412811 0.613108 4 khoa_tieng_duc committee 1746 44 0.025200 0.446284 0.919733 0.020084 0.019022 0.043253 0.018052 0.182857 0.727273 0.292237 0.455840 0.148855 0.886364 0.254902 0.445205 0.111748 0.886364 0.198473 0.371429 0.089450 0.886364 0.162500 0.318627 4 khoa_tieng_duc suite14 1746 44 0.025200 0.466902 0.933020 0.021339 0.020418 0.045619 0.020418 0.205714 0.818182 0.328767 0.512821 0.145038 0.863636 0.248366 0.433790 0.111748 0.886364 0.198473 0.371429 0.094037 0.931818 0.170833 0.334967 4 khoa_tieng_duc suite16 1746 44 0.025200 0.439311 0.928413 0.030231 0.045144 0.070344 0.045144 0.194286 0.772727 0.310502 0.484330 0.148855 0.886364 0.254902 0.445205 0.111748 0.886364 0.198473 0.371429 0.089450 0.886364 0.162500 0.318627 4 khoa_tieng_duc suite17 1746 44 0.025200 0.425388 0.935170 0.020904 0.021880 0.045503 0.020302 0.194286 0.772727 0.310502 0.484330 0.148855 0.886364 0.254902 0.445205 0.117479 0.931818 0.208651 0.390476 0.094037 0.931818 0.170833 0.334967 4 khoa_tieng_duc suite18 1746 44 0.025200 0.423159 0.934756 0.021034 0.022055 0.045665 0.020464 0.188571 0.750000 0.301370 0.470085 0.148855 0.886364 0.254902 0.445205 0.117479 0.931818 0.208651 0.390476 0.094037 0.931818 0.170833 0.334967 4 khoa_tieng_duc suite20 1746 44 0.025200 0.274165 0.915500 0.091424 0.122784 0.147985 0.122784 0.160000 0.636364 0.255708 0.398860 0.133588 0.795455 0.228758 0.399543 0.108883 0.863636 0.193384 0.361905 0.087156 0.863636 0.158333 0.310458 4 khoa_tieng_duc suite21 1746 44 0.025200 0.465899 0.922538 0.020334 0.021864 0.045442 0.020241 0.188571 0.750000 0.301370 0.470085 0.148855 0.886364 0.254902 0.445205 0.111748 0.886364 0.198473 0.371429 0.089450 0.886364 0.162500 0.318627 4 khoa_tieng_duc suite22 1746 44 0.025200 0.457867 0.933140 0.018134 0.011121 0.034059 0.008859 0.200000 0.795455 0.319635 0.498575 0.148855 0.886364 0.254902 0.445205 0.111748 0.886364 0.198473 0.371429 0.094037 0.931818 0.170833 0.334967 4 khoa_tieng_duc suite22_primary 1746 44 0.025200 0.406232 0.927345 0.018854 0.004770 0.022969 -0.002231 0.177143 0.704545 0.283105 0.441595 0.133588 0.795455 0.228758 0.399543 0.111748 0.886364 0.198473 0.371429 0.094037 0.931818 0.170833 0.334967 4 khoa_tieng_duc suite22_relational 1746 44 0.025200 0.270080 0.919026 0.021227 0.008489 0.021333 -0.003868 0.182857 0.727273 0.292237 0.455840 0.137405 0.818182 0.235294 0.410959 0.106017 0.840909 0.188295 0.352381 0.089450 0.886364 0.162500 0.318627 4 khoa_tieng_duc suite23 1746 44 0.025200 0.472304 0.932539 0.018043 0.014273 0.033656 0.008456 0.205714 0.818182 0.328767 0.512821 0.145038 0.863636 0.248366 0.433790 0.111748 0.886364 0.198473 0.371429 0.094037 0.931818 0.170833 0.334967 4 khoa_tieng_duc suite23_graph 1746 44 0.025200 0.314679 0.918625 0.020828 0.013131 0.032924 0.007724 0.182857 0.727273 0.292237 0.455840 0.129771 0.772727 0.222222 0.388128 0.108883 0.863636 0.193384 0.361905 0.089450 0.886364 0.162500 0.318627 4 khoa_tieng_duc suite24 1746 44 0.025200 0.426557 0.925115 0.020046 0.016357 0.040076 0.014876 0.182857 0.727273 0.292237 0.455840 0.148855 0.886364 0.254902 0.445205 0.111748 0.886364 0.198473 0.371429 0.094037 0.931818 0.170833 0.334967 4 khoa_tieng_duc suite24_posthoc 1746 44 0.025200 0.428744 0.941980 0.018543 0.009602 0.032518 0.007318 0.200000 0.795455 0.319635 0.498575 0.152672 0.909091 0.261438 0.456621 0.117479 0.931818 0.208651 0.390476 0.094037 0.931818 0.170833 0.334967 4 khoa_tieng_duc suite25 1746 44 0.025200 0.408900 0.893828 0.020753 0.026135 0.046775 0.021575 0.160000 0.636364 0.255708 0.398860 0.125954 0.750000 0.215686 0.376712 0.097421 0.772727 0.173028 0.323810 0.077982 0.772727 0.141667 0.277778 4 khoa_tieng_duc suite25_blend 1746 44 0.025200 0.442025 0.928119 0.019178 0.016638 0.040171 0.014970 0.194286 0.772727 0.310502 0.484330 0.145038 0.863636 0.248366 0.433790 0.114613 0.909091 0.203562 0.380952 0.091743 0.909091 0.166667 0.326797 4 khoa_tieng_duc suite26_committee_blend 1746 44 0.025200 0.463723 0.938388 0.017871 0.014517 0.032814 0.007614 0.188571 0.750000 0.301370 0.470085 0.148855 0.886364 0.254902 0.445205 0.117479 0.931818 0.208651 0.390476 0.094037 0.931818 0.170833 0.334967 4 khoa_tieng_duc suite26_joint_head 1746 44 0.025200 0.449533 0.854302 0.018940 0.008230 0.021217 -0.003984 0.171429 0.681818 0.273973 0.427350 0.118321 0.704545 0.202614 0.353881 0.094556 0.750000 0.167939 0.314286 0.082569 0.818182 0.150000 0.294118 4 khoa_tieng_duc suite26_tair 1746 44 0.025200 0.362992 0.943429 0.019505 0.006670 0.027851 0.002650 0.182857 0.727273 0.292237 0.455840 0.145038 0.863636 0.248366 0.433790 0.120344 0.954545 0.213740 0.400000 0.096330 0.954545 0.175000 0.343137 4 khoa_tieng_duc suite26_tree 1746 44 0.025200 0.317302 0.942748 0.022593 0.029568 0.054464 0.029264 0.188571 0.750000 0.301370 0.470085 0.145038 0.863636 0.248366 0.433790 0.120344 0.954545 0.213740 0.400000 0.096330 0.954545 0.175000 0.343137 4 khoa_tieng_duc suite26_tree_memory 1746 44 0.025200 0.406346 0.950433 0.019797 0.020008 0.045155 0.019954 0.188571 0.750000 0.301370 0.470085 0.148855 0.886364 0.254902 0.445205 0.123209 0.977273 0.218830 0.409524 0.100917 1.000000 0.183333 0.359477 4 khoa_tieng_han_quoc committee 3351 38 0.011340 0.439642 0.957377 0.008367 0.006205 0.016604 0.005264 0.095522 0.842105 0.171582 0.328542 0.065606 0.868421 0.121996 0.251908 0.052239 0.921053 0.098870 0.212895 0.044153 0.973684 0.084475 0.186869 4 khoa_tieng_han_quoc suite14 3351 38 0.011340 0.439642 0.957377 0.008367 0.006205 0.016604 0.005264 0.095522 0.842105 0.171582 0.328542 0.065606 0.868421 0.121996 0.251908 0.052239 0.921053 0.098870 0.212895 0.044153 0.973684 0.084475 0.186869 4 khoa_tieng_han_quoc suite16 3351 38 0.011340 0.473670 0.959013 0.010520 0.016075 0.027319 0.015979 0.098507 0.868421 0.176944 0.338809 0.065606 0.868421 0.121996 0.251908 0.050746 0.894737 0.096045 0.206813 0.042959 0.947368 0.082192 0.181818 4 khoa_tieng_han_quoc suite17 3351 38 0.011340 0.479670 0.960943 0.008598 0.008094 0.018007 0.006667 0.098507 0.868421 0.176944 0.338809 0.065606 0.868421 0.121996 0.251908 0.050746 0.894737 0.096045 0.206813 0.045346 1.000000 0.086758 0.191919 4 khoa_tieng_han_quoc suite18 3351 38 0.011340 0.465818 0.961746 0.008638 0.008402 0.018141 0.006801 0.098507 0.868421 0.176944 0.338809 0.065606 0.868421 0.121996 0.251908 0.053731 0.947368 0.101695 0.218978 0.045346 1.000000 0.086758 0.191919 4 khoa_tieng_han_quoc suite20 3351 38 0.011340 0.150101 0.881535 0.080783 0.122812 0.134152 0.122812 0.065672 0.578947 0.117962 0.225873 0.049702 0.657895 0.092421 0.190840 0.046269 0.815789 0.087571 0.188564 0.039379 0.868421 0.075342 0.166667 4 khoa_tieng_han_quoc suite21 3351 38 0.011340 0.474092 0.958910 0.008398 0.006393 0.017190 0.005850 0.095522 0.842105 0.171582 0.328542 0.065606 0.868421 0.121996 0.251908 0.052239 0.921053 0.098870 0.212895 0.044153 0.973684 0.084475 0.186869 4 khoa_tieng_han_quoc suite22 3351 38 0.011340 0.438360 0.955510 0.008315 0.004797 0.014022 0.002682 0.095522 0.842105 0.171582 0.328542 0.065606 0.868421 0.121996 0.251908 0.049254 0.868421 0.093220 0.200730 0.044153 0.973684 0.084475 0.186869 4 khoa_tieng_han_quoc suite22_primary 3351 38 0.011340 0.291409 0.900083 0.009500 0.002659 0.012978 0.001638 0.083582 0.736842 0.150134 0.287474 0.059642 0.789474 0.110906 0.229008 0.046269 0.815789 0.087571 0.188564 0.038186 0.842105 0.073059 0.161616 4 khoa_tieng_han_quoc suite22_relational 3351 38 0.011340 0.339706 0.936018 0.009270 0.005556 0.007770 -0.003570 0.083582 0.736842 0.150134 0.287474 0.065606 0.868421 0.121996 0.251908 0.049254 0.868421 0.093220 0.200730 0.042959 0.947368 0.082192 0.181818 4 khoa_tieng_han_quoc suite23 3351 38 0.011340 0.401390 0.962866 0.008741 0.005917 0.014525 0.003185 0.101493 0.894737 0.182306 0.349076 0.067594 0.894737 0.125693 0.259542 0.053731 0.947368 0.101695 0.218978 0.044153 0.973684 0.084475 0.186869 4 khoa_tieng_han_quoc suite23_graph 3351 38 0.011340 0.230327 0.931196 0.009973 0.010243 0.019497 0.008157 0.089552 0.789474 0.160858 0.308008 0.067594 0.894737 0.125693 0.259542 0.050746 0.894737 0.096045 0.206813 0.040573 0.894737 0.077626 0.171717 4 khoa_tieng_han_quoc suite24 3351 38 0.011340 0.462308 0.962286 0.008091 0.005399 0.015539 0.004199 0.095522 0.842105 0.171582 0.328542 0.069583 0.921053 0.129390 0.267176 0.053731 0.947368 0.101695 0.218978 0.042959 0.947368 0.082192 0.181818 4 khoa_tieng_han_quoc suite24_posthoc 3351 38 0.011340 0.408188 0.955335 0.008804 0.006394 0.012252 0.000912 0.095522 0.842105 0.171582 0.328542 0.065606 0.868421 0.121996 0.251908 0.050746 0.894737 0.096045 0.206813 0.041766 0.921053 0.079909 0.176768 4 khoa_tieng_han_quoc suite25 3351 38 0.011340 0.387752 0.876912 0.009988 0.021087 0.030351 0.019011 0.077612 0.684211 0.139410 0.266940 0.057654 0.763158 0.107209 0.221374 0.044776 0.789474 0.084746 0.182482 0.038186 0.842105 0.073059 0.161616 4 khoa_tieng_han_quoc suite25_blend 3351 38 0.011340 0.458866 0.948107 0.008293 0.010821 0.018653 0.007313 0.086567 0.763158 0.155496 0.297741 0.067594 0.894737 0.125693 0.259542 0.052239 0.921053 0.098870 0.212895 0.042959 0.947368 0.082192 0.181818 4 khoa_tieng_han_quoc suite26_committee_blend 3351 38 0.011340 0.435916 0.947337 0.008647 0.004899 0.012148 0.000808 0.092537 0.815789 0.166220 0.318275 0.063618 0.842105 0.118299 0.244275 0.049254 0.868421 0.093220 0.200730 0.040573 0.894737 0.077626 0.171717 4 khoa_tieng_han_quoc suite26_joint_head 3351 38 0.011340 0.359490 0.901822 0.009294 0.006279 0.012087 0.000747 0.095522 0.842105 0.171582 0.328542 0.063618 0.842105 0.118299 0.244275 0.049254 0.868421 0.093220 0.200730 0.039379 0.868421 0.075342 0.166667 4 khoa_tieng_han_quoc suite26_tair 3351 38 0.011340 0.237608 0.891202 0.009748 0.004171 0.011414 0.000074 0.086567 0.763158 0.155496 0.297741 0.057654 0.763158 0.107209 0.221374 0.043284 0.763158 0.081921 0.176399 0.035800 0.789474 0.068493 0.151515 4 khoa_tieng_han_quoc suite26_tree 3351 38 0.011340 0.260673 0.894487 0.009993 0.012220 0.021330 0.009990 0.086567 0.763158 0.155496 0.297741 0.057654 0.763158 0.107209 0.221374 0.043284 0.763158 0.081921 0.176399 0.036993 0.815789 0.070776 0.156566 4 khoa_tieng_han_quoc suite26_tree_memory 3351 38 0.011340 0.308919 0.903911 0.009221 0.010361 0.018705 0.007365 0.083582 0.736842 0.150134 0.287474 0.059642 0.789474 0.110906 0.229008 0.049254 0.868421 0.093220 0.200730 0.039379 0.868421 0.075342 0.166667 4 khoa_tieng_italia committee 1795 34 0.018942 0.397905 0.910579 0.015673 0.017386 0.035270 0.016329 0.138889 0.735294 0.233645 0.395570 0.104089 0.823529 0.184818 0.345679 0.083565 0.882353 0.152672 0.303030 0.066815 0.882353 0.124224 0.256410 4 khoa_tieng_italia suite14 1795 34 0.018942 0.397905 0.910579 0.015673 0.017386 0.035270 0.016329 0.138889 0.735294 0.233645 0.395570 0.104089 0.823529 0.184818 0.345679 0.083565 0.882353 0.152672 0.303030 0.066815 0.882353 0.124224 0.256410 4 khoa_tieng_italia suite16 1795 34 0.018942 0.389546 0.919414 0.023213 0.047742 0.066513 0.047571 0.144444 0.764706 0.242991 0.411392 0.107807 0.852941 0.191419 0.358025 0.080780 0.852941 0.147583 0.292929 0.066815 0.882353 0.124224 0.256410 4 khoa_tieng_italia suite17 1795 34 0.018942 0.414482 0.919898 0.015777 0.019345 0.036640 0.017699 0.144444 0.764706 0.242991 0.411392 0.107807 0.852941 0.191419 0.358025 0.080780 0.852941 0.147583 0.292929 0.066815 0.882353 0.124224 0.256410 4 khoa_tieng_italia suite18 1795 34 0.018942 0.417296 0.919113 0.015788 0.019436 0.036696 0.017754 0.144444 0.764706 0.242991 0.411392 0.107807 0.852941 0.191419 0.358025 0.080780 0.852941 0.147583 0.292929 0.064588 0.852941 0.120083 0.247863 4 khoa_tieng_italia suite20 1795 34 0.018942 0.337496 0.895113 0.136508 0.199609 0.218550 0.199609 0.111111 0.588235 0.186916 0.316456 0.092937 0.735294 0.165017 0.308642 0.075209 0.794118 0.137405 0.272727 0.064588 0.852941 0.120083 0.247863 4 khoa_tieng_italia suite21 1795 34 0.018942 0.404654 0.919448 0.015579 0.019032 0.036700 0.017758 0.138889 0.735294 0.233645 0.395570 0.104089 0.823529 0.184818 0.345679 0.080780 0.852941 0.147583 0.292929 0.066815 0.882353 0.124224 0.256410 4 khoa_tieng_italia suite22 1795 34 0.018942 0.446614 0.927064 0.014033 0.013020 0.028841 0.009900 0.150000 0.794118 0.252336 0.427215 0.107807 0.852941 0.191419 0.358025 0.080780 0.852941 0.147583 0.292929 0.066815 0.882353 0.124224 0.256410 4 khoa_tieng_italia suite22_primary 1795 34 0.018942 0.351824 0.910161 0.015211 0.007189 0.025431 0.006489 0.138889 0.735294 0.233645 0.395570 0.096654 0.764706 0.171617 0.320988 0.083565 0.882353 0.152672 0.303030 0.071269 0.941176 0.132505 0.273504 4 khoa_tieng_italia suite22_relational 1795 34 0.018942 0.337127 0.909760 0.016589 0.010664 0.028787 0.009846 0.122222 0.647059 0.205607 0.348101 0.100372 0.794118 0.178218 0.333333 0.083565 0.882353 0.152672 0.303030 0.069042 0.911765 0.128364 0.264957 4 khoa_tieng_italia suite23 1795 34 0.018942 0.428439 0.928466 0.014370 0.013828 0.029944 0.011003 0.144444 0.764706 0.242991 0.411392 0.104089 0.823529 0.184818 0.345679 0.083565 0.882353 0.152672 0.303030 0.069042 0.911765 0.128364 0.264957 4 khoa_tieng_italia suite23_graph 1795 34 0.018942 0.391397 0.918395 0.015482 0.015806 0.029592 0.010651 0.138889 0.735294 0.233645 0.395570 0.096654 0.764706 0.171617 0.320988 0.080780 0.852941 0.147583 0.292929 0.064588 0.852941 0.120083 0.247863 4 khoa_tieng_italia suite24 1795 34 0.018942 0.413964 0.923038 0.014468 0.011825 0.028169 0.009227 0.144444 0.764706 0.242991 0.411392 0.104089 0.823529 0.184818 0.345679 0.077994 0.823529 0.142494 0.282828 0.069042 0.911765 0.128364 0.264957 4 khoa_tieng_italia suite24_posthoc 1795 34 0.018942 0.427991 0.926162 0.014489 0.014141 0.028864 0.009923 0.133333 0.705882 0.224299 0.379747 0.096654 0.764706 0.171617 0.320988 0.080780 0.852941 0.147583 0.292929 0.073497 0.970588 0.136646 0.282051 4 khoa_tieng_italia suite25 1795 34 0.018942 0.238027 0.867472 0.017624 0.023970 0.041642 0.022700 0.111111 0.588235 0.186916 0.316456 0.085502 0.676471 0.151815 0.283951 0.072423 0.764706 0.132316 0.262626 0.064588 0.852941 0.120083 0.247863 4 khoa_tieng_italia suite25_blend 1795 34 0.018942 0.351927 0.908107 0.015660 0.017426 0.035062 0.016120 0.144444 0.764706 0.242991 0.411392 0.100372 0.794118 0.178218 0.333333 0.080780 0.852941 0.147583 0.292929 0.064588 0.852941 0.120083 0.247863 4 khoa_tieng_italia suite26_committee_blend 1795 34 0.018942 0.433471 0.928517 0.014175 0.018090 0.033193 0.014251 0.138889 0.735294 0.233645 0.395570 0.107807 0.852941 0.191419 0.358025 0.083565 0.882353 0.152672 0.303030 0.069042 0.911765 0.128364 0.264957 4 khoa_tieng_italia suite26_joint_head 1795 34 0.018942 0.410956 0.903932 0.014462 0.008926 0.019865 0.000923 0.138889 0.735294 0.233645 0.395570 0.104089 0.823529 0.184818 0.345679 0.080780 0.852941 0.147583 0.292929 0.064588 0.852941 0.120083 0.247863 4 khoa_tieng_italia suite26_tair 1795 34 0.018942 0.395075 0.927398 0.014896 0.021491 0.036338 0.017396 0.138889 0.735294 0.233645 0.395570 0.107807 0.852941 0.191419 0.358025 0.080780 0.852941 0.147583 0.292929 0.069042 0.911765 0.128364 0.264957 4 khoa_tieng_italia suite26_tree 1795 34 0.018942 0.374645 0.923389 0.023075 0.054722 0.073530 0.054588 0.138889 0.735294 0.233645 0.395570 0.107807 0.852941 0.191419 0.358025 0.080780 0.852941 0.147583 0.292929 0.069042 0.911765 0.128364 0.264957 4 khoa_tieng_italia suite26_tree_memory 1795 34 0.018942 0.405796 0.923606 0.016700 0.032166 0.049309 0.030367 0.138889 0.735294 0.233645 0.395570 0.111524 0.882353 0.198020 0.370370 0.083565 0.882353 0.152672 0.303030 0.066815 0.882353 0.124224 0.256410 4 khoa_tieng_nga committee 1659 114 0.068716 0.617681 0.927116 0.038524 0.007788 0.069410 0.000694 0.481928 0.701754 0.571429 0.643087 0.357430 0.780702 0.490358 0.631206 0.286145 0.833333 0.426009 0.602792 0.238554 0.868421 0.374291 0.568312 4 khoa_tieng_nga suite14 1659 114 0.068716 0.617681 0.927116 0.038524 0.007788 0.069410 0.000694 0.481928 0.701754 0.571429 0.643087 0.357430 0.780702 0.490358 0.631206 0.286145 0.833333 0.426009 0.602792 0.238554 0.868421 0.374291 0.568312 4 khoa_tieng_nga suite16 1659 114 0.068716 0.610272 0.932885 0.044550 0.040898 0.109614 0.040898 0.481928 0.701754 0.571429 0.643087 0.361446 0.789474 0.495868 0.638298 0.286145 0.833333 0.426009 0.602792 0.240964 0.877193 0.378072 0.574053 4 khoa_tieng_nga suite17 1659 114 0.068716 0.623071 0.929660 0.039167 0.012063 0.071126 0.002410 0.481928 0.701754 0.571429 0.643087 0.357430 0.780702 0.490358 0.631206 0.289157 0.842105 0.430493 0.609137 0.240964 0.877193 0.378072 0.574053 4 khoa_tieng_nga suite18 1659 114 0.068716 0.617948 0.927094 0.039307 0.011642 0.071290 0.002574 0.475904 0.692982 0.564286 0.635048 0.361446 0.789474 0.495868 0.638298 0.286145 0.833333 0.426009 0.602792 0.240964 0.877193 0.378072 0.574053 4 khoa_tieng_nga suite20 1659 114 0.068716 0.531185 0.918969 0.088273 0.106676 0.175392 0.106676 0.457831 0.666667 0.542857 0.610932 0.345382 0.754386 0.473829 0.609929 0.280120 0.815789 0.417040 0.590102 0.233735 0.850877 0.366730 0.556831 4 khoa_tieng_nga suite21 1659 114 0.068716 0.609277 0.928814 0.038973 0.011515 0.073791 0.005075 0.487952 0.710526 0.578571 0.651125 0.361446 0.789474 0.495868 0.638298 0.295181 0.859649 0.439462 0.621827 0.248193 0.903509 0.389414 0.591274 4 khoa_tieng_nga suite22 1659 114 0.068716 0.637465 0.935303 0.037540 0.009583 0.064518 -0.004198 0.506024 0.736842 0.600000 0.675241 0.357430 0.780702 0.490358 0.631206 0.289157 0.842105 0.430493 0.609137 0.240964 0.877193 0.378072 0.574053 4 khoa_tieng_nga suite22_primary 1659 114 0.068716 0.641316 0.936990 0.038081 0.016003 0.059876 -0.008840 0.487952 0.710526 0.578571 0.651125 0.361446 0.789474 0.495868 0.638298 0.280120 0.815789 0.417040 0.590102 0.245783 0.894737 0.385633 0.585534 4 khoa_tieng_nga suite22_relational 1659 114 0.068716 0.554012 0.916885 0.043088 0.022190 0.051083 -0.017633 0.445783 0.649123 0.528571 0.594855 0.337349 0.736842 0.462810 0.595745 0.280120 0.815789 0.417040 0.590102 0.238554 0.868421 0.374291 0.568312 4 khoa_tieng_nga suite23 1659 114 0.068716 0.617681 0.927116 0.038524 0.007788 0.069410 0.000694 0.481928 0.701754 0.571429 0.643087 0.357430 0.780702 0.490358 0.631206 0.286145 0.833333 0.426009 0.602792 0.238554 0.868421 0.374291 0.568312 4 khoa_tieng_nga suite23_graph 1659 114 0.068716 0.513527 0.894007 0.051602 0.032430 0.036286 -0.032430 0.439759 0.640351 0.521429 0.586817 0.337349 0.736842 0.462810 0.595745 0.268072 0.780702 0.399103 0.564721 0.226506 0.824561 0.355388 0.539610 4 khoa_tieng_nga suite24 1659 114 0.068716 0.629059 0.928275 0.038234 0.010597 0.064220 -0.004496 0.493976 0.719298 0.585714 0.659164 0.357430 0.780702 0.490358 0.631206 0.286145 0.833333 0.426009 0.602792 0.243373 0.885965 0.381853 0.579793 4 khoa_tieng_nga suite24_posthoc 1659 114 0.068716 0.626698 0.929546 0.040294 0.012958 0.056961 -0.011755 0.475904 0.692982 0.564286 0.635048 0.361446 0.789474 0.495868 0.638298 0.286145 0.833333 0.426009 0.602792 0.236145 0.859649 0.370510 0.562572 4 khoa_tieng_nga suite25 1659 114 0.068716 0.587000 0.935678 0.040470 0.017539 0.053943 -0.014773 0.512048 0.745614 0.607143 0.683280 0.373494 0.815789 0.512397 0.659574 0.289157 0.842105 0.430493 0.609137 0.240964 0.877193 0.378072 0.574053 4 khoa_tieng_nga suite25_blend 1659 114 0.068716 0.639748 0.937257 0.037650 0.010731 0.059496 -0.009220 0.524096 0.763158 0.621429 0.699357 0.365462 0.798246 0.501377 0.645390 0.295181 0.859649 0.439462 0.621827 0.238554 0.868421 0.374291 0.568312 4 khoa_tieng_nga suite26_committee_blend 1659 114 0.068716 0.606898 0.928399 0.040259 0.010211 0.060092 -0.008624 0.469880 0.684211 0.557143 0.627010 0.361446 0.789474 0.495868 0.638298 0.289157 0.842105 0.430493 0.609137 0.240964 0.877193 0.378072 0.574053 4 khoa_tieng_nga suite26_joint_head 1659 114 0.068716 0.584382 0.884313 0.045989 0.034883 0.033833 -0.034883 0.457831 0.666667 0.542857 0.610932 0.357430 0.780702 0.490358 0.631206 0.289157 0.842105 0.430493 0.609137 0.238554 0.868421 0.374291 0.568312 4 khoa_tieng_nga suite26_tair 1659 114 0.068716 0.519144 0.917388 0.045772 0.020985 0.054452 -0.014264 0.439759 0.640351 0.521429 0.586817 0.353414 0.771930 0.484848 0.624113 0.292169 0.850877 0.434978 0.615482 0.236145 0.859649 0.370510 0.562572 4 khoa_tieng_nga suite26_tree 1659 114 0.068716 0.501198 0.915148 0.049044 0.039883 0.097444 0.028728 0.439759 0.640351 0.521429 0.586817 0.353414 0.771930 0.484848 0.624113 0.292169 0.850877 0.434978 0.615482 0.236145 0.859649 0.370510 0.562572 4 khoa_tieng_nga suite26_tree_memory 1659 114 0.068716 0.570105 0.921927 0.042449 0.011236 0.067621 -0.001096 0.445783 0.649123 0.528571 0.594855 0.357430 0.780702 0.490358 0.631206 0.292169 0.850877 0.434978 0.615482 0.240964 0.877193 0.378072 0.574053 4 khoa_tieng_nhat committee 2413 38 0.015748 0.166735 0.861307 0.015721 0.012607 0.013597 -0.002151 0.099585 0.631579 0.172043 0.305344 0.074586 0.710526 0.135000 0.262646 0.057971 0.736842 0.107486 0.220472 0.053068 0.842105 0.099844 0.211921 4 khoa_tieng_nhat suite14 2413 38 0.015748 0.166735 0.861307 0.015721 0.012607 0.013597 -0.002151 0.099585 0.631579 0.172043 0.305344 0.074586 0.710526 0.135000 0.262646 0.057971 0.736842 0.107486 0.220472 0.053068 0.842105 0.099844 0.211921 4 khoa_tieng_nhat suite16 2413 38 0.015748 0.186532 0.871712 0.017572 0.011513 0.021975 0.006227 0.099585 0.631579 0.172043 0.305344 0.071823 0.684211 0.130000 0.252918 0.064182 0.815789 0.119002 0.244094 0.053068 0.842105 0.099844 0.211921 4 khoa_tieng_nhat suite17 2413 38 0.015748 0.177684 0.880975 0.015798 0.012531 0.015357 -0.000391 0.099585 0.631579 0.172043 0.305344 0.074586 0.710526 0.135000 0.262646 0.062112 0.789474 0.115163 0.236220 0.054726 0.868421 0.102964 0.218543 4 khoa_tieng_nhat suite18 2413 38 0.015748 0.181447 0.883535 0.015659 0.012275 0.015197 -0.000551 0.095436 0.605263 0.164875 0.292621 0.074586 0.710526 0.135000 0.262646 0.066253 0.842105 0.122841 0.251969 0.054726 0.868421 0.102964 0.218543 4 khoa_tieng_nhat suite20 2413 38 0.015748 0.286287 0.906105 0.072509 0.102681 0.118429 0.102681 0.095436 0.605263 0.164875 0.292621 0.071823 0.684211 0.130000 0.252918 0.060041 0.763158 0.111324 0.228346 0.056385 0.894737 0.106084 0.225166 4 khoa_tieng_nhat suite21 2413 38 0.015748 0.177007 0.869230 0.015956 0.012430 0.014327 -0.001421 0.099585 0.631579 0.172043 0.305344 0.074586 0.710526 0.135000 0.262646 0.064182 0.815789 0.119002 0.244094 0.053068 0.842105 0.099844 0.211921 4 khoa_tieng_nhat suite22 2413 38 0.015748 0.189639 0.886681 0.014409 0.009584 0.011291 -0.004457 0.095436 0.605263 0.164875 0.292621 0.080110 0.763158 0.145000 0.282101 0.066253 0.842105 0.122841 0.251969 0.054726 0.868421 0.102964 0.218543 4 khoa_tieng_nhat suite22_primary 2413 38 0.015748 0.264782 0.926449 0.013361 0.006282 0.010998 -0.004750 0.103734 0.657895 0.179211 0.318066 0.080110 0.763158 0.145000 0.282101 0.072464 0.921053 0.134357 0.275591 0.063018 1.000000 0.118565 0.251656 ============================================================================================================================================================================================== SUITE26 TARGET FOLD 5 ============================================================================================================================================================================================== [DATA] history=419,467 fail=8,736 (2.08%) train=313,390 validation=106,077 target=50,698 fail=1,797 (3.54%) [TREE] fitting selection tree on older training blocks only... [TREE] selection summary={'n_trees': 96, 'leaf_vocab_size': 73729, 'mean_leaves_per_tree': 768.0, 'min_leaves_per_tree': 768, 'max_leaves_per_tree': 768, 'training_oob_ap': 0.4698772366012639} [TREE-HISTORY-SEL] 50,000/419,467 [TREE-HISTORY-SEL] 100,000/419,467 [TREE-HISTORY-SEL] 150,000/419,467 [TREE-HISTORY-SEL] 200,000/419,467 [TREE-HISTORY-SEL] 250,000/419,467 [TREE-HISTORY-SEL] 300,000/419,467 [TREE-HISTORY-SEL] 350,000/419,467 [TREE-HISTORY-SEL] 400,000/419,467 [TREE-HISTORY-SEL] 419,467/419,467 [TREE] calibration a=0.9869 b=-2.7351 validation macroAP=0.2829 training_OOB_AP=0.4698772366012639 [HISTORY STORE] selection phase (memory candidates restricted to training partition)... [HISTORY STORE] 50,000/419,467 [HISTORY STORE] 100,000/419,467 [HISTORY STORE] 150,000/419,467 [HISTORY STORE] 200,000/419,467 [HISTORY STORE] 250,000/419,467 [HISTORY STORE] 300,000/419,467 [HISTORY STORE] 350,000/419,467 [HISTORY STORE] 400,000/419,467 FOLD 5 SELECTION STUDENT-HISTORY SUPPORT -------------------------------------------------------------------------------- faculty rows prevalence history_mean history_zero_rate history_failure_mean same_course_history_mean course_seen_mean new_course_rate history_grade_present_rate khoa_cong_nghe_thong_tin 40261 0.034252 10.307369 0.276893 0.144308 0.000025 1023.689228 0.011376 1.0 khoa_quan_tri_kinh_doanh_va_du_lich 59575 0.030449 9.555283 0.250088 0.155065 0.000017 1429.381284 0.013647 1.0 khoa_quoc_te_hoc 19764 0.010575 8.377606 0.284659 0.031724 0.000000 916.717820 0.042906 1.0 khoa_tieng_anh 78407 0.016070 11.713750 0.222608 0.033160 0.000000 1167.064050 0.022115 1.0 khoa_tieng_bo_dao_nha 7502 0.039589 11.215409 0.206478 0.179419 0.000000 996.909891 0.020395 1.0 khoa_tieng_duc 18332 0.019747 12.325387 0.233362 0.074896 0.000000 1101.000927 0.015165 1.0 khoa_tieng_han_quoc 29929 0.006816 11.686491 0.228140 0.027565 0.000000 1054.468676 0.036119 1.0 khoa_tieng_italia 18780 0.032481 12.095048 0.196539 0.139936 0.000053 1007.674388 0.030138 1.0 khoa_tieng_nga 13418 0.049262 10.780817 0.233567 0.226785 0.000000 1076.750261 0.040766 1.0 khoa_tieng_nhat 29332 0.009614 11.495329 0.267762 0.032251 0.000000 1135.527069 0.013603 1.0 khoa_tieng_phap 25043 0.012858 11.146308 0.236913 0.044803 0.000000 1030.909556 0.034421 1.0 khoa_tieng_tay_ban_nha 13391 0.027481 11.536405 0.226495 0.130311 0.000000 983.142260 0.045105 1.0 khoa_tieng_trung_quoc 57867 0.008831 12.516408 0.206473 0.031279 0.000000 1269.192096 0.038640 1.0 khoa_viet_nam_hoc 7866 0.058098 8.685609 0.291635 0.289855 0.000000 201.483092 0.018052 1.0 ------------------------------------------------------------------------------------------------------------------------------------------------------ [VARIANT suite26_tree_memory] [SELECT MEMORY] epoch=01/12 loss=0.13310 BCE=0.10176 rank=0.13800 joint=0.05909 ability=0.00000 macroAP=0.2421 F2@20=0.2888 Brier=0.0435 best=01 [SELECT MEMORY] epoch=02/12 loss=0.12805 BCE=0.10073 rank=0.12695 joint=0.04548 ability=0.00000 macroAP=0.2453 F2@20=0.2927 Brier=0.0437 best=02 [SELECT MEMORY] epoch=03/12 loss=0.12400 BCE=0.10002 rank=0.10670 joint=0.04108 ability=0.00000 macroAP=0.2824 F2@20=0.3109 Brier=0.0528 best=03 [SELECT MEMORY] epoch=04/12 loss=0.11606 BCE=0.09701 rank=0.07847 joint=0.03343 ability=0.00000 macroAP=0.2456 F2@20=0.2868 Brier=0.0436 best=03 [SELECT MEMORY] epoch=05/12 loss=0.11129 BCE=0.09459 rank=0.06731 joint=0.02821 ability=0.00000 macroAP=0.2290 F2@20=0.2837 Brier=0.0438 best=03 [SELECT MEMORY] epoch=06/12 loss=0.11101 BCE=0.09505 rank=0.06420 joint=0.02641 ability=0.00000 macroAP=0.2662 F2@20=0.2883 Brier=0.0437 best=03 ------------------------------------------------------------------------------------------------------------------------------------------------------ [VARIANT suite26_tair] [SELECT TAIR] epoch=01/12 loss=0.13871 BCE=0.10200 rank=0.14567 joint=0.05974 ability=0.08625 macroAP=0.2486 F2@20=0.2944 Brier=0.0437 best=01 [SELECT TAIR] epoch=02/12 loss=0.13529 BCE=0.10195 rank=0.13654 joint=0.05058 ability=0.07687 macroAP=0.2113 F2@20=0.2850 Brier=0.0438 best=01 [SELECT TAIR] epoch=03/12 loss=0.12910 BCE=0.10077 rank=0.11578 joint=0.04010 ability=0.06923 macroAP=0.2317 F2@20=0.2902 Brier=0.0436 best=01 [SELECT TAIR] epoch=04/12 loss=0.11650 BCE=0.09554 rank=0.07369 joint=0.03045 ability=0.06236 macroAP=0.2690 F2@20=0.2912 Brier=0.0435 best=04 [SELECT TAIR] epoch=05/12 loss=0.11260 BCE=0.09427 rank=0.06246 joint=0.02569 ability=0.05732 macroAP=0.2602 F2@20=0.2865 Brier=0.0436 best=04 [SELECT TAIR] epoch=06/12 loss=0.11046 BCE=0.09278 rank=0.06024 joint=0.02380 ability=0.05725 macroAP=0.2411 F2@20=0.2836 Brier=0.0437 best=04 [SELECT TAIR] epoch=07/12 loss=0.10952 BCE=0.09288 rank=0.05444 joint=0.02214 ability=0.05586 macroAP=0.2273 F2@20=0.2834 Brier=0.0437 best=04 [COMMITTEE BLEND ABLATION] selected alpha=0.25 policyAP=0.4347 policyF2=0.2981 [TREE] fitting production tree on all permissible history... [TREE] production summary={'n_trees': 96, 'leaf_vocab_size': 73729, 'mean_leaves_per_tree': 768.0, 'min_leaves_per_tree': 768, 'max_leaves_per_tree': 768, 'training_oob_ap': 0.3937443909475677} [TREE-HISTORY-PROD] 50,000/419,467 [TREE-HISTORY-PROD] 100,000/419,467 [TREE-HISTORY-PROD] 150,000/419,467 [TREE-HISTORY-PROD] 200,000/419,467 [TREE-HISTORY-PROD] 250,000/419,467 [TREE-HISTORY-PROD] 300,000/419,467 [TREE-HISTORY-PROD] 350,000/419,467 [TREE-HISTORY-PROD] 400,000/419,467 [TREE-HISTORY-PROD] 419,467/419,467 [TREE-TARGET-PROD] 50,000/50,698 [TREE-TARGET-PROD] 50,698/50,698 [HISTORY STORE] production history... [HISTORY STORE] 50,000/419,467 [HISTORY STORE] 100,000/419,467 [HISTORY STORE] 150,000/419,467 [HISTORY STORE] 200,000/419,467 [HISTORY STORE] 250,000/419,467 [HISTORY STORE] 300,000/419,467 [HISTORY STORE] 350,000/419,467 [HISTORY STORE] 400,000/419,467 [HISTORY STORE] production target... [HISTORY STORE] 50,000/50,698 FOLD 5 TARGET STUDENT-HISTORY SUPPORT -------------------------------------------------------------------------------- faculty rows prevalence history_mean history_zero_rate history_failure_mean same_course_history_mean course_seen_mean new_course_rate history_grade_present_rate fold khoa_cong_nghe_thong_tin 6398 0.054861 12.477024 0.297906 0.294780 0.000000 1382.800250 0.058456 1.0 5 khoa_quan_tri_kinh_doanh_va_du_lich 7604 0.053524 10.980405 0.315755 0.261310 0.000000 1750.187927 0.021568 1.0 5 khoa_quoc_te_hoc 2674 0.021690 9.859761 0.379955 0.085266 0.000000 1444.537771 0.075916 1.0 5 khoa_tieng_anh 8345 0.015818 11.285800 0.159856 0.073457 0.000120 1114.017735 0.228520 1.0 5 khoa_tieng_bo_dao_nha 1138 0.070299 13.062390 0.244288 0.434974 0.000000 1452.131810 0.070299 1.0 5 khoa_tieng_duc 1975 0.029873 10.889114 0.347848 0.155949 0.000506 1620.187342 0.112405 1.0 5 khoa_tieng_han_quoc 3573 0.018752 10.959138 0.271481 0.061853 0.000000 1458.790932 0.063812 1.0 5 khoa_tieng_italia 2129 0.038985 13.644434 0.235322 0.165806 0.000000 1482.153593 0.177548 1.0 5 khoa_tieng_nga 2047 0.065462 14.661944 0.281876 0.331216 0.000000 1260.165608 0.100635 1.0 5 khoa_tieng_nhat 2593 0.026610 9.507906 0.288855 0.082144 0.000386 1703.700347 0.187813 1.0 5 khoa_tieng_phap 2983 0.019108 11.662756 0.290982 0.094200 0.000000 1362.440161 0.089842 1.0 5 khoa_tieng_tay_ban_nha 1606 0.052304 12.363636 0.315068 0.344334 0.000000 1668.222914 0.153798 1.0 5 khoa_tieng_trung_quoc 6995 0.022159 13.279056 0.184132 0.101072 0.000000 956.745390 0.266762 1.0 5 khoa_viet_nam_hoc 638 0.095611 6.097179 0.542320 0.216301 0.000000 118.238245 0.122257 1.0 5 [REFIT MEMORY] epoch=01/3 loss=0.15482 BCE=0.11919 rank=0.16323 joint=0.06472 ability=0.00000 [REFIT MEMORY] epoch=03/3 loss=0.14407 BCE=0.11451 rank=0.14045 joint=0.04803 ability=0.00000 [VARIANT suite26_tree_memory] selected_epochs=3 target macroAP=0.2563 [REFIT TAIR] epoch=01/4 loss=0.16017 BCE=0.11836 rank=0.17504 joint=0.06624 ability=0.08896 [REFIT TAIR] epoch=04/4 loss=0.14422 BCE=0.11541 rank=0.11285 joint=0.04382 ability=0.06849 [VARIANT suite26_tair] selected_epochs=4 target macroAP=0.2578 FOLD 5 TREE CURRENT-STATE FEATURE IMPORTANCE -------------------------------------------------------------------------------- rank feature importance fold 1 prev_semester_gpa10 0.068720 5 2 course_status_FIT ||| ứng_dụng_công_nghệ_thông_tin ||| Computer Skills 0.060538 5 3 hist_course_pass_rate 0.052675 5 4 prev_failed_credits 0.044146 5 5 recent3_course_grade10_mean 0.039935 5 6 prev_cumulative_gpa10 0.037468 5 7 hist_component_K2_mean 0.025956 5 8 hist_semester_gpa10_mean 0.025186 5 9 recent3_warning_count 0.024220 5 10 prev_outstanding_failed_credits 0.024185 5 11 recent3_semester_gpa10_mean 0.023520 5 12 recent3_component_grade_mean 0.021512 5 13 hist_course_grade10_mean 0.017143 5 14 hist_passed_credits_sum 0.016552 5 15 hist_component_grade_mean 0.016370 5 16 hist_component_low_rate 0.014687 5 17 hist_warning_in_last_semester 0.013708 5 18 hist_course_grade10_std 0.013210 5 19 recent3_course_grade10_std 0.013152 5 20 recent3_course_grade10_min 0.010499 5 21 recent3_course_grade10_count 0.010134 5 22 recent3_component_grade_std 0.009826 5 23 target_semester_registered_credits 0.009514 5 24 hist_component_numeric_rate 0.009316 5 25 hist_warning_rate 0.008789 5 26 hist_course_grade10_median 0.008778 5 27 target_semester_difficulty_weighted_workload 0.008609 5 28 recent3_course_grade10_median 0.008459 5 29 hist_component_special_rate 0.008175 5 30 recent3_component_grade_count 0.007348 5 31 hist_component_T1_count 0.007321 5 32 recent3_semester_count 0.007009 5 33 hist_component_grade_count 0.006888 5 34 hist_main_semester_count 0.006741 5 35 hist_course_grade10_count 0.006601 5 36 hist_warning_consecutive_max 0.006543 5 37 prev_ssvhk_semester_ordinal 0.006374 5 38 hist_failed_credits_sum 0.006282 5 39 hist_component_courses 0.006102 5 40 hist_course_grade10_min 0.006035 5 SUITE26 TARGET FOLD 5 — NEW + AVAILABLE REFERENCE RESULTS -------------------------------------------------------------------------------- fold faculty model rows failures prevalence ap auc brier ece10 mean_score calibration_gap precision_at_10 recall_at_10 f1_at_10 fbeta_at_10 precision_at_15 recall_at_15 f1_at_15 fbeta_at_15 precision_at_20 recall_at_20 f1_at_20 fbeta_at_20 precision_at_25 recall_at_25 f1_at_25 fbeta_at_25 5 khoa_cong_nghe_thong_tin committee 6398 351 0.054861 0.275062 0.829203 0.045719 0.008376 0.062938 0.008077 0.245312 0.447293 0.316852 0.384051 0.210417 0.575499 0.308162 0.427242 0.182812 0.666667 0.286941 0.435917 0.157500 0.717949 0.258329 0.419441 5 khoa_cong_nghe_thong_tin council 6398 351 0.054861 0.291789 0.834749 0.052825 0.074601 0.129462 0.074601 0.260937 0.475783 0.337033 0.408513 0.214583 0.586895 0.314264 0.435702 0.190625 0.695157 0.299203 0.454545 0.162500 0.740741 0.266530 0.432756 5 khoa_cong_nghe_thong_tin suite14 6398 351 0.054861 0.275062 0.829203 0.045719 0.008376 0.062938 0.008077 0.245312 0.447293 0.316852 0.384051 0.210417 0.575499 0.308162 0.427242 0.182812 0.666667 0.286941 0.435917 0.157500 0.717949 0.258329 0.419441 5 khoa_cong_nghe_thong_tin suite16 6398 351 0.054861 0.280247 0.830107 0.096360 0.150201 0.205062 0.150201 0.271875 0.495726 0.351160 0.425636 0.216667 0.592593 0.317315 0.439932 0.180469 0.658120 0.283262 0.430328 0.152500 0.695157 0.250128 0.406125 5 khoa_cong_nghe_thong_tin suite17 6398 351 0.054861 0.274191 0.832320 0.045803 0.011625 0.065625 0.010764 0.248438 0.452991 0.320888 0.388943 0.213542 0.584046 0.312738 0.433587 0.182812 0.666667 0.286941 0.435917 0.154375 0.703704 0.253203 0.411119 5 khoa_cong_nghe_thong_tin suite18 6398 351 0.054861 0.278269 0.834254 0.045618 0.011737 0.065491 0.010630 0.251563 0.458689 0.324924 0.393836 0.215625 0.589744 0.315789 0.437817 0.183594 0.669516 0.288167 0.437779 0.156250 0.712251 0.256279 0.416112 5 khoa_cong_nghe_thong_tin suite20 6398 351 0.054861 0.231233 0.812766 0.083022 0.116500 0.171361 0.116500 0.234375 0.427350 0.302725 0.366928 0.197917 0.541311 0.289855 0.401861 0.167187 0.609687 0.262416 0.398659 0.151875 0.692308 0.249103 0.404461 5 khoa_cong_nghe_thong_tin suite21 6398 351 0.054861 0.279536 0.832935 0.046561 0.019534 0.074244 0.019383 0.250000 0.455840 0.322906 0.391389 0.209375 0.572650 0.306636 0.425127 0.185938 0.678063 0.291845 0.443368 0.161875 0.737892 0.265505 0.431092 5 khoa_cong_nghe_thong_tin suite22 6398 351 0.054861 0.276968 0.832893 0.045512 0.007016 0.061754 0.006893 0.246875 0.450142 0.318870 0.386497 0.211458 0.578348 0.309687 0.429357 0.181250 0.660969 0.284488 0.432191 0.159375 0.726496 0.261404 0.424434 5 khoa_cong_nghe_thong_tin suite22_primary 6398 351 0.054861 0.249137 0.817907 0.046562 0.010990 0.065366 0.010505 0.232813 0.424501 0.300706 0.364481 0.197917 0.541311 0.289855 0.401861 0.177344 0.646724 0.278357 0.422876 0.156250 0.712251 0.256279 0.416112 5 khoa_cong_nghe_thong_tin suite22_relational 6398 351 0.054861 0.277377 0.830912 0.046067 0.022522 0.034875 -0.019986 0.262500 0.478632 0.339051 0.410959 0.212500 0.581197 0.311213 0.431472 0.183594 0.669516 0.288167 0.437779 0.161875 0.737892 0.265505 0.431092 5 khoa_cong_nghe_thong_tin suite23 6398 351 0.054861 0.283065 0.836904 0.045209 0.004664 0.055692 0.000831 0.260937 0.475783 0.337033 0.408513 0.215625 0.589744 0.315789 0.437817 0.183594 0.669516 0.288167 0.437779 0.158750 0.723647 0.260379 0.422770 5 khoa_cong_nghe_thong_tin suite23_graph 6398 351 0.054861 0.251980 0.829147 0.046156 0.013971 0.043481 -0.011380 0.243750 0.444444 0.314834 0.381605 0.208333 0.569801 0.305111 0.423012 0.181250 0.660969 0.284488 0.432191 0.157500 0.717949 0.258329 0.419441 5 khoa_cong_nghe_thong_tin suite24 6398 351 0.054861 0.287902 0.845912 0.046502 0.028276 0.029662 -0.025199 0.259375 0.472934 0.335015 0.406067 0.221875 0.606838 0.324943 0.450508 0.189844 0.692308 0.297977 0.452683 0.166875 0.760684 0.273706 0.444407 5 khoa_cong_nghe_thong_tin suite24_posthoc 6398 351 0.054861 0.268832 0.833084 0.046317 0.021724 0.033923 -0.020937 0.250000 0.455840 0.322906 0.391389 0.205208 0.561254 0.300534 0.416667 0.178906 0.652422 0.280809 0.426602 0.159375 0.726496 0.261404 0.424434 5 khoa_cong_nghe_thong_tin suite25 6398 351 0.054861 0.274687 0.850882 0.046800 0.021033 0.034127 -0.020734 0.251563 0.458689 0.324924 0.393836 0.216667 0.592593 0.317315 0.439932 0.192969 0.703704 0.302882 0.460134 0.171875 0.783476 0.281907 0.457723 5 khoa_cong_nghe_thong_tin suite25_blend 6398 351 0.054861 0.281965 0.835908 0.045248 0.005137 0.058284 0.003423 0.250000 0.455840 0.322906 0.391389 0.214583 0.586895 0.314264 0.435702 0.185156 0.675214 0.290619 0.441505 0.161875 0.737892 0.265505 0.431092 5 khoa_cong_nghe_thong_tin suite26_committee_blend 6398 351 0.054861 0.283148 0.841034 0.044965 0.006435 0.054882 0.000021 0.260937 0.475783 0.337033 0.408513 0.220833 0.603989 0.323417 0.448393 0.189062 0.689459 0.296750 0.450820 0.165625 0.754986 0.271656 0.441079 5 khoa_cong_nghe_thong_tin suite26_joint_head 6398 351 0.054861 0.271793 0.829288 0.045971 0.015293 0.040334 -0.014527 0.250000 0.455840 0.322906 0.391389 0.213542 0.584046 0.312738 0.433587 0.178906 0.652422 0.280809 0.426602 0.156875 0.715100 0.257304 0.417776 5 khoa_cong_nghe_thong_tin suite26_tair 6398 351 0.054861 0.231994 0.824625 0.046544 0.011151 0.045796 -0.009065 0.256250 0.467236 0.330979 0.401174 0.210417 0.575499 0.308162 0.427242 0.184375 0.672365 0.289393 0.439642 0.157500 0.717949 0.258329 0.419441 5 khoa_cong_nghe_thong_tin suite26_tree 6398 351 0.054861 0.252582 0.832151 0.047209 0.013649 0.051879 -0.002981 0.242188 0.441595 0.312815 0.379159 0.210417 0.575499 0.308162 0.427242 0.182812 0.666667 0.286941 0.435917 0.159375 0.726496 0.261404 0.424434 5 khoa_cong_nghe_thong_tin suite26_tree_memory 6398 351 0.054861 0.228762 0.825562 0.047051 0.020765 0.037185 -0.017676 0.256250 0.467236 0.330979 0.401174 0.210417 0.575499 0.308162 0.427242 0.185938 0.678063 0.291845 0.443368 0.158125 0.720798 0.259354 0.421105 5 khoa_cong_nghe_thong_tin v2 6398 351 0.054861 0.266546 0.829637 0.098030 0.124563 0.179424 0.124563 0.254688 0.464387 0.328961 0.398728 0.215625 0.589744 0.315789 0.437817 0.180469 0.658120 0.283262 0.430328 0.161875 0.737892 0.265505 0.431092 5 khoa_quan_tri_kinh_doanh_va_du_lich committee 7604 407 0.053524 0.372871 0.876945 0.040595 0.007197 0.050238 -0.003286 0.318421 0.594595 0.414739 0.506700 0.242770 0.680590 0.357881 0.500181 0.200526 0.749386 0.316390 0.484281 0.169911 0.793612 0.279896 0.457637 5 khoa_quan_tri_kinh_doanh_va_du_lich suite14 7604 407 0.053524 0.406201 0.888067 0.039547 0.012771 0.066296 0.012771 0.326316 0.609337 0.425021 0.519263 0.255039 0.714988 0.375969 0.525460 0.209073 0.781327 0.329876 0.504922 0.178327 0.832924 0.293761 0.480306 5 khoa_quan_tri_kinh_doanh_va_du_lich suite16 7604 407 0.053524 0.376968 0.883435 0.073638 0.118092 0.171616 0.118092 0.315789 0.589681 0.411311 0.502513 0.255916 0.717445 0.377261 0.527266 0.202498 0.756757 0.319502 0.489044 0.173067 0.808354 0.285095 0.466138 5 khoa_quan_tri_kinh_doanh_va_du_lich suite17 7604 407 0.053524 0.377594 0.879029 0.040626 0.008044 0.056042 0.002517 0.322368 0.601966 0.419880 0.512982 0.247152 0.692875 0.364341 0.509209 0.197239 0.737101 0.311203 0.476342 0.169911 0.793612 0.279896 0.457637 5 khoa_quan_tri_kinh_doanh_va_du_lich suite18 7604 407 0.053524 0.376814 0.879893 0.040659 0.008217 0.056023 0.002499 0.319737 0.597052 0.416452 0.508794 0.243646 0.683047 0.359173 0.501986 0.197896 0.739558 0.312241 0.477930 0.170963 0.798526 0.281629 0.460470 5 khoa_quan_tri_kinh_doanh_va_du_lich suite20 7604 407 0.053524 0.305657 0.867640 0.056297 0.056660 0.110184 0.056660 0.300000 0.560197 0.390746 0.477387 0.235758 0.660934 0.347545 0.485735 0.193294 0.722359 0.304979 0.466815 0.166754 0.778870 0.274697 0.449136 5 khoa_quan_tri_kinh_doanh_va_du_lich suite21 7604 407 0.053524 0.380964 0.881897 0.040184 0.010399 0.060684 0.007160 0.325000 0.606880 0.423308 0.517169 0.241893 0.678133 0.356589 0.498375 0.204471 0.764128 0.322614 0.493808 0.170963 0.798526 0.281629 0.460470 5 khoa_quan_tri_kinh_doanh_va_du_lich suite22 7604 407 0.053524 0.390041 0.884977 0.040271 0.007654 0.046892 -0.006632 0.322368 0.601966 0.419880 0.512982 0.246275 0.690418 0.363049 0.507403 0.204471 0.764128 0.322614 0.493808 0.171489 0.800983 0.282496 0.461887 5 khoa_quan_tri_kinh_doanh_va_du_lich suite22_primary 7604 407 0.053524 0.386975 0.890858 0.040630 0.011821 0.042094 -0.011430 0.311842 0.582310 0.406170 0.496231 0.248028 0.695332 0.365633 0.511015 0.213018 0.796069 0.336100 0.514449 0.177801 0.830467 0.292894 0.478889 5 khoa_quan_tri_kinh_doanh_va_du_lich suite22_relational 7604 407 0.053524 0.404675 0.881578 0.041873 0.027655 0.026184 -0.027341 0.325000 0.606880 0.423308 0.517169 0.255916 0.717445 0.377261 0.527266 0.203156 0.759214 0.320539 0.490632 0.172541 0.805897 0.284229 0.464721 5 khoa_quan_tri_kinh_doanh_va_du_lich suite23 7604 407 0.053524 0.396607 0.884712 0.041336 0.016804 0.036936 -0.016588 0.321053 0.599509 0.418166 0.510888 0.248028 0.695332 0.365633 0.511015 0.206443 0.771499 0.325726 0.498571 0.173067 0.808354 0.285095 0.466138 5 khoa_quan_tri_kinh_doanh_va_du_lich suite23_graph 7604 407 0.053524 0.349049 0.873660 0.045031 0.030397 0.023127 -0.030397 0.294737 0.550369 0.383890 0.469012 0.238387 0.668305 0.351421 0.491152 0.196581 0.734644 0.310166 0.474754 0.169911 0.793612 0.279896 0.457637 5 khoa_quan_tri_kinh_doanh_va_du_lich suite24 7604 407 0.053524 0.381783 0.884045 0.042771 0.029935 0.024077 -0.029447 0.306579 0.572482 0.399314 0.487856 0.242770 0.680590 0.357881 0.500181 0.204471 0.764128 0.322614 0.493808 0.175171 0.818182 0.288562 0.471805 5 khoa_quan_tri_kinh_doanh_va_du_lich suite24_posthoc 7604 407 0.053524 0.395747 0.884027 0.042322 0.023092 0.030591 -0.022934 0.313158 0.584767 0.407883 0.498325 0.248904 0.697789 0.366925 0.512821 0.202498 0.756757 0.319502 0.489044 0.172541 0.805897 0.284229 0.464721 5 khoa_quan_tri_kinh_doanh_va_du_lich suite25 7604 407 0.053524 0.400600 0.877540 0.043320 0.022525 0.030999 -0.022525 0.311842 0.582310 0.406170 0.496231 0.236635 0.663391 0.348837 0.487541 0.192636 0.719902 0.303942 0.465227 0.166754 0.778870 0.274697 0.449136 5 khoa_quan_tri_kinh_doanh_va_du_lich suite25_blend 7604 407 0.053524 0.383507 0.880526 0.040509 0.009661 0.047257 -0.006267 0.318421 0.594595 0.414739 0.506700 0.242770 0.680590 0.357881 0.500181 0.202498 0.756757 0.319502 0.489044 0.170437 0.796069 0.280763 0.459054 5 khoa_quan_tri_kinh_doanh_va_du_lich suite26_committee_blend 7604 407 0.053524 0.368573 0.880719 0.041071 0.007958 0.047098 -0.006426 0.317105 0.592138 0.413025 0.504606 0.242770 0.680590 0.357881 0.500181 0.200526 0.749386 0.316390 0.484281 0.173067 0.808354 0.285095 0.466138 5 khoa_quan_tri_kinh_doanh_va_du_lich suite26_joint_head 7604 407 0.053524 0.350288 0.871698 0.042234 0.011111 0.042413 -0.011111 0.296053 0.552826 0.385604 0.471106 0.238387 0.668305 0.351421 0.491152 0.203156 0.759214 0.320539 0.490632 0.175697 0.820639 0.289428 0.473222 5 khoa_quan_tri_kinh_doanh_va_du_lich suite26_tair 7604 407 0.053524 0.251818 0.851213 0.044672 0.008417 0.045947 -0.007577 0.256579 0.479115 0.334190 0.408291 0.212095 0.594595 0.312661 0.436981 0.180145 0.673219 0.284232 0.435059 0.158864 0.742015 0.261698 0.427883 5 khoa_quan_tri_kinh_doanh_va_du_lich suite26_tree 7604 407 0.053524 0.305343 0.877199 0.042834 0.009425 0.050169 -0.003356 0.302632 0.565111 0.394173 0.481575 0.238387 0.668305 0.351421 0.491152 0.203156 0.759214 0.320539 0.490632 0.175697 0.820639 0.289428 0.473222 5 khoa_quan_tri_kinh_doanh_va_du_lich suite26_tree_memory 7604 407 0.053524 0.245154 0.853684 0.045100 0.016762 0.037682 -0.015843 0.257895 0.481572 0.335904 0.410385 0.217353 0.609337 0.320413 0.447815 0.181460 0.678133 0.286307 0.438234 0.161494 0.754300 0.266031 0.434967 5 khoa_quoc_te_hoc committee 2674 58 0.021690 0.163461 0.834645 0.019653 0.007283 0.028280 0.006590 0.104869 0.482759 0.172308 0.280561 0.074813 0.517241 0.130719 0.236967 0.069159 0.637931 0.124789 0.241199 0.067365 0.775862 0.123967 0.250000 5 khoa_quoc_te_hoc suite14 2674 58 0.021690 0.163461 0.834645 0.019653 0.007283 0.028280 0.006590 0.104869 0.482759 0.172308 0.280561 0.074813 0.517241 0.130719 0.236967 0.069159 0.637931 0.124789 0.241199 0.067365 0.775862 0.123967 0.250000 5 khoa_quoc_te_hoc suite16 2674 58 0.021690 0.164915 0.839469 0.048937 0.096085 0.117775 0.096085 0.116105 0.534483 0.190769 0.310621 0.089776 0.620690 0.156863 0.284360 0.069159 0.637931 0.124789 0.241199 0.059880 0.689655 0.110193 0.222222 5 khoa_quoc_te_hoc suite17 2674 58 0.021690 0.172231 0.839805 0.019748 0.008996 0.028626 0.006935 0.104869 0.482759 0.172308 0.280561 0.084788 0.586207 0.148148 0.268562 0.069159 0.637931 0.124789 0.241199 0.061377 0.706897 0.112948 0.227778 5 khoa_quoc_te_hoc suite18 2674 58 0.021690 0.171025 0.842059 0.019735 0.009032 0.028667 0.006976 0.101124 0.465517 0.166154 0.270541 0.082294 0.568966 0.143791 0.260664 0.067290 0.620690 0.121417 0.234681 0.065868 0.758621 0.121212 0.244444 5 khoa_quoc_te_hoc suite20 2674 58 0.021690 0.138389 0.835713 0.097286 0.150571 0.172261 0.150571 0.116105 0.534483 0.190769 0.310621 0.089776 0.620690 0.156863 0.284360 0.072897 0.672414 0.131535 0.254237 0.067365 0.775862 0.123967 0.250000 5 khoa_quoc_te_hoc suite21 2674 58 0.021690 0.182719 0.838593 0.020402 0.015710 0.037400 0.015710 0.101124 0.465517 0.166154 0.270541 0.084788 0.586207 0.148148 0.268562 0.074766 0.689655 0.134907 0.260756 0.062874 0.724138 0.115702 0.233333 5 khoa_quoc_te_hoc suite22 2674 58 0.021690 0.193638 0.853903 0.019218 0.006260 0.026821 0.005131 0.108614 0.500000 0.178462 0.290581 0.082294 0.568966 0.143791 0.260664 0.076636 0.706897 0.138280 0.267275 0.070359 0.810345 0.129477 0.261111 5 khoa_quoc_te_hoc suite22_primary 2674 58 0.021690 0.230851 0.864244 0.018972 0.008664 0.028609 0.006919 0.112360 0.517241 0.184615 0.300601 0.092269 0.637931 0.161220 0.292259 0.084112 0.775862 0.151771 0.293351 0.071856 0.827586 0.132231 0.266667 5 khoa_quoc_te_hoc suite22_relational 2674 58 0.021690 0.226230 0.835653 0.019285 0.012727 0.009723 -0.011967 0.097378 0.448276 0.160000 0.260521 0.082294 0.568966 0.143791 0.260664 0.071028 0.655172 0.128162 0.247718 0.067365 0.775862 0.123967 0.250000 5 khoa_quoc_te_hoc suite23 2674 58 0.021690 0.181769 0.850232 0.019318 0.002133 0.019692 -0.001999 0.112360 0.517241 0.184615 0.300601 0.084788 0.586207 0.148148 0.268562 0.071028 0.655172 0.128162 0.247718 0.067365 0.775862 0.123967 0.250000 5 khoa_quoc_te_hoc suite23_graph 2674 58 0.021690 0.188125 0.849474 0.020221 0.013351 0.008339 -0.013351 0.108614 0.500000 0.178462 0.290581 0.082294 0.568966 0.143791 0.260664 0.067290 0.620690 0.121417 0.234681 0.065868 0.758621 0.121212 0.244444 5 khoa_quoc_te_hoc suite24 2674 58 0.021690 0.179855 0.837334 0.019586 0.011150 0.011730 -0.009961 0.101124 0.465517 0.166154 0.270541 0.087282 0.603448 0.152505 0.276461 0.069159 0.637931 0.124789 0.241199 0.062874 0.724138 0.115702 0.233333 5 khoa_quoc_te_hoc suite24_posthoc 2674 58 0.021690 0.180594 0.842778 0.019548 0.006421 0.015269 -0.006421 0.089888 0.413793 0.147692 0.240481 0.082294 0.568966 0.143791 0.260664 0.071028 0.655172 0.128162 0.247718 0.062874 0.724138 0.115702 0.233333 5 khoa_quoc_te_hoc suite25 2674 58 0.021690 0.205096 0.869925 0.019224 0.004256 0.022437 0.000747 0.127341 0.586207 0.209231 0.340681 0.094763 0.655172 0.165577 0.300158 0.080374 0.741379 0.145025 0.280313 0.071856 0.827586 0.132231 0.266667 5 khoa_quoc_te_hoc suite25_blend 2674 58 0.021690 0.174358 0.843991 0.019365 0.005868 0.026675 0.004985 0.104869 0.482759 0.172308 0.280561 0.077307 0.534483 0.135076 0.244866 0.076636 0.706897 0.138280 0.267275 0.067365 0.775862 0.123967 0.250000 5 khoa_quoc_te_hoc suite26_committee_blend 2674 58 0.021690 0.190729 0.851155 0.019163 0.006713 0.026720 0.005030 0.101124 0.465517 0.166154 0.270541 0.089776 0.620690 0.156863 0.284360 0.074766 0.689655 0.134907 0.260756 0.065868 0.758621 0.121212 0.244444 5 khoa_quoc_te_hoc suite26_joint_head 2674 58 0.021690 0.208814 0.832364 0.019416 0.005656 0.019238 -0.002452 0.116105 0.534483 0.190769 0.310621 0.087282 0.603448 0.152505 0.276461 0.072897 0.672414 0.131535 0.254237 0.065868 0.758621 0.121212 0.244444 5 khoa_quoc_te_hoc suite26_tair 2674 58 0.021690 0.234358 0.843289 0.019303 0.010696 0.030180 0.008490 0.116105 0.534483 0.190769 0.310621 0.089776 0.620690 0.156863 0.284360 0.071028 0.655172 0.128162 0.247718 0.062874 0.724138 0.115702 0.233333 5 khoa_quoc_te_hoc suite26_tree 2674 58 0.021690 0.201428 0.860339 0.019609 0.005492 0.027182 0.005492 0.108614 0.500000 0.178462 0.290581 0.087282 0.603448 0.152505 0.276461 0.074766 0.689655 0.134907 0.260756 0.067365 0.775862 0.123967 0.250000 5 khoa_quoc_te_hoc suite26_tree_memory 2674 58 0.021690 0.233972 0.843447 0.019012 0.005096 0.022798 0.001108 0.116105 0.534483 0.190769 0.310621 0.092269 0.637931 0.161220 0.292259 0.071028 0.655172 0.128162 0.247718 0.062874 0.724138 0.115702 0.233333 5 khoa_tieng_anh committee 8345 132 0.015818 0.153075 0.832974 0.014608 0.010883 0.026028 0.010210 0.068345 0.431818 0.118012 0.209251 0.059105 0.560606 0.106936 0.207865 0.049730 0.628788 0.092171 0.188894 0.043145 0.681818 0.081154 0.172150 5 khoa_tieng_anh suite14 8345 132 0.015818 0.153075 0.832974 0.014608 0.010883 0.026028 0.010210 0.068345 0.431818 0.118012 0.209251 0.059105 0.560606 0.106936 0.207865 0.049730 0.628788 0.092171 0.188894 0.043145 0.681818 0.081154 0.172150 5 khoa_tieng_anh suite16 8345 132 0.015818 0.156690 0.838705 0.041010 0.096016 0.111834 0.096016 0.067146 0.424242 0.115942 0.205580 0.054313 0.515152 0.098266 0.191011 0.045536 0.575758 0.084398 0.172963 0.042186 0.666667 0.079351 0.168324 5 khoa_tieng_anh suite17 8345 132 0.015818 0.151762 0.834277 0.015159 0.015103 0.030260 0.014443 0.073141 0.462121 0.126294 0.223935 0.055911 0.530303 0.101156 0.196629 0.044338 0.560606 0.082177 0.168411 0.038830 0.613636 0.073039 0.154935 5 khoa_tieng_anh suite18 8345 132 0.015818 0.158154 0.845429 0.015100 0.015134 0.030275 0.014458 0.077938 0.492424 0.134576 0.238620 0.056709 0.537879 0.102601 0.199438 0.047334 0.598485 0.087729 0.179791 0.044104 0.696970 0.082958 0.175976 5 khoa_tieng_anh suite20 8345 132 0.015818 0.136418 0.857657 0.020990 0.021013 0.036831 0.021013 0.081535 0.515152 0.140787 0.249633 0.067093 0.636364 0.121387 0.235955 0.062313 0.787879 0.115491 0.236686 0.054171 0.856061 0.101894 0.216144 5 khoa_tieng_anh suite21 8345 132 0.015818 0.162112 0.846486 0.014787 0.011371 0.026789 0.010971 0.075540 0.477273 0.130435 0.231278 0.062300 0.590909 0.112717 0.219101 0.049730 0.628788 0.092171 0.188894 0.042665 0.674242 0.080252 0.170237 5 khoa_tieng_anh suite22 8345 132 0.015818 0.180069 0.866314 0.014385 0.008302 0.023377 0.007559 0.077938 0.492424 0.134576 0.238620 0.061502 0.583333 0.111272 0.216292 0.055123 0.696970 0.102165 0.209376 0.053212 0.840909 0.100090 0.212318 5 khoa_tieng_anh suite22_primary 8345 132 0.015818 0.173722 0.874245 0.014516 0.006292 0.021909 0.006091 0.086331 0.545455 0.149068 0.264317 0.071086 0.674242 0.128613 0.250000 0.061714 0.780303 0.114381 0.234411 0.053691 0.848485 0.100992 0.214231 5 khoa_tieng_anh suite22_relational 8345 132 0.015818 0.186836 0.849140 0.014295 0.004809 0.013520 -0.002298 0.087530 0.553030 0.151139 0.267988 0.066294 0.628788 0.119942 0.233146 0.055123 0.696970 0.102165 0.209376 0.047939 0.757576 0.090171 0.191278 5 khoa_tieng_anh suite23 8345 132 0.015818 0.169630 0.839033 0.014347 0.003938 0.018568 0.002750 0.074341 0.469697 0.128364 0.227606 0.058307 0.553030 0.105491 0.205056 0.050330 0.636364 0.093282 0.191170 0.045062 0.712121 0.084761 0.179801 5 khoa_tieng_anh suite23_graph 8345 132 0.015818 0.106655 0.811528 0.015069 0.007138 0.010774 -0.005044 0.076739 0.484848 0.132505 0.234949 0.057508 0.545455 0.104046 0.202247 0.047334 0.598485 0.087729 0.179791 0.041227 0.651515 0.077547 0.164499 5 khoa_tieng_anh suite24 8345 132 0.015818 0.179731 0.835677 0.014356 0.008959 0.007791 -0.008027 0.070743 0.446970 0.122153 0.216593 0.056709 0.537879 0.102601 0.199438 0.047334 0.598485 0.087729 0.179791 0.044104 0.696970 0.082958 0.175976 5 khoa_tieng_anh suite24_posthoc 8345 132 0.015818 0.170673 0.825164 0.014435 0.004149 0.011669 -0.004149 0.068345 0.431818 0.118012 0.209251 0.057508 0.545455 0.104046 0.202247 0.049730 0.628788 0.092171 0.188894 0.043145 0.681818 0.081154 0.172150 5 khoa_tieng_anh suite25 8345 132 0.015818 0.163482 0.828167 0.014466 0.007335 0.009333 -0.006485 0.077938 0.492424 0.134576 0.238620 0.063099 0.598485 0.114162 0.221910 0.052127 0.659091 0.096613 0.197997 0.044583 0.704545 0.083859 0.177888 5 khoa_tieng_anh suite25_blend 8345 132 0.015818 0.174308 0.842719 0.014378 0.007281 0.022495 0.006677 0.076739 0.484848 0.132505 0.234949 0.061502 0.583333 0.111272 0.216292 0.052127 0.659091 0.096613 0.197997 0.043145 0.681818 0.081154 0.172150 5 khoa_tieng_anh suite26_committee_blend 8345 132 0.015818 0.160271 0.855553 0.014326 0.003383 0.018209 0.002392 0.081535 0.515152 0.140787 0.249633 0.061502 0.583333 0.111272 0.216292 0.053325 0.674242 0.098834 0.202549 0.050336 0.795455 0.094680 0.200842 5 khoa_tieng_anh suite26_joint_head 8345 132 0.015818 0.155713 0.765118 0.014577 0.004939 0.011086 -0.004732 0.071942 0.454545 0.124224 0.220264 0.056709 0.537879 0.102601 0.199438 0.050929 0.643939 0.094392 0.193446 0.043624 0.689394 0.082056 0.174063 5 khoa_tieng_anh suite26_tair 8345 132 0.015818 0.141124 0.821934 0.014748 0.007354 0.009612 -0.006206 0.075540 0.477273 0.130435 0.231278 0.067891 0.643939 0.122832 0.238764 0.054524 0.689394 0.101055 0.207101 0.045542 0.719697 0.085663 0.181714 5 khoa_tieng_anh suite26_tree 8345 132 0.015818 0.170730 0.845081 0.014764 0.008483 0.010855 -0.004963 0.092326 0.583333 0.159420 0.282673 0.071885 0.681818 0.130058 0.252809 0.059317 0.750000 0.109939 0.225307 0.050336 0.795455 0.094680 0.200842 5 khoa_tieng_anh suite26_tree_memory 8345 132 0.015818 0.143152 0.822047 0.014858 0.010535 0.006576 -0.009242 0.075540 0.477273 0.130435 0.231278 0.067891 0.643939 0.122832 0.238764 0.054524 0.689394 0.101055 0.207101 0.045062 0.712121 0.084761 0.179801 5 khoa_tieng_bo_dao_nha committee 1138 80 0.070299 0.312913 0.859511 0.055648 0.021055 0.086369 0.016070 0.350877 0.500000 0.412371 0.460829 0.292398 0.625000 0.398406 0.509165 0.245614 0.700000 0.363636 0.510949 0.221831 0.787500 0.346154 0.521523 5 khoa_tieng_bo_dao_nha suite14 1138 80 0.070299 0.312913 0.859511 0.055648 0.021055 0.086369 0.016070 0.350877 0.500000 0.412371 0.460829 0.292398 0.625000 0.398406 0.509165 0.245614 0.700000 0.363636 0.510949 0.221831 0.787500 0.346154 0.521523 5 khoa_tieng_bo_dao_nha suite16 1138 80 0.070299 0.298032 0.859983 0.139784 0.204791 0.275089 0.204791 0.342105 0.487500 0.402062 0.449309 0.298246 0.637500 0.406375 0.519348 0.258772 0.737500 0.383117 0.538321 0.214789 0.762500 0.335165 0.504967 5 khoa_tieng_bo_dao_nha suite17 1138 80 0.070299 0.314971 0.870510 0.055328 0.020889 0.088255 0.017956 0.350877 0.500000 0.412371 0.460829 0.298246 0.637500 0.406375 0.519348 0.258772 0.737500 0.383117 0.538321 0.221831 0.787500 0.346154 0.521523 5 khoa_tieng_bo_dao_nha suite18 1138 80 0.070299 0.317035 0.871337 0.055267 0.021950 0.088628 0.018329 0.359649 0.512500 0.422680 0.472350 0.304094 0.650000 0.414343 0.529532 0.263158 0.750000 0.389610 0.547445 0.221831 0.787500 0.346154 0.521523 5 khoa_tieng_bo_dao_nha suite20 1138 80 0.070299 0.314786 0.864272 0.138032 0.165329 0.235628 0.165329 0.350877 0.500000 0.412371 0.460829 0.304094 0.650000 0.414343 0.529532 0.254386 0.725000 0.376623 0.529197 0.221831 0.787500 0.346154 0.521523 5 khoa_tieng_bo_dao_nha suite21 1138 80 0.070299 0.318277 0.861000 0.059254 0.038254 0.108553 0.038254 0.385965 0.550000 0.453608 0.506912 0.280702 0.600000 0.382470 0.488798 0.236842 0.675000 0.350649 0.492701 0.228873 0.812500 0.357143 0.538079 5 khoa_tieng_bo_dao_nha suite22 1138 80 0.070299 0.331490 0.871255 0.054561 0.021398 0.088414 0.018115 0.368421 0.525000 0.432990 0.483871 0.304094 0.650000 0.414343 0.529532 0.263158 0.750000 0.389610 0.547445 0.225352 0.800000 0.351648 0.529801 5 khoa_tieng_bo_dao_nha suite22_primary 1138 80 0.070299 0.363765 0.883589 0.056326 0.035329 0.105627 0.035329 0.359649 0.512500 0.422680 0.472350 0.292398 0.625000 0.398406 0.509165 0.267544 0.762500 0.396104 0.556569 0.225352 0.800000 0.351648 0.529801 5 khoa_tieng_bo_dao_nha suite22_relational 1138 80 0.070299 0.376075 0.879407 0.055545 0.040618 0.040062 -0.030237 0.385965 0.550000 0.453608 0.506912 0.321637 0.687500 0.438247 0.560081 0.263158 0.750000 0.389610 0.547445 0.225352 0.800000 0.351648 0.529801 5 khoa_tieng_bo_dao_nha suite23 1138 80 0.070299 0.328460 0.867876 0.054356 0.011894 0.073319 0.003020 0.368421 0.525000 0.432990 0.483871 0.309942 0.662500 0.422311 0.539715 0.258772 0.737500 0.383117 0.538321 0.211268 0.750000 0.329670 0.496689 5 khoa_tieng_bo_dao_nha suite23_graph 1138 80 0.070299 0.370697 0.866966 0.054968 0.024040 0.054909 -0.015390 0.315789 0.450000 0.371134 0.414747 0.274854 0.587500 0.374502 0.478615 0.232456 0.662500 0.344156 0.483577 0.211268 0.750000 0.329670 0.496689 5 khoa_tieng_bo_dao_nha suite24 1138 80 0.070299 0.317686 0.860952 0.057536 0.035416 0.044604 -0.025695 0.350877 0.500000 0.412371 0.460829 0.321637 0.687500 0.438247 0.560081 0.263158 0.750000 0.389610 0.547445 0.221831 0.787500 0.346154 0.521523 5 khoa_tieng_bo_dao_nha suite24_posthoc 1138 80 0.070299 0.432150 0.871727 0.053179 0.024241 0.046058 -0.024241 0.350877 0.500000 0.412371 0.460829 0.309942 0.662500 0.422311 0.539715 0.250000 0.712500 0.370130 0.520073 0.221831 0.787500 0.346154 0.521523 5 khoa_tieng_bo_dao_nha suite25 1138 80 0.070299 0.354698 0.880636 0.055766 0.032093 0.040226 -0.030072 0.368421 0.525000 0.432990 0.483871 0.309942 0.662500 0.422311 0.539715 0.276316 0.787500 0.409091 0.574818 0.232394 0.825000 0.362637 0.546358 5 khoa_tieng_bo_dao_nha suite25_blend 1138 80 0.070299 0.321711 0.864615 0.054621 0.017959 0.078626 0.008328 0.359649 0.512500 0.422680 0.472350 0.298246 0.637500 0.406375 0.519348 0.258772 0.737500 0.383117 0.538321 0.221831 0.787500 0.346154 0.521523 5 khoa_tieng_bo_dao_nha suite26_committee_blend 1138 80 0.070299 0.342432 0.873700 0.053411 0.015724 0.074885 0.004586 0.377193 0.537500 0.443299 0.495392 0.327485 0.700000 0.446215 0.570265 0.263158 0.750000 0.389610 0.547445 0.221831 0.787500 0.346154 0.521523 5 khoa_tieng_bo_dao_nha suite26_joint_head 1138 80 0.070299 0.420223 0.854289 0.052857 0.018473 0.054554 -0.015745 0.359649 0.512500 0.422680 0.472350 0.280702 0.600000 0.382470 0.488798 0.254386 0.725000 0.376623 0.529197 0.228873 0.812500 0.357143 0.538079 5 khoa_tieng_bo_dao_nha suite26_tair 1138 80 0.070299 0.384519 0.881528 0.053166 0.019642 0.059544 -0.010755 0.403509 0.575000 0.474227 0.529954 0.345029 0.737500 0.470120 0.600815 0.271930 0.775000 0.402597 0.565693 0.225352 0.800000 0.351648 0.529801 5 khoa_tieng_bo_dao_nha suite26_tree 1138 80 0.070299 0.412550 0.880447 0.055947 0.035807 0.080275 0.009976 0.333333 0.475000 0.391753 0.437788 0.263158 0.562500 0.358566 0.458248 0.258772 0.737500 0.383117 0.538321 0.228873 0.812500 0.357143 0.538079 5 khoa_tieng_bo_dao_nha suite26_tree_memory 1138 80 0.070299 0.381114 0.881073 0.054949 0.031184 0.051607 -0.018692 0.412281 0.587500 0.484536 0.541475 0.345029 0.737500 0.470120 0.600815 0.271930 0.775000 0.402597 0.565693 0.225352 0.800000 0.351648 0.529801 5 khoa_tieng_duc committee 1975 59 0.029873 0.160231 0.868436 0.026970 0.012039 0.041836 0.011963 0.151515 0.508475 0.233463 0.345622 0.135135 0.677966 0.225352 0.375940 0.111392 0.745763 0.193833 0.348653 0.101215 0.847458 0.180832 0.342466 5 khoa_tieng_duc suite14 1975 59 0.029873 0.160231 0.868436 0.026970 0.012039 0.041836 0.011963 0.151515 0.508475 0.233463 0.345622 0.135135 0.677966 0.225352 0.375940 0.111392 0.745763 0.193833 0.348653 0.101215 0.847458 0.180832 0.342466 5 khoa_tieng_duc suite16 1975 59 0.029873 0.202287 0.882192 0.074061 0.147266 0.177139 0.147266 0.191919 0.644068 0.295720 0.437788 0.135135 0.677966 0.225352 0.375940 0.111392 0.745763 0.193833 0.348653 0.103239 0.864407 0.184448 0.349315 5 khoa_tieng_duc suite17 1975 59 0.029873 0.175483 0.873779 0.026741 0.015514 0.045387 0.015514 0.161616 0.542373 0.249027 0.368664 0.135135 0.677966 0.225352 0.375940 0.108861 0.728814 0.189427 0.340729 0.099190 0.830508 0.177215 0.335616 5 khoa_tieng_duc suite18 1975 59 0.029873 0.178440 0.878928 0.026656 0.015456 0.045330 0.015456 0.166667 0.559322 0.256809 0.380184 0.135135 0.677966 0.225352 0.375940 0.118987 0.796610 0.207048 0.372425 0.099190 0.830508 0.177215 0.335616 5 khoa_tieng_duc suite20 1975 59 0.029873 0.241251 0.835573 0.108066 0.151646 0.181519 0.151646 0.156566 0.525424 0.241245 0.357143 0.121622 0.610169 0.202817 0.338346 0.116456 0.779661 0.202643 0.364501 0.101215 0.847458 0.180832 0.342466 5 khoa_tieng_duc suite21 1975 59 0.029873 0.213181 0.878636 0.026657 0.019599 0.049473 0.019599 0.156566 0.525424 0.241245 0.357143 0.135135 0.677966 0.225352 0.375940 0.121519 0.813559 0.211454 0.380349 0.099190 0.830508 0.177215 0.335616 5 khoa_tieng_duc suite22 1975 59 0.029873 0.206841 0.868998 0.026348 0.008697 0.038300 0.008426 0.151515 0.508475 0.233463 0.345622 0.135135 0.677966 0.225352 0.375940 0.108861 0.728814 0.189427 0.340729 0.105263 0.881356 0.188065 0.356164 5 khoa_tieng_duc suite22_primary 1975 59 0.029873 0.266571 0.852986 0.027360 0.014497 0.040016 0.010143 0.151515 0.508475 0.233463 0.345622 0.111486 0.559322 0.185915 0.310150 0.101266 0.677966 0.176211 0.316957 0.099190 0.830508 0.177215 0.335616 5 khoa_tieng_duc suite22_relational 1975 59 0.029873 0.269250 0.861275 0.025463 0.010448 0.029017 -0.000857 0.196970 0.661017 0.303502 0.449309 0.141892 0.711864 0.236620 0.394737 0.113924 0.762712 0.198238 0.356577 0.097166 0.813559 0.173599 0.328767 5 khoa_tieng_duc suite23 1975 59 0.029873 0.185088 0.880480 0.026259 0.008335 0.035650 0.005777 0.171717 0.576271 0.264591 0.391705 0.138514 0.694915 0.230986 0.385338 0.121519 0.813559 0.211454 0.380349 0.099190 0.830508 0.177215 0.335616 5 khoa_tieng_duc suite23_graph 1975 59 0.029873 0.224356 0.869016 0.025721 0.006064 0.030923 0.001050 0.176768 0.593220 0.272374 0.403226 0.125000 0.627119 0.208451 0.347744 0.113924 0.762712 0.198238 0.356577 0.099190 0.830508 0.177215 0.335616 5 khoa_tieng_duc suite24 1975 59 0.029873 0.205457 0.878667 0.026932 0.015325 0.014548 -0.015325 0.171717 0.576271 0.264591 0.391705 0.152027 0.762712 0.253521 0.422932 0.121519 0.813559 0.211454 0.380349 0.103239 0.864407 0.184448 0.349315 5 khoa_tieng_duc suite24_posthoc 1975 59 0.029873 0.218618 0.883576 0.026418 0.010229 0.019700 -0.010173 0.181818 0.610169 0.280156 0.414747 0.141892 0.711864 0.236620 0.394737 0.124051 0.830508 0.215859 0.388273 0.101215 0.847458 0.180832 0.342466 5 khoa_tieng_duc suite25 1975 59 0.029873 0.186982 0.818261 0.026704 0.006276 0.023905 -0.005968 0.126263 0.423729 0.194553 0.288018 0.121622 0.610169 0.202817 0.338346 0.108861 0.728814 0.189427 0.340729 0.093117 0.779661 0.166365 0.315068 5 khoa_tieng_duc suite25_blend 1975 59 0.029873 0.173323 0.869975 0.026637 0.008608 0.038481 0.008608 0.146465 0.491525 0.225681 0.334101 0.131757 0.661017 0.219718 0.366541 0.111392 0.745763 0.193833 0.348653 0.103239 0.864407 0.184448 0.349315 5 khoa_tieng_duc suite26_committee_blend 1975 59 0.029873 0.235377 0.868445 0.025986 0.008997 0.035273 0.005399 0.161616 0.542373 0.249027 0.368664 0.121622 0.610169 0.202817 0.338346 0.118987 0.796610 0.207048 0.372425 0.099190 0.830508 0.177215 0.335616 5 khoa_tieng_duc suite26_joint_head 1975 59 0.029873 0.168429 0.785973 0.026977 0.007119 0.033373 0.003500 0.141414 0.474576 0.217899 0.322581 0.121622 0.610169 0.202817 0.338346 0.103797 0.694915 0.180617 0.324881 0.087045 0.728814 0.155515 0.294521 5 khoa_tieng_duc suite26_tair 1975 59 0.029873 0.241635 0.819460 0.025543 0.002551 0.029000 -0.000873 0.156566 0.525424 0.241245 0.357143 0.114865 0.576271 0.191549 0.319549 0.103797 0.694915 0.180617 0.324881 0.087045 0.728814 0.155515 0.294521 5 khoa_tieng_duc suite26_tree 1975 59 0.029873 0.231720 0.859440 0.026017 0.008066 0.027788 -0.002085 0.141414 0.474576 0.217899 0.322581 0.121622 0.610169 0.202817 0.338346 0.101266 0.677966 0.176211 0.316957 0.099190 0.830508 0.177215 0.335616 5 khoa_tieng_duc suite26_tree_memory 1975 59 0.029873 0.241538 0.819499 0.025545 0.011382 0.022517 -0.007356 0.156566 0.525424 0.241245 0.357143 0.118243 0.593220 0.197183 0.328947 0.103797 0.694915 0.180617 0.324881 0.087045 0.728814 0.155515 0.294521 5 khoa_tieng_han_quoc committee 3573 67 0.018752 0.191086 0.891608 0.016747 0.003539 0.020391 0.001639 0.109244 0.582090 0.183962 0.312000 0.097015 0.776119 0.172471 0.323383 0.078322 0.835821 0.143223 0.284842 0.067189 0.895522 0.125000 0.258398 5 khoa_tieng_han_quoc suite14 3573 67 0.018752 0.191086 0.891608 0.016747 0.003539 0.020391 0.001639 0.109244 0.582090 0.183962 0.312000 0.097015 0.776119 0.172471 0.323383 0.078322 0.835821 0.143223 0.284842 0.067189 0.895522 0.125000 0.258398 5 khoa_tieng_han_quoc suite16 3573 67 0.018752 0.205513 0.905631 0.030966 0.058064 0.076816 0.058064 0.128852 0.686567 0.216981 0.368000 0.102612 0.820896 0.182421 0.342040 0.081119 0.865672 0.148338 0.295015 0.067189 0.895522 0.125000 0.258398 5 khoa_tieng_han_quoc suite17 3573 67 0.018752 0.202184 0.905495 0.016616 0.004917 0.023617 0.004866 0.126050 0.671642 0.212264 0.360000 0.104478 0.835821 0.185738 0.348259 0.082517 0.880597 0.150895 0.300102 0.069429 0.925373 0.129167 0.267011 5 khoa_tieng_han_quoc suite18 3573 67 0.018752 0.197592 0.901208 0.016686 0.005527 0.023672 0.004920 0.126050 0.671642 0.212264 0.360000 0.100746 0.805970 0.179104 0.335821 0.082517 0.880597 0.150895 0.300102 0.068309 0.910448 0.127083 0.262705 5 khoa_tieng_han_quoc suite20 3573 67 0.018752 0.204068 0.897308 0.078270 0.129231 0.147983 0.129231 0.137255 0.731343 0.231132 0.392000 0.098881 0.791045 0.175788 0.329602 0.078322 0.835821 0.143223 0.284842 0.068309 0.910448 0.127083 0.262705 5 khoa_tieng_han_quoc suite21 3573 67 0.018752 0.182205 0.898986 0.016663 0.003400 0.019344 0.000592 0.131653 0.701493 0.221698 0.376000 0.102612 0.820896 0.182421 0.342040 0.079720 0.850746 0.145780 0.289929 0.067189 0.895522 0.125000 0.258398 5 khoa_tieng_han_quoc suite22 3573 67 0.018752 0.221774 0.903730 0.016545 0.002388 0.019067 0.000315 0.123249 0.656716 0.207547 0.352000 0.102612 0.820896 0.182421 0.342040 0.082517 0.880597 0.150895 0.300102 0.068309 0.910448 0.127083 0.262705 5 khoa_tieng_han_quoc suite22_primary 3573 67 0.018752 0.207559 0.901401 0.016469 0.004942 0.019654 0.000902 0.126050 0.671642 0.212264 0.360000 0.091418 0.731343 0.162521 0.304726 0.081119 0.865672 0.148338 0.295015 0.066069 0.880597 0.122917 0.254091 5 khoa_tieng_han_quoc suite22_relational 3573 67 0.018752 0.235304 0.892828 0.016180 0.006914 0.021637 0.002885 0.117647 0.626866 0.198113 0.336000 0.097015 0.776119 0.172471 0.323383 0.076923 0.820896 0.140665 0.279756 0.064950 0.865672 0.120833 0.249785 5 khoa_tieng_han_quoc suite23 3573 67 0.018752 0.191086 0.891608 0.016747 0.003539 0.020391 0.001639 0.109244 0.582090 0.183962 0.312000 0.097015 0.776119 0.172471 0.323383 0.078322 0.835821 0.143223 0.284842 0.067189 0.895522 0.125000 0.258398 5 khoa_tieng_han_quoc suite23_graph 3573 67 0.018752 0.197931 0.919285 0.017332 0.011660 0.007654 -0.011098 0.137255 0.731343 0.231132 0.392000 0.108209 0.865672 0.192371 0.360697 0.082517 0.880597 0.150895 0.300102 0.069429 0.925373 0.129167 0.267011 5 khoa_tieng_han_quoc suite24 3573 67 0.018752 0.205784 0.892568 0.017591 0.013764 0.004988 -0.013764 0.117647 0.626866 0.198113 0.336000 0.097015 0.776119 0.172471 0.323383 0.078322 0.835821 0.143223 0.284842 0.067189 0.895522 0.125000 0.258398 5 khoa_tieng_han_quoc suite24_posthoc 3573 67 0.018752 0.170360 0.886468 0.017678 0.013457 0.005985 -0.012766 0.126050 0.671642 0.212264 0.360000 0.098881 0.791045 0.175788 0.329602 0.076923 0.820896 0.140665 0.279756 0.064950 0.865672 0.120833 0.249785 5 khoa_tieng_han_quoc suite25 3573 67 0.018752 0.227873 0.890271 0.016867 0.005106 0.013988 -0.004764 0.123249 0.656716 0.207547 0.352000 0.089552 0.716418 0.159204 0.298507 0.074126 0.791045 0.135550 0.269583 0.064950 0.865672 0.120833 0.249785 5 khoa_tieng_han_quoc suite25_blend 3573 67 0.018752 0.204840 0.896487 0.016692 0.002532 0.019031 0.000279 0.106443 0.567164 0.179245 0.304000 0.100746 0.805970 0.179104 0.335821 0.078322 0.835821 0.143223 0.284842 0.067189 0.895522 0.125000 0.258398 5 khoa_tieng_han_quoc suite26_committee_blend 3573 67 0.018752 0.145923 0.890842 0.017147 0.004560 0.015034 -0.003717 0.114846 0.611940 0.193396 0.328000 0.098881 0.791045 0.175788 0.329602 0.078322 0.835821 0.143223 0.284842 0.067189 0.895522 0.125000 0.258398 5 khoa_tieng_han_quoc suite26_joint_head 3573 67 0.018752 0.068918 0.644260 0.018003 0.003740 0.016194 -0.002558 0.061625 0.328358 0.103774 0.176000 0.050373 0.402985 0.089552 0.167910 0.041958 0.447761 0.076726 0.152594 0.039194 0.522388 0.072917 0.150732 5 khoa_tieng_han_quoc suite26_tair 3573 67 0.018752 0.064525 0.785238 0.018601 0.011138 0.010274 -0.008478 0.064426 0.343284 0.108491 0.184000 0.057836 0.462687 0.102819 0.192786 0.043357 0.462687 0.079284 0.157681 0.036954 0.492537 0.068750 0.142119 5 khoa_tieng_han_quoc suite26_tree 3573 67 0.018752 0.142938 0.893824 0.017865 0.011692 0.008526 -0.010226 0.114846 0.611940 0.193396 0.328000 0.091418 0.731343 0.162521 0.304726 0.082517 0.880597 0.150895 0.300102 0.067189 0.895522 0.125000 0.258398 5 khoa_tieng_han_quoc suite26_tree_memory 3573 67 0.018752 0.066143 0.785643 0.018763 0.014478 0.006956 -0.011796 0.064426 0.343284 0.108491 0.184000 0.057836 0.462687 0.102819 0.192786 0.043357 0.462687 0.079284 0.157681 0.036954 0.492537 0.068750 0.142119 5 khoa_tieng_italia committee 2129 83 0.038985 0.215484 0.790605 0.034617 0.012862 0.050240 0.011255 0.159624 0.409639 0.229730 0.311927 0.137931 0.530120 0.218905 0.337942 0.124413 0.638554 0.208251 0.349604 0.112782 0.722892 0.195122 0.347222 5 khoa_tieng_italia suite14 2129 83 0.038985 0.215484 0.790605 0.034617 0.012862 0.050240 0.011255 0.159624 0.409639 0.229730 0.311927 0.137931 0.530120 0.218905 0.337942 0.124413 0.638554 0.208251 0.349604 0.112782 0.722892 0.195122 0.347222 5 khoa_tieng_italia suite16 2129 83 0.038985 0.227578 0.798249 0.080552 0.148323 0.187309 0.148323 0.173709 0.445783 0.250000 0.339450 0.150470 0.578313 0.238806 0.368664 0.119718 0.614458 0.200393 0.336412 0.112782 0.722892 0.195122 0.347222 5 khoa_tieng_italia suite17 2129 83 0.038985 0.216127 0.802265 0.034552 0.016212 0.053889 0.014903 0.178404 0.457831 0.256757 0.348624 0.144201 0.554217 0.228856 0.353303 0.124413 0.638554 0.208251 0.349604 0.116541 0.746988 0.201626 0.358796 5 khoa_tieng_italia suite18 2129 83 0.038985 0.226988 0.804279 0.034551 0.016347 0.054073 0.015088 0.178404 0.457831 0.256757 0.348624 0.144201 0.554217 0.228856 0.353303 0.126761 0.650602 0.212181 0.356201 0.114662 0.734940 0.198374 0.353009 5 khoa_tieng_italia suite20 2129 83 0.038985 0.173013 0.826352 0.076229 0.103848 0.142834 0.103848 0.164319 0.421687 0.236486 0.321101 0.141066 0.542169 0.223881 0.345622 0.122066 0.626506 0.204322 0.343008 0.109023 0.698795 0.188618 0.335648 5 khoa_tieng_italia suite21 2129 83 0.038985 0.166010 0.786410 0.036688 0.018033 0.057018 0.018033 0.150235 0.385542 0.216216 0.293578 0.134796 0.518072 0.213930 0.330261 0.115023 0.590361 0.192534 0.323219 0.110902 0.710843 0.191870 0.341435 5 khoa_tieng_italia suite22 2129 83 0.038985 0.212746 0.795178 0.034572 0.007637 0.043424 0.004438 0.164319 0.421687 0.236486 0.321101 0.131661 0.506024 0.208955 0.322581 0.119718 0.614458 0.200393 0.336412 0.116541 0.746988 0.201626 0.358796 5 khoa_tieng_italia suite22_primary 2129 83 0.038985 0.201378 0.774915 0.036533 0.026018 0.040197 0.001212 0.122066 0.313253 0.175676 0.238532 0.109718 0.421687 0.174129 0.268817 0.107981 0.554217 0.180747 0.303430 0.107143 0.686747 0.185366 0.329861 5 khoa_tieng_italia suite22_relational 2129 83 0.038985 0.130084 0.767743 0.037514 0.027980 0.019766 -0.019219 0.117371 0.301205 0.168919 0.229358 0.119122 0.457831 0.189055 0.291859 0.103286 0.530120 0.172888 0.290237 0.090226 0.578313 0.156098 0.277778 5 khoa_tieng_italia suite23 2129 83 0.038985 0.191886 0.786604 0.034656 0.005970 0.035116 -0.003870 0.159624 0.409639 0.229730 0.311927 0.134796 0.518072 0.213930 0.330261 0.126761 0.650602 0.212181 0.356201 0.103383 0.662651 0.178862 0.318287 5 khoa_tieng_italia suite23_graph 2129 83 0.038985 0.143377 0.765381 0.036109 0.020538 0.022626 -0.016359 0.136150 0.349398 0.195946 0.266055 0.119122 0.457831 0.189055 0.291859 0.110329 0.566265 0.184676 0.310026 0.095865 0.614458 0.165854 0.295139 5 khoa_tieng_italia suite24 2129 83 0.038985 0.232644 0.802480 0.034732 0.025309 0.017739 -0.021246 0.173709 0.445783 0.250000 0.339450 0.150470 0.578313 0.238806 0.368664 0.124413 0.638554 0.208251 0.349604 0.109023 0.698795 0.188618 0.335648 5 khoa_tieng_italia suite24_posthoc 2129 83 0.038985 0.189927 0.794159 0.034992 0.020941 0.022048 -0.016937 0.169014 0.433735 0.243243 0.330275 0.134796 0.518072 0.213930 0.330261 0.124413 0.638554 0.208251 0.349604 0.107143 0.686747 0.185366 0.329861 5 khoa_tieng_italia suite25 2129 83 0.038985 0.122942 0.786492 0.037166 0.017972 0.031089 -0.007897 0.140845 0.361446 0.202703 0.275229 0.119122 0.457831 0.189055 0.291859 0.105634 0.542169 0.176817 0.296834 0.097744 0.626506 0.169106 0.300926 5 khoa_tieng_italia suite25_blend 2129 83 0.038985 0.212678 0.797357 0.034550 0.008769 0.045852 0.006866 0.154930 0.397590 0.222973 0.302752 0.141066 0.542169 0.223881 0.345622 0.124413 0.638554 0.208251 0.349604 0.112782 0.722892 0.195122 0.347222 5 khoa_tieng_italia suite26_committee_blend 2129 83 0.038985 0.199283 0.804479 0.034574 0.002330 0.039793 0.000807 0.169014 0.433735 0.243243 0.330275 0.137931 0.530120 0.218905 0.337942 0.126761 0.650602 0.212181 0.356201 0.116541 0.746988 0.201626 0.358796 5 khoa_tieng_italia suite26_joint_head 2129 83 0.038985 0.167432 0.807830 0.036174 0.021284 0.023842 -0.015143 0.154930 0.397590 0.222973 0.302752 0.147335 0.566265 0.233831 0.360983 0.136150 0.698795 0.227898 0.382586 0.112782 0.722892 0.195122 0.347222 5 khoa_tieng_italia suite26_tair 2129 83 0.038985 0.127885 0.792157 0.036395 0.018637 0.027605 -0.011381 0.164319 0.421687 0.236486 0.321101 0.122257 0.469880 0.194030 0.299539 0.105634 0.542169 0.176817 0.296834 0.099624 0.638554 0.172358 0.306713 5 khoa_tieng_italia suite26_tree 2129 83 0.038985 0.153636 0.800769 0.037029 0.020409 0.032270 -0.006715 0.154930 0.397590 0.222973 0.302752 0.144201 0.554217 0.228856 0.353303 0.131455 0.674699 0.220039 0.369393 0.114662 0.734940 0.198374 0.353009 5 khoa_tieng_italia suite26_tree_memory 2129 83 0.038985 0.127852 0.792222 0.036708 0.022367 0.021156 -0.017830 0.164319 0.421687 0.236486 0.321101 0.122257 0.469880 0.194030 0.299539 0.105634 0.542169 0.176817 0.296834 0.099624 0.638554 0.172358 0.306713 5 khoa_tieng_nga committee 2047 134 0.065462 0.465978 0.926089 0.045760 0.030811 0.096214 0.030752 0.414634 0.634328 0.501475 0.573549 0.338762 0.776119 0.471655 0.616845 0.290954 0.888060 0.438306 0.629630 0.244141 0.932836 0.386997 0.596374 5 khoa_tieng_nga suite14 2047 134 0.065462 0.480738 0.934260 0.046716 0.043760 0.109222 0.043760 0.409756 0.626866 0.495575 0.566802 0.358306 0.820896 0.498866 0.652432 0.298289 0.910448 0.449355 0.645503 0.248047 0.947761 0.393189 0.605916 5 khoa_tieng_nga suite16 2047 134 0.065462 0.466422 0.921934 0.120902 0.203914 0.269376 0.203914 0.414634 0.634328 0.501475 0.573549 0.325733 0.746269 0.453515 0.593120 0.281174 0.858209 0.423573 0.608466 0.244141 0.932836 0.386997 0.596374 5 khoa_tieng_nga suite17 2047 134 0.065462 0.467819 0.923694 0.046159 0.038407 0.099953 0.034491 0.400000 0.611940 0.483776 0.553306 0.338762 0.776119 0.471655 0.616845 0.293399 0.895522 0.441989 0.634921 0.236328 0.902985 0.374613 0.577290 5 khoa_tieng_nga suite18 2047 134 0.065462 0.469949 0.925223 0.046024 0.037416 0.100476 0.035015 0.404878 0.619403 0.489676 0.560054 0.338762 0.776119 0.471655 0.616845 0.290954 0.888060 0.438306 0.629630 0.238281 0.910448 0.377709 0.582061 5 khoa_tieng_nga suite20 2047 134 0.065462 0.408238 0.913485 0.110982 0.160892 0.226354 0.160892 0.375610 0.574627 0.454277 0.519568 0.332248 0.761194 0.462585 0.604982 0.283619 0.865672 0.427256 0.613757 0.234375 0.895522 0.371517 0.572519 5 khoa_tieng_nga suite21 2047 134 0.065462 0.475666 0.925660 0.048546 0.050328 0.115790 0.050328 0.400000 0.611940 0.483776 0.553306 0.342020 0.783582 0.476190 0.622776 0.281174 0.858209 0.423573 0.608466 0.244141 0.932836 0.386997 0.596374 5 khoa_tieng_nga suite22 2047 134 0.065462 0.493713 0.928833 0.044078 0.022050 0.087121 0.021660 0.409756 0.626866 0.495575 0.566802 0.351792 0.805970 0.489796 0.640569 0.290954 0.888060 0.438306 0.629630 0.246094 0.940299 0.390093 0.601145 5 khoa_tieng_nga suite22_primary 2047 134 0.065462 0.515900 0.924944 0.043081 0.013637 0.076566 0.011104 0.424390 0.649254 0.513274 0.587045 0.351792 0.805970 0.489796 0.640569 0.283619 0.865672 0.427256 0.613757 0.238281 0.910448 0.377709 0.582061 5 khoa_tieng_nga suite22_relational 2047 134 0.065462 0.504120 0.905181 0.043788 0.019070 0.055368 -0.010094 0.424390 0.649254 0.513274 0.587045 0.332248 0.761194 0.462585 0.604982 0.264059 0.805970 0.397790 0.571429 0.218750 0.835821 0.346749 0.534351 5 khoa_tieng_nga suite23 2047 134 0.065462 0.478671 0.929376 0.044281 0.028356 0.085028 0.019566 0.404878 0.619403 0.489676 0.560054 0.351792 0.805970 0.489796 0.640569 0.295844 0.902985 0.445672 0.640212 0.242188 0.925373 0.383901 0.591603 5 khoa_tieng_nga suite23_graph 2047 134 0.065462 0.496562 0.914641 0.044549 0.019400 0.046736 -0.018725 0.400000 0.611940 0.483776 0.553306 0.332248 0.761194 0.462585 0.604982 0.268949 0.820896 0.405157 0.582011 0.230469 0.880597 0.365325 0.562977 5 khoa_tieng_nga suite24 2047 134 0.065462 0.478848 0.921687 0.044704 0.019556 0.058975 -0.006487 0.419512 0.641791 0.507375 0.580297 0.342020 0.783582 0.476190 0.622776 0.273839 0.835821 0.412523 0.592593 0.234375 0.895522 0.371517 0.572519 5 khoa_tieng_nga suite24_posthoc 2047 134 0.065462 0.522048 0.927710 0.042964 0.012894 0.054974 -0.010488 0.429268 0.656716 0.519174 0.593792 0.338762 0.776119 0.471655 0.616845 0.286064 0.873134 0.430939 0.619048 0.236328 0.902985 0.374613 0.577290 5 khoa_tieng_nga suite25 2047 134 0.065462 0.572156 0.931188 0.042549 0.020361 0.047601 -0.017861 0.463415 0.708955 0.560472 0.641026 0.342020 0.783582 0.476190 0.622776 0.268949 0.820896 0.405157 0.582011 0.236328 0.902985 0.374613 0.577290 5 khoa_tieng_nga suite25_blend 2047 134 0.065462 0.484367 0.929943 0.044159 0.027066 0.088961 0.023500 0.424390 0.649254 0.513274 0.587045 0.355049 0.813433 0.494331 0.646501 0.295844 0.902985 0.445672 0.640212 0.242188 0.925373 0.383901 0.591603 5 khoa_tieng_nga suite26_committee_blend 2047 134 0.065462 0.467626 0.928716 0.044483 0.021845 0.081437 0.015976 0.404878 0.619403 0.489676 0.560054 0.335505 0.768657 0.467120 0.610913 0.286064 0.873134 0.430939 0.619048 0.242188 0.925373 0.383901 0.591603 5 khoa_tieng_nga suite26_joint_head 2047 134 0.065462 0.524948 0.926666 0.045477 0.020034 0.045428 -0.020034 0.434146 0.664179 0.525074 0.600540 0.345277 0.791045 0.480726 0.628707 0.281174 0.858209 0.423573 0.608466 0.232422 0.888060 0.368421 0.567748 5 khoa_tieng_nga suite26_tair 2047 134 0.065462 0.408444 0.906804 0.046634 0.019252 0.056114 -0.009348 0.395122 0.604478 0.477876 0.546559 0.306189 0.701493 0.426304 0.557533 0.244499 0.746269 0.368324 0.529101 0.218750 0.835821 0.346749 0.534351 5 khoa_tieng_nga suite26_tree 2047 134 0.065462 0.457859 0.926335 0.044428 0.013554 0.062272 -0.003189 0.395122 0.604478 0.477876 0.546559 0.338762 0.776119 0.471655 0.616845 0.290954 0.888060 0.438306 0.629630 0.246094 0.940299 0.390093 0.601145 5 khoa_tieng_nga suite26_tree_memory 2047 134 0.065462 0.407885 0.907089 0.047133 0.019189 0.049830 -0.015632 0.395122 0.604478 0.477876 0.546559 0.306189 0.701493 0.426304 0.557533 0.254279 0.776119 0.383057 0.550265 0.218750 0.835821 0.346749 0.534351 5 khoa_tieng_nhat committee 2593 69 0.026610 0.226421 0.836164 0.023215 0.012741 0.036143 0.009533 0.119691 0.449275 0.189024 0.289720 0.113111 0.637681 0.192140 0.330827 0.102119 0.768116 0.180272 0.333333 0.081790 0.768116 0.147838 0.286797 5 khoa_tieng_nhat suite14 2593 69 0.026610 0.238167 0.836342 0.040956 0.067155 0.093765 0.067155 0.154440 0.579710 0.243902 0.373832 0.118252 0.666667 0.200873 0.345865 0.100193 0.753623 0.176871 0.327044 0.083333 0.782609 0.150628 0.292208 5 khoa_tieng_nhat suite16 2593 69 0.026610 0.252009 0.865488 0.054843 0.100309 0.126919 0.100309 0.154440 0.579710 0.243902 0.373832 0.125964 0.710145 0.213974 0.368421 0.104046 0.782609 0.183673 0.339623 0.089506 0.840580 0.161785 0.313853 5 khoa_tieng_nhat suite17 2593 69 0.026610 0.223935 0.849618 0.023779 0.015590 0.039713 0.013102 0.127413 0.478261 0.201220 0.308411 0.115681 0.652174 0.196507 0.338346 0.104046 0.782609 0.183673 0.339623 0.086420 0.811594 0.156206 0.303030 5 khoa_tieng_nhat suite18 2593 69 0.026610 0.227926 0.847424 0.023803 0.015403 0.039535 0.012925 0.131274 0.492754 0.207317 0.317757 0.115681 0.652174 0.196507 0.338346 0.102119 0.768116 0.180272 0.333333 0.086420 0.811594 0.156206 0.303030 5 khoa_tieng_nhat suite20 2593 69 0.026610 0.234734 0.878362 0.066173 0.088564 0.115174 0.088564 0.166023 0.623188 0.262195 0.401869 0.125964 0.710145 0.213974 0.368421 0.105973 0.797101 0.187075 0.345912 0.089506 0.840580 0.161785 0.313853 5 khoa_tieng_nhat suite21 2593 69 0.026610 0.233059 0.846787 0.023388 0.012051 0.037843 0.011233 0.119691 0.449275 0.189024 0.289720 0.118252 0.666667 0.200873 0.345865 0.102119 0.768116 0.180272 0.333333 0.087963 0.826087 0.158996 0.308442 5 khoa_tieng_nhat suite22 2593 69 0.026610 0.238576 0.855658 0.022787 0.005641 0.030890 0.004280 0.135135 0.507246 0.213415 0.327103 0.131105 0.739130 0.222707 0.383459 0.102119 0.768116 0.180272 0.333333 0.087963 0.826087 0.158996 0.308442 5 khoa_tieng_nhat suite22_primary 2593 69 0.026610 0.192955 0.878563 0.023744 0.006672 0.024840 -0.001771 0.162162 0.608696 0.256098 0.392523 0.138817 0.782609 0.235808 0.406015 0.107900 0.811594 0.190476 0.352201 0.089506 0.840580 0.161785 0.313853 ============================================================================================================================================================================================== SUITE26 TARGET FOLD 6 ============================================================================================================================================================================================== [DATA] history=470,165 fail=10,533 (2.24%) train=358,455 validation=111,710 target=43,359 fail=2,395 (5.52%) [TREE] fitting selection tree on older training blocks only... [TREE] selection summary={'n_trees': 96, 'leaf_vocab_size': 73729, 'mean_leaves_per_tree': 768.0, 'min_leaves_per_tree': 768, 'max_leaves_per_tree': 768, 'training_oob_ap': 0.4216746254736743} [TREE-HISTORY-SEL] 50,000/470,165 [TREE-HISTORY-SEL] 100,000/470,165 [TREE-HISTORY-SEL] 150,000/470,165 [TREE-HISTORY-SEL] 200,000/470,165 [TREE-HISTORY-SEL] 250,000/470,165 [TREE-HISTORY-SEL] 300,000/470,165 [TREE-HISTORY-SEL] 350,000/470,165 [TREE-HISTORY-SEL] 400,000/470,165 [TREE-HISTORY-SEL] 450,000/470,165 [TREE-HISTORY-SEL] 470,165/470,165 [TREE] calibration a=0.9340 b=-2.8731 validation macroAP=0.2786 training_OOB_AP=0.4216746254736743 [HISTORY STORE] selection phase (memory candidates restricted to training partition)... [HISTORY STORE] 50,000/470,165 [HISTORY STORE] 100,000/470,165 [HISTORY STORE] 150,000/470,165 [HISTORY STORE] 200,000/470,165 [HISTORY STORE] 250,000/470,165 [HISTORY STORE] 300,000/470,165 [HISTORY STORE] 350,000/470,165 [HISTORY STORE] 400,000/470,165 [HISTORY STORE] 450,000/470,165 FOLD 6 SELECTION STUDENT-HISTORY SUPPORT -------------------------------------------------------------------------------- faculty rows prevalence history_mean history_zero_rate history_failure_mean same_course_history_mean course_seen_mean new_course_rate history_grade_present_rate khoa_cong_nghe_thong_tin 46659 0.037078 10.695729 0.238068 0.158083 0.000021 1192.448467 0.012366 1.0 khoa_quan_tri_kinh_doanh_va_du_lich 67179 0.033061 9.752244 0.213966 0.165900 0.000015 1589.068935 0.005537 1.0 khoa_quoc_te_hoc 22438 0.011899 8.487432 0.335725 0.031687 0.000000 1058.276718 0.050762 1.0 khoa_tieng_anh 86752 0.016046 11.693102 0.209298 0.036080 0.000023 1272.656976 0.037037 1.0 khoa_tieng_bo_dao_nha 8640 0.043634 11.152315 0.254861 0.209144 0.000000 1132.480671 0.034259 1.0 khoa_tieng_duc 20307 0.020732 12.327227 0.225243 0.085586 0.000049 1244.441424 0.015561 1.0 khoa_tieng_han_quoc 33502 0.008089 11.768133 0.275834 0.033610 0.000000 1197.118232 0.022297 1.0 khoa_tieng_italia 20909 0.033144 12.320006 0.232579 0.136975 0.000048 1143.125257 0.048257 1.0 khoa_tieng_nga 15465 0.051406 11.145490 0.267960 0.232331 0.000000 1198.150921 0.069770 1.0 khoa_tieng_nhat 31925 0.010995 11.349350 0.302897 0.032827 0.000000 1280.267126 0.031355 1.0 khoa_tieng_phap 28026 0.013523 11.139549 0.282737 0.047385 0.000000 1155.478520 0.030293 1.0 khoa_tieng_tay_ban_nha 14997 0.030139 11.514370 0.271454 0.149363 0.000000 1133.923785 0.045943 1.0 khoa_tieng_trung_quoc 64862 0.010268 12.601446 0.188246 0.037002 0.000000 1358.395162 0.049151 1.0 khoa_viet_nam_hoc 8504 0.060913 8.501999 0.330668 0.274106 0.000000 210.848071 0.045861 1.0 ------------------------------------------------------------------------------------------------------------------------------------------------------ [VARIANT suite26_tree_memory] [SELECT MEMORY] epoch=01/12 loss=0.14030 BCE=0.10779 rank=0.14681 joint=0.05934 ability=0.00000 macroAP=0.2571 F2@20=0.3386 Brier=0.0512 best=01 [SELECT MEMORY] epoch=02/12 loss=0.13350 BCE=0.10640 rank=0.12578 joint=0.04473 ability=0.00000 macroAP=0.2552 F2@20=0.3406 Brier=0.0514 best=01 [SELECT MEMORY] epoch=03/12 loss=0.12417 BCE=0.10312 rank=0.08752 joint=0.03754 ability=0.00000 macroAP=0.2651 F2@20=0.3393 Brier=0.0512 best=03 [SELECT MEMORY] epoch=04/12 loss=0.12007 BCE=0.10153 rank=0.07568 joint=0.03223 ability=0.00000 macroAP=0.2466 F2@20=0.3380 Brier=0.0512 best=03 [SELECT MEMORY] epoch=05/12 loss=0.11620 BCE=0.09940 rank=0.06752 joint=0.02827 ability=0.00000 macroAP=0.2675 F2@20=0.3384 Brier=0.0516 best=05 [SELECT MEMORY] epoch=06/12 loss=0.11537 BCE=0.09945 rank=0.06362 joint=0.02610 ability=0.00000 macroAP=0.2446 F2@20=0.3376 Brier=0.0512 best=05 [SELECT MEMORY] epoch=07/12 loss=0.11218 BCE=0.09757 rank=0.05720 joint=0.02338 ability=0.00000 macroAP=0.2595 F2@20=0.3383 Brier=0.0512 best=05 [SELECT MEMORY] epoch=08/12 loss=0.11210 BCE=0.09788 rank=0.05384 joint=0.02346 ability=0.00000 macroAP=0.2617 F2@20=0.3382 Brier=0.0514 best=05 ------------------------------------------------------------------------------------------------------------------------------------------------------ [VARIANT suite26_tair] [SELECT TAIR] epoch=01/12 loss=0.14685 BCE=0.10820 rank=0.15696 joint=0.06122 ability=0.09060 macroAP=0.2436 F2@20=0.3375 Brier=0.0512 best=01 [SELECT TAIR] epoch=02/12 loss=0.14229 BCE=0.10828 rank=0.14336 joint=0.05043 ability=0.07310 macroAP=0.2664 F2@20=0.3446 Brier=0.0514 best=02 [SELECT TAIR] epoch=03/12 loss=0.13681 BCE=0.10684 rank=0.12259 joint=0.04411 ability=0.06814 macroAP=0.2463 F2@20=0.3389 Brier=0.0512 best=02 [SELECT TAIR] epoch=04/12 loss=0.12905 BCE=0.10480 rank=0.08881 joint=0.03712 ability=0.06399 macroAP=0.2627 F2@20=0.3444 Brier=0.0513 best=02 [SELECT TAIR] epoch=05/12 loss=0.12305 BCE=0.10176 rank=0.07343 joint=0.03202 ability=0.06143 macroAP=0.2518 F2@20=0.3390 Brier=0.0511 best=02 [COMMITTEE BLEND ABLATION] selected alpha=0.50 policyAP=0.2969 policyF2=0.3959 [TREE] fitting production tree on all permissible history... [TREE] production summary={'n_trees': 96, 'leaf_vocab_size': 73729, 'mean_leaves_per_tree': 768.0, 'min_leaves_per_tree': 768, 'max_leaves_per_tree': 768, 'training_oob_ap': 0.36844885615128} [TREE-HISTORY-PROD] 50,000/470,165 [TREE-HISTORY-PROD] 100,000/470,165 [TREE-HISTORY-PROD] 150,000/470,165 [TREE-HISTORY-PROD] 200,000/470,165 [TREE-HISTORY-PROD] 250,000/470,165 [TREE-HISTORY-PROD] 300,000/470,165 [TREE-HISTORY-PROD] 350,000/470,165 [TREE-HISTORY-PROD] 400,000/470,165 [TREE-HISTORY-PROD] 450,000/470,165 [TREE-HISTORY-PROD] 470,165/470,165 [TREE-TARGET-PROD] 43,359/43,359 [HISTORY STORE] production history... [HISTORY STORE] 50,000/470,165 [HISTORY STORE] 100,000/470,165 [HISTORY STORE] 150,000/470,165 [HISTORY STORE] 200,000/470,165 [HISTORY STORE] 250,000/470,165 [HISTORY STORE] 300,000/470,165 [HISTORY STORE] 350,000/470,165 [HISTORY STORE] 400,000/470,165 [HISTORY STORE] 450,000/470,165 [HISTORY STORE] production target... FOLD 6 TARGET STUDENT-HISTORY SUPPORT -------------------------------------------------------------------------------- faculty rows prevalence history_mean history_zero_rate history_failure_mean same_course_history_mean course_seen_mean new_course_rate history_grade_present_rate fold khoa_cong_nghe_thong_tin 5651 0.099628 15.652097 0.000000 0.552469 0.000000 1561.156432 0.014511 1.0 6 khoa_quan_tri_kinh_doanh_va_du_lich 7442 0.079683 13.849906 0.001612 0.480247 0.000000 1972.877855 0.048643 1.0 6 khoa_quoc_te_hoc 2466 0.024331 14.680454 0.000000 0.180049 0.000000 1526.436740 0.089619 1.0 6 khoa_tieng_anh 6204 0.019665 15.395068 0.021921 0.131044 0.000161 1374.019504 0.115732 1.0 6 khoa_tieng_bo_dao_nha 892 0.081839 18.449552 0.000000 0.729821 0.000000 1613.386771 0.152466 1.0 6 khoa_tieng_duc 1839 0.045677 16.505710 0.007613 0.332246 0.000000 1499.824361 0.137031 1.0 6 khoa_tieng_han_quoc 3277 0.037534 15.333232 0.001526 0.155020 0.000000 1431.906927 0.234056 1.0 6 khoa_tieng_italia 2026 0.046397 16.836130 0.004936 0.414610 0.000000 1254.740869 0.180652 1.0 6 khoa_tieng_nga 1842 0.111292 16.522801 0.002714 0.453855 0.000000 1702.856678 0.219870 1.0 6 khoa_tieng_nhat 2530 0.034783 14.580632 0.002767 0.138340 0.000000 1690.096443 0.240316 1.0 6 khoa_tieng_phap 2263 0.022095 15.046399 0.003535 0.161290 0.000000 1579.162174 0.144498 1.0 6 khoa_tieng_tay_ban_nha 1333 0.063766 15.357839 0.000000 0.465116 0.000000 1602.313578 0.174044 1.0 6 khoa_tieng_trung_quoc 4990 0.033467 15.687174 0.027255 0.131864 0.000000 1193.070741 0.368136 1.0 6 khoa_viet_nam_hoc 604 0.145695 7.884106 0.014901 0.379139 0.000000 60.506623 0.135762 1.0 6 [REFIT MEMORY] epoch=01/5 loss=0.17766 BCE=0.13807 rank=0.18418 joint=0.07222 ability=0.00000 [REFIT MEMORY] epoch=05/5 loss=0.15434 BCE=0.13143 rank=0.09758 joint=0.04092 ability=0.00000 [VARIANT suite26_tree_memory] selected_epochs=5 target macroAP=0.2968 [REFIT TAIR] epoch=01/2 loss=0.18326 BCE=0.13793 rank=0.18816 joint=0.07331 ability=0.10048 [REFIT TAIR] epoch=02/2 loss=0.17753 BCE=0.13627 rank=0.17703 joint=0.06346 ability=0.08483 [VARIANT suite26_tair] selected_epochs=2 target macroAP=0.3109 FOLD 6 TREE CURRENT-STATE FEATURE IMPORTANCE -------------------------------------------------------------------------------- rank feature importance fold 1 prev_semester_gpa10 0.063796 6 2 course_status_FIT ||| ứng_dụng_công_nghệ_thông_tin ||| Computer Skills 0.060356 6 3 hist_course_pass_rate 0.054132 6 4 recent3_semester_gpa10_mean 0.044527 6 5 hist_semester_gpa10_mean 0.043528 6 6 prev_cumulative_gpa10 0.043081 6 7 prev_failed_credits 0.039334 6 8 recent3_course_grade10_mean 0.038729 6 9 hist_component_K2_mean 0.020832 6 10 hist_course_grade10_mean 0.020548 6 11 recent3_component_grade_mean 0.018046 6 12 prev_outstanding_failed_credits 0.017609 6 13 hist_component_low_rate 0.016536 6 14 recent3_warning_count 0.015789 6 15 hist_warning_in_last_semester 0.015665 6 16 hist_passed_credits_sum 0.015135 6 17 hist_course_grade10_median 0.015070 6 18 hist_component_grade_mean 0.014781 6 19 hist_failed_credits_sum 0.014522 6 20 recent3_course_grade10_std 0.012910 6 21 hist_course_grade10_std 0.011721 6 22 hist_component_T1_count 0.011111 6 23 hist_component_courses 0.009809 6 24 recent3_course_grade10_count 0.009018 6 25 hist_component_numeric_rate 0.008777 6 26 hist_warning_consecutive_max 0.008628 6 27 target_semester_registered_credits 0.008437 6 28 recent3_course_grade10_median 0.008216 6 29 student_prior_course_count_log 0.007911 6 30 recent3_component_grade_count 0.007788 6 31 target_semester_difficulty_weighted_workload 0.007278 6 32 prev_ssvhk_semester_ordinal 0.007274 6 33 prev_semester_ordinal 0.007201 6 34 hist_component_B1_count 0.006834 6 35 prev_ssvhk_NHHK 0.006734 6 36 prev_semester_NHHK 0.006633 6 37 hist_course_grade10_count 0.006410 6 38 hist_component_high_rate 0.006365 6 39 hist_component_T1_low_rate 0.006336 6 40 recent3_semester_count 0.006086 6 SUITE26 TARGET FOLD 6 — NEW + AVAILABLE REFERENCE RESULTS -------------------------------------------------------------------------------- fold faculty model rows failures prevalence ap auc brier ece10 mean_score calibration_gap precision_at_10 recall_at_10 f1_at_10 fbeta_at_10 precision_at_15 recall_at_15 f1_at_15 fbeta_at_15 precision_at_20 recall_at_20 f1_at_20 fbeta_at_20 precision_at_25 recall_at_25 f1_at_25 fbeta_at_25 6 khoa_cong_nghe_thong_tin committee 5651 563 0.099628 0.372426 0.836092 0.075250 0.023372 0.080206 -0.019422 0.396460 0.397869 0.397163 0.397586 0.354953 0.534636 0.426648 0.485484 0.319469 0.641208 0.426462 0.533708 0.281670 0.706927 0.402834 0.542974 6 khoa_cong_nghe_thong_tin council 5651 563 0.099628 0.420301 0.845960 0.073227 0.025329 0.124958 0.025329 0.456637 0.458259 0.457447 0.457934 0.377358 0.568384 0.453579 0.516129 0.330088 0.662522 0.440638 0.551449 0.290163 0.728242 0.414980 0.559345 6 khoa_cong_nghe_thong_tin suite14 5651 563 0.099628 0.408607 0.840564 0.087683 0.071141 0.170769 0.071141 0.423009 0.424512 0.423759 0.424210 0.353774 0.532860 0.425230 0.483871 0.311504 0.625222 0.415830 0.520402 0.280255 0.703375 0.400810 0.540246 6 khoa_cong_nghe_thong_tin suite16 5651 563 0.099628 0.394136 0.844240 0.080863 0.056059 0.155688 0.056059 0.424779 0.426288 0.425532 0.425985 0.370283 0.557726 0.445074 0.506452 0.321239 0.644760 0.428825 0.536665 0.288040 0.722913 0.411943 0.555252 6 khoa_cong_nghe_thong_tin suite17 5651 563 0.099628 0.387149 0.843400 0.073935 0.017863 0.081924 -0.017704 0.408850 0.410302 0.409574 0.410011 0.367925 0.554174 0.442240 0.503226 0.315044 0.632327 0.420555 0.526316 0.288747 0.724689 0.412955 0.556617 6 khoa_cong_nghe_thong_tin suite18 5651 563 0.099628 0.385139 0.842567 0.074014 0.017669 0.082120 -0.017509 0.414159 0.415631 0.414894 0.415335 0.366745 0.552398 0.440822 0.501613 0.316814 0.635879 0.422918 0.529273 0.287332 0.721137 0.410931 0.553888 6 khoa_cong_nghe_thong_tin suite20 5651 563 0.099628 0.409966 0.837632 0.090171 0.094695 0.194323 0.094695 0.412389 0.413854 0.413121 0.413561 0.376179 0.566607 0.452162 0.514516 0.321239 0.644760 0.428825 0.536665 0.281670 0.706927 0.402834 0.542974 6 khoa_cong_nghe_thong_tin suite21 5651 563 0.099628 0.380537 0.839752 0.074606 0.022878 0.080525 -0.019103 0.398230 0.399645 0.398936 0.399361 0.365566 0.550622 0.439405 0.500000 0.320354 0.642984 0.427643 0.535186 0.288040 0.722913 0.411943 0.555252 6 khoa_cong_nghe_thong_tin suite22 5651 563 0.099628 0.408999 0.844096 0.074655 0.034956 0.064938 -0.034690 0.426549 0.428064 0.427305 0.427760 0.370283 0.557726 0.445074 0.506452 0.323009 0.648313 0.431187 0.539622 0.284501 0.714032 0.406883 0.548431 6 khoa_cong_nghe_thong_tin suite22_primary 5651 563 0.099628 0.387553 0.824326 0.077004 0.040389 0.059319 -0.040309 0.387611 0.388988 0.388298 0.388711 0.338443 0.509769 0.406804 0.462903 0.295575 0.593250 0.394566 0.493791 0.263270 0.660746 0.376518 0.507503 6 khoa_cong_nghe_thong_tin suite22_relational 5651 563 0.099628 0.402086 0.834900 0.078263 0.056033 0.043852 -0.055777 0.412389 0.413854 0.413121 0.413561 0.353774 0.532860 0.425230 0.483871 0.315044 0.632327 0.420555 0.526316 0.273885 0.687389 0.391700 0.527967 6 khoa_cong_nghe_thong_tin suite23 5651 563 0.099628 0.421851 0.846548 0.073929 0.032805 0.066824 -0.032805 0.431858 0.433393 0.432624 0.433085 0.372642 0.561279 0.447909 0.509677 0.327434 0.657194 0.437094 0.547014 0.285209 0.715808 0.407895 0.549795 6 khoa_cong_nghe_thong_tin suite23_graph 5651 563 0.099628 0.409848 0.830127 0.076080 0.037398 0.062231 -0.037398 0.398230 0.399645 0.398936 0.399361 0.352594 0.531083 0.423813 0.482258 0.312389 0.626998 0.417011 0.521881 0.275301 0.690941 0.393725 0.530696 6 khoa_cong_nghe_thong_tin suite24 5651 563 0.099628 0.391240 0.842047 0.078482 0.053459 0.047153 -0.052475 0.421239 0.422735 0.421986 0.422435 0.360849 0.543517 0.433735 0.493548 0.323894 0.650089 0.432369 0.541100 0.284501 0.714032 0.406883 0.548431 6 khoa_cong_nghe_thong_tin suite24_posthoc 5651 563 0.099628 0.415863 0.839693 0.073764 0.026935 0.072694 -0.026935 0.423009 0.424512 0.423759 0.424210 0.370283 0.557726 0.445074 0.506452 0.313274 0.628774 0.418193 0.523359 0.277424 0.696270 0.396761 0.534789 6 khoa_cong_nghe_thong_tin suite25 5651 563 0.099628 0.390861 0.825871 0.077681 0.046266 0.053363 -0.046266 0.423009 0.424512 0.423759 0.424210 0.343160 0.516874 0.412473 0.469355 0.292035 0.586146 0.389841 0.487877 0.266100 0.667851 0.380567 0.512960 6 khoa_cong_nghe_thong_tin suite25_blend 5651 563 0.099628 0.397260 0.841322 0.075330 0.037077 0.062921 -0.036707 0.435398 0.436945 0.436170 0.436635 0.359670 0.541741 0.432318 0.491935 0.315929 0.634103 0.421737 0.527794 0.281670 0.706927 0.402834 0.542974 6 khoa_cong_nghe_thong_tin suite26_committee_blend 5651 563 0.099628 0.371674 0.832508 0.078849 0.046202 0.053837 -0.045791 0.384071 0.385435 0.384752 0.385162 0.354953 0.534636 0.426648 0.485484 0.311504 0.625222 0.415830 0.520402 0.278839 0.699822 0.398785 0.537517 6 khoa_cong_nghe_thong_tin suite26_joint_head 5651 563 0.099628 0.405702 0.835261 0.077706 0.052885 0.046744 -0.052885 0.417699 0.419183 0.418440 0.418885 0.360849 0.543517 0.433735 0.493548 0.313274 0.628774 0.418193 0.523359 0.276716 0.694494 0.395749 0.533424 6 khoa_cong_nghe_thong_tin suite26_tair 5651 563 0.099628 0.332935 0.813226 0.084892 0.062748 0.036959 -0.062669 0.355752 0.357016 0.356383 0.356763 0.327830 0.493783 0.394047 0.448387 0.300885 0.603908 0.401654 0.502661 0.268931 0.674956 0.384615 0.518417 6 khoa_cong_nghe_thong_tin suite26_tree 5651 563 0.099628 0.287004 0.803857 0.081789 0.038687 0.064861 -0.034767 0.315044 0.316163 0.315603 0.315939 0.306604 0.461812 0.368533 0.419355 0.292035 0.586146 0.389841 0.487877 0.263270 0.660746 0.376518 0.507503 6 khoa_cong_nghe_thong_tin suite26_tree_memory 5651 563 0.099628 0.311982 0.808413 0.086275 0.063667 0.035961 -0.063667 0.341593 0.342806 0.342199 0.342563 0.312500 0.470693 0.375620 0.427419 0.296460 0.595027 0.395747 0.495269 0.270347 0.678508 0.386640 0.521146 6 khoa_cong_nghe_thong_tin v2 5651 563 0.099628 0.389334 0.839027 0.135528 0.162595 0.262224 0.162595 0.419469 0.420959 0.420213 0.420660 0.357311 0.538188 0.429483 0.488710 0.318584 0.639432 0.425281 0.532229 0.287332 0.721137 0.410931 0.553888 6 khoa_quan_tri_kinh_doanh_va_du_lich committee 7442 593 0.079683 0.377681 0.858278 0.060618 0.019649 0.062955 -0.016728 0.376344 0.472175 0.418848 0.449294 0.323477 0.608769 0.422469 0.517489 0.278226 0.698145 0.397886 0.536269 0.238710 0.748735 0.362006 0.524575 6 khoa_quan_tri_kinh_doanh_va_du_lich suite14 7442 593 0.079683 0.373873 0.857022 0.062246 0.018562 0.098245 0.018562 0.364247 0.456998 0.405385 0.434852 0.317204 0.596965 0.414277 0.507454 0.274194 0.688027 0.392119 0.528497 0.239785 0.752108 0.363636 0.526938 6 khoa_quan_tri_kinh_doanh_va_du_lich suite16 7442 593 0.079683 0.384463 0.868429 0.066177 0.050005 0.129688 0.050005 0.380376 0.477234 0.423336 0.454108 0.334229 0.629005 0.436513 0.534690 0.290323 0.728499 0.415185 0.559585 0.247849 0.777403 0.375866 0.544660 6 khoa_quan_tri_kinh_doanh_va_du_lich suite17 7442 593 0.079683 0.393085 0.867847 0.058972 0.011181 0.068502 -0.011181 0.391129 0.490725 0.435303 0.466945 0.337814 0.635750 0.441194 0.540424 0.288306 0.723440 0.412302 0.555699 0.245161 0.768971 0.371790 0.538752 6 khoa_quan_tri_kinh_doanh_va_du_lich suite18 7442 593 0.079683 0.391809 0.868214 0.059038 0.011383 0.068300 -0.011383 0.388441 0.487352 0.432311 0.463736 0.336022 0.632378 0.438853 0.537557 0.288306 0.723440 0.412302 0.555699 0.246237 0.772344 0.373420 0.541115 6 khoa_quan_tri_kinh_doanh_va_du_lich suite20 7442 593 0.079683 0.369619 0.867786 0.062940 0.031531 0.111214 0.031531 0.388441 0.487352 0.432311 0.463736 0.353943 0.666105 0.462259 0.566227 0.295699 0.741990 0.422874 0.569948 0.253226 0.794266 0.384020 0.556474 6 khoa_quan_tri_kinh_doanh_va_du_lich suite21 7442 593 0.079683 0.382240 0.860933 0.060422 0.020289 0.062166 -0.017517 0.381720 0.478921 0.424832 0.455712 0.323477 0.608769 0.422469 0.517489 0.279570 0.701518 0.399808 0.538860 0.240860 0.755481 0.365267 0.529301 6 khoa_quan_tri_kinh_doanh_va_du_lich suite22 7442 593 0.079683 0.425635 0.869400 0.061069 0.036555 0.043231 -0.036451 0.409946 0.514334 0.456245 0.489409 0.338710 0.637437 0.442364 0.541858 0.287634 0.721754 0.411341 0.554404 0.250000 0.784148 0.379128 0.549386 6 khoa_quan_tri_kinh_doanh_va_du_lich suite22_primary 7442 593 0.079683 0.424153 0.846648 0.062828 0.045119 0.034564 -0.045119 0.387097 0.485666 0.430815 0.462131 0.318996 0.600337 0.416618 0.510321 0.264785 0.664418 0.378664 0.510363 0.225806 0.708263 0.342438 0.496219 6 khoa_quan_tri_kinh_doanh_va_du_lich suite22_relational 7442 593 0.079683 0.444914 0.869305 0.061582 0.044942 0.034797 -0.044886 0.415323 0.521079 0.462229 0.495828 0.348566 0.655987 0.455237 0.557626 0.288306 0.723440 0.412302 0.555699 0.251075 0.787521 0.380758 0.551749 6 khoa_quan_tri_kinh_doanh_va_du_lich suite23 7442 593 0.079683 0.412969 0.871645 0.059060 0.020688 0.058995 -0.020688 0.393817 0.494098 0.438295 0.470154 0.344982 0.649241 0.450556 0.551892 0.289651 0.726813 0.414224 0.558290 0.250000 0.784148 0.379128 0.549386 6 khoa_quan_tri_kinh_doanh_va_du_lich suite23_graph 7442 593 0.079683 0.416356 0.864695 0.058572 0.018885 0.060797 -0.018885 0.391129 0.490725 0.435303 0.466945 0.314516 0.591906 0.410767 0.503154 0.278226 0.698145 0.397886 0.536269 0.252688 0.792580 0.383204 0.555293 6 khoa_quan_tri_kinh_doanh_va_du_lich suite24 7442 593 0.079683 0.399002 0.865254 0.062538 0.040606 0.039255 -0.040428 0.384409 0.482293 0.427823 0.458922 0.333333 0.627319 0.435342 0.533257 0.279570 0.701518 0.399808 0.538860 0.242473 0.760540 0.367713 0.532845 6 khoa_quan_tri_kinh_doanh_va_du_lich suite24_posthoc 7442 593 0.079683 0.437881 0.872856 0.057935 0.015035 0.064870 -0.014813 0.408602 0.512648 0.454749 0.487805 0.340502 0.640809 0.444705 0.544725 0.287634 0.721754 0.411341 0.554404 0.251613 0.789207 0.381574 0.552930 6 khoa_quan_tri_kinh_doanh_va_du_lich suite25 7442 593 0.079683 0.413825 0.855781 0.060304 0.034621 0.045062 -0.034621 0.401882 0.504216 0.447270 0.479782 0.313620 0.590219 0.409596 0.501720 0.268817 0.674536 0.384431 0.518135 0.234946 0.736931 0.356298 0.516304 6 khoa_quan_tri_kinh_doanh_va_du_lich suite25_blend 7442 593 0.079683 0.416348 0.866357 0.059690 0.029305 0.050378 -0.029305 0.404570 0.507589 0.450262 0.482991 0.330645 0.622260 0.431831 0.528956 0.277554 0.696459 0.396925 0.534974 0.241935 0.758853 0.366898 0.531664 6 khoa_quan_tri_kinh_doanh_va_du_lich suite26_committee_blend 7442 593 0.079683 0.401779 0.861184 0.062132 0.035044 0.044639 -0.035044 0.372312 0.467116 0.414361 0.444480 0.315412 0.593592 0.411937 0.504587 0.282258 0.708263 0.403652 0.544041 0.245699 0.770658 0.372605 0.539934 6 khoa_quan_tri_kinh_doanh_va_du_lich suite26_joint_head 7442 593 0.079683 0.431074 0.861638 0.060577 0.036845 0.044081 -0.035602 0.389785 0.489039 0.433807 0.465340 0.326165 0.613828 0.425980 0.521789 0.280242 0.703204 0.400769 0.540155 0.245699 0.770658 0.372605 0.539934 6 khoa_quan_tri_kinh_doanh_va_du_lich suite26_tair 7442 593 0.079683 0.389445 0.852973 0.065587 0.046874 0.032809 -0.046874 0.352151 0.441821 0.391922 0.420411 0.306452 0.576728 0.400234 0.490252 0.272177 0.682968 0.389236 0.524611 0.246774 0.774030 0.374236 0.542297 6 khoa_quan_tri_kinh_doanh_va_du_lich suite26_tree 7442 593 0.079683 0.310673 0.840346 0.064585 0.028328 0.051355 -0.028328 0.323925 0.406408 0.360509 0.386714 0.287634 0.541315 0.375658 0.460149 0.262097 0.657673 0.374820 0.505181 0.237097 0.743676 0.359560 0.521030 6 khoa_quan_tri_kinh_doanh_va_du_lich suite26_tree_memory 7442 593 0.079683 0.356995 0.844348 0.068221 0.050622 0.029061 -0.050622 0.331989 0.416526 0.369484 0.396341 0.290323 0.546374 0.379169 0.464450 0.262769 0.659359 0.375781 0.506477 0.238710 0.748735 0.362006 0.524575 6 khoa_quoc_te_hoc committee 2466 60 0.024331 0.277844 0.823937 0.021457 0.010890 0.033573 0.009242 0.113360 0.466667 0.182410 0.287474 0.091892 0.566667 0.158140 0.278689 0.081136 0.666667 0.144665 0.272851 0.074675 0.766667 0.136095 0.268692 6 khoa_quoc_te_hoc suite14 2466 60 0.024331 0.255004 0.837105 0.036916 0.073214 0.097391 0.073060 0.125506 0.516667 0.201954 0.318275 0.097297 0.600000 0.167442 0.295082 0.077079 0.633333 0.137432 0.259209 0.073052 0.750000 0.133136 0.262850 6 khoa_quoc_te_hoc suite16 2466 60 0.024331 0.296696 0.839852 0.031355 0.049272 0.072816 0.048485 0.125506 0.516667 0.201954 0.318275 0.105405 0.650000 0.181395 0.319672 0.085193 0.700000 0.151899 0.286494 0.073052 0.750000 0.133136 0.262850 6 khoa_quoc_te_hoc suite17 2466 60 0.024331 0.283949 0.842172 0.022469 0.016384 0.037948 0.013617 0.129555 0.533333 0.208469 0.328542 0.097297 0.600000 0.167442 0.295082 0.087221 0.716667 0.155515 0.293315 0.073052 0.750000 0.133136 0.262850 6 khoa_quoc_te_hoc suite18 2466 60 0.024331 0.291278 0.843551 0.022357 0.015319 0.037575 0.013244 0.129555 0.533333 0.208469 0.328542 0.100000 0.616667 0.172093 0.303279 0.087221 0.716667 0.155515 0.293315 0.074675 0.766667 0.136095 0.268692 6 khoa_quoc_te_hoc suite20 2466 60 0.024331 0.118150 0.809217 0.057422 0.080081 0.104412 0.080081 0.113360 0.466667 0.182410 0.287474 0.094595 0.583333 0.162791 0.286885 0.073022 0.600000 0.130199 0.245566 0.066558 0.683333 0.121302 0.239486 6 khoa_quoc_te_hoc suite21 2466 60 0.024331 0.275382 0.825966 0.021208 0.009555 0.032238 0.007907 0.117409 0.483333 0.188925 0.297741 0.097297 0.600000 0.167442 0.295082 0.081136 0.666667 0.144665 0.272851 0.073052 0.750000 0.133136 0.262850 6 khoa_quoc_te_hoc suite22 2466 60 0.024331 0.244673 0.821834 0.021389 0.007749 0.017157 -0.007174 0.129555 0.533333 0.208469 0.328542 0.089189 0.550000 0.153488 0.270492 0.081136 0.666667 0.144665 0.272851 0.069805 0.716667 0.127219 0.251168 6 khoa_quoc_te_hoc suite22_primary 2466 60 0.024331 0.145340 0.786028 0.022720 0.014429 0.011163 -0.013167 0.101215 0.416667 0.162866 0.256674 0.078378 0.483333 0.134884 0.237705 0.066937 0.550000 0.119349 0.225102 0.060065 0.616667 0.109467 0.216121 6 khoa_quoc_te_hoc suite22_relational 2466 60 0.024331 0.171401 0.825859 0.022325 0.012860 0.012147 -0.012184 0.109312 0.450000 0.175896 0.277207 0.094595 0.583333 0.162791 0.286885 0.081136 0.666667 0.144665 0.272851 0.073052 0.750000 0.133136 0.262850 6 khoa_quoc_te_hoc suite23 2466 60 0.024331 0.283862 0.831657 0.021033 0.010461 0.032609 0.008278 0.133603 0.550000 0.214984 0.338809 0.094595 0.583333 0.162791 0.286885 0.083164 0.683333 0.148282 0.279673 0.073052 0.750000 0.133136 0.262850 6 khoa_quoc_te_hoc suite23_graph 2466 60 0.024331 0.172933 0.821211 0.022354 0.017402 0.040165 0.015834 0.109312 0.450000 0.175896 0.277207 0.091892 0.566667 0.158140 0.278689 0.077079 0.633333 0.137432 0.259209 0.073052 0.750000 0.133136 0.262850 6 khoa_quoc_te_hoc suite24 2466 60 0.024331 0.265786 0.824591 0.020771 0.008066 0.019591 -0.004739 0.117409 0.483333 0.188925 0.297741 0.091892 0.566667 0.158140 0.278689 0.077079 0.633333 0.137432 0.259209 0.069805 0.716667 0.127219 0.251168 6 khoa_quoc_te_hoc suite24_posthoc 2466 60 0.024331 0.261474 0.835197 0.021130 0.010843 0.032154 0.007823 0.129555 0.533333 0.208469 0.328542 0.097297 0.600000 0.167442 0.295082 0.081136 0.666667 0.144665 0.272851 0.071429 0.733333 0.130178 0.257009 6 khoa_quoc_te_hoc suite25 2466 60 0.024331 0.156044 0.808700 0.021976 0.006123 0.021830 -0.002501 0.101215 0.416667 0.162866 0.256674 0.083784 0.516667 0.144186 0.254098 0.079108 0.650000 0.141049 0.266030 0.071429 0.733333 0.130178 0.257009 6 khoa_quoc_te_hoc suite25_blend 2466 60 0.024331 0.258673 0.828540 0.020990 0.002202 0.024319 -0.000012 0.125506 0.516667 0.201954 0.318275 0.100000 0.616667 0.172093 0.303279 0.083164 0.683333 0.148282 0.279673 0.069805 0.716667 0.127219 0.251168 6 khoa_quoc_te_hoc suite26_committee_blend 2466 60 0.024331 0.235797 0.821796 0.021390 0.004319 0.022297 -0.002033 0.125506 0.516667 0.201954 0.318275 0.091892 0.566667 0.158140 0.278689 0.083164 0.683333 0.148282 0.279673 0.069805 0.716667 0.127219 0.251168 6 khoa_quoc_te_hoc suite26_joint_head 2466 60 0.024331 0.228569 0.814163 0.021482 0.013121 0.011797 -0.012534 0.113360 0.466667 0.182410 0.287474 0.091892 0.566667 0.158140 0.278689 0.077079 0.633333 0.137432 0.259209 0.069805 0.716667 0.127219 0.251168 6 khoa_quoc_te_hoc suite26_tair 2466 60 0.024331 0.126120 0.796138 0.022524 0.008405 0.017204 -0.007127 0.105263 0.433333 0.169381 0.266940 0.086486 0.533333 0.148837 0.262295 0.077079 0.633333 0.137432 0.259209 0.064935 0.666667 0.118343 0.233645 6 khoa_quoc_te_hoc suite26_tree 2466 60 0.024331 0.116940 0.793579 0.023143 0.007260 0.030929 0.006598 0.101215 0.416667 0.162866 0.256674 0.086486 0.533333 0.148837 0.262295 0.077079 0.633333 0.137432 0.259209 0.064935 0.666667 0.118343 0.233645 6 khoa_quoc_te_hoc suite26_tree_memory 2466 60 0.024331 0.125182 0.796488 0.022552 0.007023 0.017758 -0.006573 0.105263 0.433333 0.169381 0.266940 0.083784 0.516667 0.144186 0.254098 0.077079 0.633333 0.137432 0.259209 0.064935 0.666667 0.118343 0.233645 6 khoa_tieng_anh committee 6204 122 0.019665 0.288202 0.825577 0.017505 0.011554 0.031088 0.011423 0.101613 0.516393 0.169811 0.284296 0.074114 0.565574 0.131054 0.243129 0.062047 0.631148 0.112986 0.222672 0.053514 0.680328 0.099223 0.203531 6 khoa_tieng_anh suite14 6204 122 0.019665 0.276804 0.829832 0.025224 0.045142 0.064645 0.044980 0.106452 0.540984 0.177898 0.297834 0.081633 0.622951 0.144349 0.267794 0.067687 0.688525 0.123258 0.242915 0.056093 0.713115 0.104005 0.213340 6 khoa_tieng_anh suite16 6204 122 0.019665 0.286351 0.820979 0.028001 0.050506 0.070171 0.050506 0.098387 0.500000 0.164420 0.275271 0.076262 0.581967 0.134853 0.250176 0.061241 0.622951 0.111519 0.219780 0.054159 0.688525 0.100418 0.205983 6 khoa_tieng_anh suite17 6204 122 0.019665 0.298938 0.826866 0.017430 0.013762 0.032612 0.012948 0.101613 0.516393 0.169811 0.284296 0.077336 0.590164 0.136752 0.253700 0.062047 0.631148 0.112986 0.222672 0.054159 0.688525 0.100418 0.205983 6 khoa_tieng_anh suite18 6204 122 0.019665 0.302783 0.833912 0.017518 0.013998 0.033113 0.013448 0.101613 0.516393 0.169811 0.284296 0.077336 0.590164 0.136752 0.253700 0.061241 0.622951 0.111519 0.219780 0.055448 0.704918 0.102809 0.210888 6 khoa_tieng_anh suite20 6204 122 0.019665 0.250822 0.811606 0.030760 0.048560 0.068225 0.048560 0.106452 0.540984 0.177898 0.297834 0.084855 0.647541 0.150047 0.278365 0.067687 0.688525 0.123258 0.242915 0.057382 0.729508 0.106396 0.218244 6 khoa_tieng_anh suite21 6204 122 0.019665 0.290274 0.830087 0.017464 0.011239 0.030773 0.011108 0.103226 0.524590 0.172507 0.288809 0.076262 0.581967 0.134853 0.250176 0.062853 0.639344 0.114453 0.225564 0.054159 0.688525 0.100418 0.205983 6 khoa_tieng_anh suite22 6204 122 0.019665 0.279098 0.833959 0.016454 0.005096 0.016873 -0.002791 0.119355 0.606557 0.199461 0.333935 0.090226 0.688525 0.159544 0.295983 0.070105 0.713115 0.127660 0.251591 0.058027 0.737705 0.107591 0.220696 6 khoa_tieng_anh suite22_primary 6204 122 0.019665 0.213729 0.813002 0.017188 0.009268 0.011748 -0.007917 0.109677 0.557377 0.183288 0.306859 0.082707 0.631148 0.146249 0.271318 0.069299 0.704918 0.126192 0.248699 0.059317 0.754098 0.109982 0.225601 6 khoa_tieng_anh suite22_relational 6204 122 0.019665 0.253209 0.847568 0.016821 0.007983 0.011752 -0.007913 0.124194 0.631148 0.207547 0.347473 0.092374 0.704918 0.163343 0.303030 0.074134 0.754098 0.134996 0.266050 0.061896 0.786885 0.114764 0.235410 6 khoa_tieng_anh suite23 6204 122 0.019665 0.298306 0.828175 0.016412 0.007820 0.027011 0.007346 0.106452 0.540984 0.177898 0.297834 0.075188 0.573770 0.132953 0.246653 0.062853 0.639344 0.114453 0.225564 0.055448 0.704918 0.102809 0.210888 6 khoa_tieng_anh suite23_graph 6204 122 0.019665 0.196078 0.800501 0.018400 0.011039 0.030450 0.010785 0.096774 0.491803 0.161725 0.270758 0.080559 0.614754 0.142450 0.264271 0.066076 0.672131 0.120323 0.237131 0.056093 0.713115 0.104005 0.213340 6 khoa_tieng_anh suite24 6204 122 0.019665 0.317064 0.841773 0.016101 0.007986 0.017056 -0.002609 0.108065 0.549180 0.180593 0.302347 0.080559 0.614754 0.142450 0.264271 0.066076 0.672131 0.120323 0.237131 0.057382 0.729508 0.106396 0.218244 6 khoa_tieng_anh suite24_posthoc 6204 122 0.019665 0.295528 0.838993 0.016175 0.005939 0.024048 0.004383 0.119355 0.606557 0.199461 0.333935 0.085929 0.655738 0.151947 0.281889 0.066882 0.680328 0.121790 0.240023 0.058027 0.737705 0.107591 0.220696 6 khoa_tieng_anh suite25 6204 122 0.019665 0.232239 0.809357 0.016888 0.006036 0.016752 -0.002913 0.103226 0.524590 0.172507 0.288809 0.079484 0.606557 0.140551 0.260747 0.067687 0.688525 0.123258 0.242915 0.056738 0.721311 0.105200 0.215792 6 khoa_tieng_anh suite25_blend 6204 122 0.019665 0.285336 0.830617 0.016308 0.002238 0.020543 0.000879 0.104839 0.532787 0.175202 0.293321 0.082707 0.631148 0.146249 0.271318 0.068493 0.696721 0.124725 0.245807 0.059961 0.762295 0.111178 0.228053 6 khoa_tieng_anh suite26_committee_blend 6204 122 0.019665 0.276747 0.836316 0.016554 0.002563 0.018205 -0.001460 0.108065 0.549180 0.180593 0.302347 0.081633 0.622951 0.144349 0.267794 0.066076 0.672131 0.120323 0.237131 0.056093 0.713115 0.104005 0.213340 6 khoa_tieng_anh suite26_joint_head 6204 122 0.019665 0.270547 0.842462 0.017125 0.013069 0.007401 -0.012264 0.114516 0.581967 0.191375 0.320397 0.082707 0.631148 0.146249 0.271318 0.068493 0.696721 0.124725 0.245807 0.058672 0.745902 0.108787 0.223149 6 khoa_tieng_anh suite26_tair 6204 122 0.019665 0.169820 0.837699 0.017884 0.007896 0.011768 -0.007896 0.116129 0.590164 0.194070 0.324910 0.088077 0.672131 0.155745 0.288936 0.069299 0.704918 0.126192 0.248699 0.059317 0.754098 0.109982 0.225601 6 khoa_tieng_anh suite26_tree 6204 122 0.019665 0.180533 0.835404 0.017606 0.004260 0.017171 -0.002494 0.114516 0.581967 0.191375 0.320397 0.083781 0.639344 0.148148 0.274841 0.067687 0.688525 0.123258 0.242915 0.059317 0.754098 0.109982 0.225601 6 khoa_tieng_anh suite26_tree_memory 6204 122 0.019665 0.164231 0.836057 0.017838 0.006191 0.013473 -0.006191 0.117742 0.598361 0.196765 0.329422 0.088077 0.672131 0.155745 0.288936 0.070105 0.713115 0.127660 0.251591 0.059317 0.754098 0.109982 0.225601 6 khoa_tieng_bo_dao_nha committee 892 73 0.081839 0.521049 0.880593 0.055004 0.028120 0.092157 0.010318 0.460674 0.561644 0.506173 0.538058 0.373134 0.684932 0.483092 0.586854 0.286517 0.698630 0.406375 0.542553 0.255605 0.780822 0.385135 0.553398 6 khoa_tieng_bo_dao_nha suite14 892 73 0.081839 0.493579 0.869721 0.082433 0.095324 0.167894 0.086056 0.460674 0.561644 0.506173 0.538058 0.350746 0.643836 0.454106 0.551643 0.297753 0.726027 0.422311 0.563830 0.255605 0.780822 0.385135 0.553398 6 khoa_tieng_bo_dao_nha suite16 892 73 0.081839 0.497832 0.884456 0.074888 0.076494 0.158333 0.076494 0.471910 0.575342 0.518519 0.551181 0.373134 0.684932 0.483092 0.586854 0.286517 0.698630 0.406375 0.542553 0.260090 0.794521 0.391892 0.563107 6 khoa_tieng_bo_dao_nha suite17 892 73 0.081839 0.529848 0.887735 0.055702 0.032786 0.093571 0.011733 0.460674 0.561644 0.506173 0.538058 0.365672 0.671233 0.473430 0.575117 0.303371 0.739726 0.430279 0.574468 0.255605 0.780822 0.385135 0.553398 6 khoa_tieng_bo_dao_nha suite18 892 73 0.081839 0.525607 0.887952 0.055966 0.037284 0.094295 0.012457 0.460674 0.561644 0.506173 0.538058 0.380597 0.698630 0.492754 0.598592 0.297753 0.726027 0.422311 0.563830 0.260090 0.794521 0.391892 0.563107 6 khoa_tieng_bo_dao_nha suite20 892 73 0.081839 0.390834 0.850570 0.138099 0.156388 0.238227 0.156388 0.393258 0.479452 0.432099 0.459318 0.328358 0.602740 0.425121 0.516432 0.269663 0.657534 0.382470 0.510638 0.233184 0.712329 0.351351 0.504854 6 khoa_tieng_bo_dao_nha suite21 892 73 0.081839 0.520012 0.879154 0.055579 0.027073 0.094707 0.012868 0.449438 0.547945 0.493827 0.524934 0.373134 0.684932 0.483092 0.586854 0.292135 0.712329 0.414343 0.553191 0.255605 0.780822 0.385135 0.553398 6 khoa_tieng_bo_dao_nha suite22 892 73 0.081839 0.508680 0.882533 0.055436 0.025070 0.060680 -0.021158 0.460674 0.561644 0.506173 0.538058 0.365672 0.671233 0.473430 0.575117 0.303371 0.739726 0.430279 0.574468 0.251121 0.767123 0.378378 0.543689 6 khoa_tieng_bo_dao_nha suite22_primary 892 73 0.081839 0.439787 0.867128 0.060997 0.038318 0.047614 -0.034225 0.393258 0.479452 0.432099 0.459318 0.328358 0.602740 0.425121 0.516432 0.286517 0.698630 0.406375 0.542553 0.237668 0.726027 0.358108 0.514563 6 khoa_tieng_bo_dao_nha suite22_relational 892 73 0.081839 0.439529 0.867296 0.060903 0.041846 0.042559 -0.039280 0.404494 0.493151 0.444444 0.472441 0.335821 0.616438 0.434783 0.528169 0.280899 0.684932 0.398406 0.531915 0.246637 0.753425 0.371622 0.533981 6 khoa_tieng_bo_dao_nha suite23 892 73 0.081839 0.521049 0.880593 0.055004 0.028120 0.092157 0.010318 0.460674 0.561644 0.506173 0.538058 0.373134 0.684932 0.483092 0.586854 0.286517 0.698630 0.406375 0.542553 0.255605 0.780822 0.385135 0.553398 6 khoa_tieng_bo_dao_nha suite23_graph 892 73 0.081839 0.477979 0.870908 0.056064 0.019767 0.075786 -0.006052 0.460674 0.561644 0.506173 0.538058 0.365672 0.671233 0.473430 0.575117 0.292135 0.712329 0.414343 0.553191 0.251121 0.767123 0.378378 0.543689 6 khoa_tieng_bo_dao_nha suite24 892 73 0.081839 0.526707 0.882433 0.053781 0.027010 0.060095 -0.021744 0.460674 0.561644 0.506173 0.538058 0.365672 0.671233 0.473430 0.575117 0.292135 0.712329 0.414343 0.553191 0.260090 0.794521 0.391892 0.563107 6 khoa_tieng_bo_dao_nha suite24_posthoc 892 73 0.081839 0.530877 0.885627 0.053730 0.018076 0.078274 -0.003564 0.516854 0.630137 0.567901 0.603675 0.358209 0.657534 0.463768 0.563380 0.308989 0.753425 0.438247 0.585106 0.255605 0.780822 0.385135 0.553398 6 khoa_tieng_bo_dao_nha suite25 892 73 0.081839 0.434285 0.876528 0.057810 0.020775 0.066161 -0.015678 0.438202 0.534247 0.481481 0.511811 0.335821 0.616438 0.434783 0.528169 0.297753 0.726027 0.422311 0.563830 0.251121 0.767123 0.378378 0.543689 6 khoa_tieng_bo_dao_nha suite25_blend 892 73 0.081839 0.502027 0.884574 0.054359 0.019243 0.075501 -0.006338 0.471910 0.575342 0.518519 0.551181 0.350746 0.643836 0.454106 0.551643 0.297753 0.726027 0.422311 0.563830 0.255605 0.780822 0.385135 0.553398 6 khoa_tieng_bo_dao_nha suite26_committee_blend 892 73 0.081839 0.532208 0.888688 0.054972 0.023134 0.066656 -0.015183 0.483146 0.589041 0.530864 0.564304 0.365672 0.671233 0.473430 0.575117 0.308989 0.753425 0.438247 0.585106 0.255605 0.780822 0.385135 0.553398 6 khoa_tieng_bo_dao_nha suite26_joint_head 892 73 0.081839 0.484569 0.887818 0.056482 0.019574 0.067050 -0.014789 0.438202 0.534247 0.481481 0.511811 0.350746 0.643836 0.454106 0.551643 0.303371 0.739726 0.430279 0.574468 0.251121 0.767123 0.378378 0.543689 6 khoa_tieng_bo_dao_nha suite26_tair 892 73 0.081839 0.423688 0.875441 0.063246 0.030291 0.051548 -0.030291 0.404494 0.493151 0.444444 0.472441 0.350746 0.643836 0.454106 0.551643 0.280899 0.684932 0.398406 0.531915 0.260090 0.794521 0.391892 0.563107 6 khoa_tieng_bo_dao_nha suite26_tree 892 73 0.081839 0.348844 0.863909 0.063186 0.015455 0.087756 0.005918 0.337079 0.410959 0.370370 0.393701 0.313433 0.575342 0.405797 0.492958 0.292135 0.712329 0.414343 0.553191 0.260090 0.794521 0.391892 0.563107 6 khoa_tieng_bo_dao_nha suite26_tree_memory 892 73 0.081839 0.377442 0.870808 0.065208 0.036556 0.046779 -0.035060 0.382022 0.465753 0.419753 0.446194 0.335821 0.616438 0.434783 0.528169 0.280899 0.684932 0.398406 0.531915 0.255605 0.780822 0.385135 0.553398 6 khoa_tieng_duc committee 1839 84 0.045677 0.455834 0.922968 0.033443 0.012518 0.054016 0.008339 0.304348 0.666667 0.417910 0.538462 0.250000 0.821429 0.383333 0.563725 0.198370 0.869048 0.323009 0.518466 0.163043 0.892857 0.275735 0.471106 6 khoa_tieng_duc suite14 1839 84 0.045677 0.476797 0.933221 0.047978 0.073828 0.119505 0.073828 0.342391 0.750000 0.470149 0.605769 0.253623 0.833333 0.388889 0.571895 0.203804 0.892857 0.331858 0.532670 0.173913 0.952381 0.294118 0.502513 6 khoa_tieng_duc suite16 1839 84 0.045677 0.457941 0.929335 0.043164 0.046418 0.091659 0.045982 0.304348 0.666667 0.417910 0.538462 0.250000 0.821429 0.383333 0.563725 0.201087 0.880952 0.327434 0.525568 0.165217 0.904762 0.279412 0.477387 6 khoa_tieng_duc suite17 1839 84 0.045677 0.458582 0.930047 0.032535 0.011489 0.053582 0.007905 0.309783 0.678571 0.425373 0.548077 0.253623 0.833333 0.388889 0.571895 0.198370 0.869048 0.323009 0.518466 0.173913 0.952381 0.294118 0.502513 6 khoa_tieng_duc suite18 1839 84 0.045677 0.461428 0.930210 0.032505 0.012198 0.053574 0.007897 0.309783 0.678571 0.425373 0.548077 0.246377 0.809524 0.377778 0.555556 0.198370 0.869048 0.323009 0.518466 0.171739 0.940476 0.290441 0.496231 6 khoa_tieng_duc suite20 1839 84 0.045677 0.382837 0.927551 0.092818 0.145838 0.191515 0.145838 0.315217 0.690476 0.432836 0.557692 0.253623 0.833333 0.388889 0.571895 0.206522 0.904762 0.336283 0.539773 0.171739 0.940476 0.290441 0.496231 6 khoa_tieng_duc suite21 1839 84 0.045677 0.462564 0.927944 0.032905 0.010799 0.053971 0.008294 0.320652 0.702381 0.440299 0.567308 0.253623 0.833333 0.388889 0.571895 0.201087 0.880952 0.327434 0.525568 0.169565 0.928571 0.286765 0.489950 6 khoa_tieng_duc suite22 1839 84 0.045677 0.468225 0.928181 0.032510 0.013191 0.033541 -0.012136 0.309783 0.678571 0.425373 0.548077 0.260870 0.857143 0.400000 0.588235 0.201087 0.880952 0.327434 0.525568 0.165217 0.904762 0.279412 0.477387 6 khoa_tieng_duc suite22_primary 1839 84 0.045677 0.375872 0.885256 0.036107 0.019153 0.026709 -0.018968 0.288043 0.630952 0.395522 0.509615 0.221014 0.726190 0.338889 0.498366 0.176630 0.773810 0.287611 0.461648 0.145652 0.797619 0.246324 0.420854 6 khoa_tieng_duc suite22_relational 1839 84 0.045677 0.412426 0.911616 0.034934 0.020195 0.026025 -0.019652 0.315217 0.690476 0.432836 0.557692 0.235507 0.773810 0.361111 0.531046 0.187500 0.821429 0.305310 0.490057 0.158696 0.869048 0.268382 0.458543 6 khoa_tieng_duc suite23 1839 84 0.045677 0.415562 0.928666 0.032854 0.007216 0.046039 0.000362 0.320652 0.702381 0.440299 0.567308 0.242754 0.797619 0.372222 0.547386 0.209239 0.916667 0.340708 0.546875 0.169565 0.928571 0.286765 0.489950 6 khoa_tieng_duc suite23_graph 1839 84 0.045677 0.345671 0.906444 0.035023 0.011274 0.048424 0.002747 0.304348 0.666667 0.417910 0.538462 0.231884 0.761905 0.355556 0.522876 0.187500 0.821429 0.305310 0.490057 0.158696 0.869048 0.268382 0.458543 6 khoa_tieng_duc suite24 1839 84 0.045677 0.447166 0.926974 0.032954 0.016564 0.034693 -0.010984 0.320652 0.702381 0.440299 0.567308 0.250000 0.821429 0.383333 0.563725 0.201087 0.880952 0.327434 0.525568 0.163043 0.892857 0.275735 0.471106 6 khoa_tieng_duc suite24_posthoc 1839 84 0.045677 0.439524 0.935189 0.032052 0.007489 0.047765 0.002088 0.315217 0.690476 0.432836 0.557692 0.253623 0.833333 0.388889 0.571895 0.203804 0.892857 0.331858 0.532670 0.171739 0.940476 0.290441 0.496231 6 khoa_tieng_duc suite25 1839 84 0.045677 0.466575 0.918264 0.032620 0.010947 0.039673 -0.006004 0.326087 0.714286 0.447761 0.576923 0.239130 0.785714 0.366667 0.539216 0.192935 0.845238 0.314159 0.504261 0.156522 0.857143 0.264706 0.452261 6 khoa_tieng_duc suite25_blend 1839 84 0.045677 0.479100 0.932163 0.031446 0.009732 0.043279 -0.002398 0.336957 0.738095 0.462687 0.596154 0.242754 0.797619 0.372222 0.547386 0.209239 0.916667 0.340708 0.546875 0.169565 0.928571 0.286765 0.489950 6 khoa_tieng_duc suite26_committee_blend 1839 84 0.045677 0.423754 0.934693 0.032928 0.012702 0.035439 -0.010238 0.336957 0.738095 0.462687 0.596154 0.253623 0.833333 0.388889 0.571895 0.201087 0.880952 0.327434 0.525568 0.169565 0.928571 0.286765 0.489950 6 khoa_tieng_duc suite26_joint_head 1839 84 0.045677 0.484930 0.938947 0.032879 0.019802 0.025875 -0.019802 0.320652 0.702381 0.440299 0.567308 0.253623 0.833333 0.388889 0.571895 0.203804 0.892857 0.331858 0.532670 0.167391 0.916667 0.283088 0.483668 6 khoa_tieng_duc suite26_tair 1839 84 0.045677 0.360708 0.933635 0.038044 0.025109 0.025195 -0.020482 0.336957 0.738095 0.462687 0.596154 0.250000 0.821429 0.383333 0.563725 0.201087 0.880952 0.327434 0.525568 0.171739 0.940476 0.290441 0.496231 6 khoa_tieng_duc suite26_tree 1839 84 0.045677 0.348326 0.932370 0.034684 0.016992 0.040004 -0.005673 0.326087 0.714286 0.447761 0.576923 0.246377 0.809524 0.377778 0.555556 0.201087 0.880952 0.327434 0.525568 0.171739 0.940476 0.290441 0.496231 6 khoa_tieng_duc suite26_tree_memory 1839 84 0.045677 0.359078 0.934487 0.037475 0.021702 0.027447 -0.018230 0.331522 0.726190 0.455224 0.586538 0.253623 0.833333 0.388889 0.571895 0.206522 0.904762 0.336283 0.539773 0.173913 0.952381 0.294118 0.502513 6 khoa_tieng_han_quoc committee 3277 123 0.037534 0.253130 0.858679 0.032348 0.019293 0.027792 -0.009742 0.216463 0.577236 0.314856 0.432927 0.178862 0.715447 0.286179 0.447154 0.143511 0.764228 0.241645 0.409765 0.123321 0.821138 0.214437 0.385202 6 khoa_tieng_han_quoc suite14 3277 123 0.037534 0.274150 0.856393 0.039031 0.042920 0.080454 0.042920 0.234756 0.626016 0.341463 0.469512 0.174797 0.699187 0.279675 0.436992 0.143511 0.764228 0.241645 0.409765 0.122100 0.813008 0.212314 0.381388 6 khoa_tieng_han_quoc suite16 3277 123 0.037534 0.265785 0.865988 0.034751 0.019382 0.047157 0.009623 0.225610 0.601626 0.328160 0.451220 0.184959 0.739837 0.295935 0.462398 0.145038 0.772358 0.244216 0.414124 0.123321 0.821138 0.214437 0.385202 6 khoa_tieng_han_quoc suite17 3277 123 0.037534 0.270115 0.866704 0.031640 0.015351 0.031442 -0.006093 0.225610 0.601626 0.328160 0.451220 0.180894 0.723577 0.289431 0.452236 0.145038 0.772358 0.244216 0.414124 0.123321 0.821138 0.214437 0.385202 6 khoa_tieng_han_quoc suite18 3277 123 0.037534 0.268417 0.866591 0.031673 0.014826 0.031415 -0.006120 0.225610 0.601626 0.328160 0.451220 0.180894 0.723577 0.289431 0.452236 0.143511 0.764228 0.241645 0.409765 0.122100 0.813008 0.212314 0.381388 6 khoa_tieng_han_quoc suite20 3277 123 0.037534 0.246169 0.831274 0.080598 0.107509 0.145043 0.107509 0.182927 0.487805 0.266075 0.365854 0.158537 0.634146 0.253659 0.396341 0.132824 0.707317 0.223650 0.379250 0.114774 0.764228 0.199575 0.358505 6 khoa_tieng_han_quoc suite21 3277 123 0.037534 0.263040 0.860634 0.032002 0.017686 0.027312 -0.010223 0.225610 0.601626 0.328160 0.451220 0.176829 0.707317 0.282927 0.442073 0.140458 0.747967 0.236504 0.401046 0.120879 0.804878 0.210191 0.377574 6 khoa_tieng_han_quoc suite22 3277 123 0.037534 0.296354 0.865751 0.031882 0.019988 0.017733 -0.019802 0.246951 0.658537 0.359202 0.493902 0.176829 0.707317 0.282927 0.442073 0.141985 0.756098 0.239075 0.405405 0.122100 0.813008 0.212314 0.381388 6 khoa_tieng_han_quoc suite22_primary 3277 123 0.037534 0.265299 0.837893 0.032662 0.021212 0.016409 -0.021126 0.189024 0.504065 0.274945 0.378049 0.148374 0.593496 0.237398 0.370935 0.131298 0.699187 0.221080 0.374891 0.112332 0.747967 0.195329 0.350877 6 khoa_tieng_han_quoc suite22_relational 3277 123 0.037534 0.309439 0.853800 0.032025 0.024841 0.013136 -0.024398 0.192073 0.512195 0.279379 0.384146 0.158537 0.634146 0.253659 0.396341 0.137405 0.731707 0.231362 0.392328 0.117216 0.780488 0.203822 0.366133 6 khoa_tieng_han_quoc suite23 3277 123 0.037534 0.264688 0.858256 0.031939 0.017511 0.023890 -0.013644 0.225610 0.601626 0.328160 0.451220 0.176829 0.707317 0.282927 0.442073 0.141985 0.756098 0.239075 0.405405 0.118437 0.788618 0.205945 0.369947 6 khoa_tieng_han_quoc suite23_graph 3277 123 0.037534 0.231526 0.765368 0.032204 0.010878 0.029355 -0.008179 0.185976 0.495935 0.270510 0.371951 0.148374 0.593496 0.237398 0.370935 0.120611 0.642276 0.203085 0.344377 0.100122 0.666667 0.174098 0.312738 6 khoa_tieng_han_quoc suite24 3277 123 0.037534 0.269686 0.857236 0.032516 0.022671 0.015764 -0.021770 0.225610 0.601626 0.328160 0.451220 0.178862 0.715447 0.286179 0.447154 0.141985 0.756098 0.239075 0.405405 0.123321 0.821138 0.214437 0.385202 6 khoa_tieng_han_quoc suite24_posthoc 3277 123 0.037534 0.283787 0.857961 0.032064 0.018721 0.019174 -0.018360 0.240854 0.642276 0.350333 0.481707 0.178862 0.715447 0.286179 0.447154 0.143511 0.764228 0.241645 0.409765 0.120879 0.804878 0.210191 0.377574 6 khoa_tieng_han_quoc suite25 3277 123 0.037534 0.294954 0.841355 0.032298 0.022547 0.014988 -0.022547 0.216463 0.577236 0.314856 0.432927 0.164634 0.658537 0.263415 0.411585 0.138931 0.739837 0.233933 0.396687 0.120879 0.804878 0.210191 0.377574 6 khoa_tieng_han_quoc suite25_blend 3277 123 0.037534 0.296680 0.866622 0.031852 0.020829 0.018117 -0.019418 0.246951 0.658537 0.359202 0.493902 0.174797 0.699187 0.279675 0.436992 0.146565 0.780488 0.246787 0.418483 0.124542 0.829268 0.216561 0.389016 6 khoa_tieng_han_quoc suite26_committee_blend 3277 123 0.037534 0.281160 0.860491 0.032633 0.022773 0.014836 -0.022699 0.222561 0.593496 0.323725 0.445122 0.180894 0.723577 0.289431 0.452236 0.146565 0.780488 0.246787 0.418483 0.120879 0.804878 0.210191 0.377574 6 khoa_tieng_han_quoc suite26_joint_head 3277 123 0.037534 0.348414 0.850300 0.031916 0.026410 0.011125 -0.026410 0.222561 0.593496 0.323725 0.445122 0.170732 0.682927 0.273171 0.426829 0.138931 0.739837 0.233933 0.396687 0.115995 0.772358 0.201699 0.362319 6 khoa_tieng_han_quoc suite26_tair 3277 123 0.037534 0.292527 0.846114 0.034250 0.028640 0.008894 -0.028640 0.225610 0.601626 0.328160 0.451220 0.168699 0.674797 0.269919 0.421748 0.137405 0.731707 0.231362 0.392328 0.118437 0.788618 0.205945 0.369947 6 khoa_tieng_han_quoc suite26_tree 3277 123 0.037534 0.258714 0.843902 0.033269 0.023964 0.013570 -0.023964 0.222561 0.593496 0.323725 0.445122 0.168699 0.674797 0.269919 0.421748 0.137405 0.731707 0.231362 0.392328 0.118437 0.788618 0.205945 0.369947 6 khoa_tieng_han_quoc suite26_tree_memory 3277 123 0.037534 0.271044 0.845552 0.034302 0.027890 0.009645 -0.027890 0.228659 0.609756 0.332594 0.457317 0.176829 0.707317 0.282927 0.442073 0.140458 0.747967 0.236504 0.401046 0.118437 0.788618 0.205945 0.369947 6 khoa_tieng_italia committee 2026 94 0.046397 0.228617 0.798709 0.046662 0.035086 0.075035 0.028638 0.216749 0.468085 0.296296 0.379965 0.177632 0.574468 0.271357 0.397059 0.148148 0.638298 0.240481 0.384123 0.126482 0.680851 0.213333 0.362812 6 khoa_tieng_italia suite14 2026 94 0.046397 0.238430 0.821990 0.068429 0.102672 0.149069 0.102672 0.221675 0.478723 0.303030 0.388601 0.194079 0.627660 0.296482 0.433824 0.153086 0.659574 0.248497 0.396927 0.128458 0.691489 0.216667 0.368481 6 khoa_tieng_italia suite16 2026 94 0.046397 0.225944 0.805846 0.070245 0.086087 0.132484 0.086087 0.211823 0.457447 0.289562 0.371330 0.180921 0.585106 0.276382 0.404412 0.150617 0.648936 0.244489 0.390525 0.126482 0.680851 0.213333 0.362812 6 khoa_tieng_italia suite17 2026 94 0.046397 0.235013 0.812861 0.044427 0.030763 0.075055 0.028658 0.211823 0.457447 0.289562 0.371330 0.180921 0.585106 0.276382 0.404412 0.155556 0.670213 0.252505 0.403329 0.126482 0.680851 0.213333 0.362812 6 khoa_tieng_italia suite18 2026 94 0.046397 0.234196 0.811726 0.044466 0.030032 0.074810 0.028413 0.216749 0.468085 0.296296 0.379965 0.180921 0.585106 0.276382 0.404412 0.155556 0.670213 0.252505 0.403329 0.126482 0.680851 0.213333 0.362812 6 khoa_tieng_italia suite20 2026 94 0.046397 0.177238 0.782600 0.123951 0.169325 0.215722 0.169325 0.187192 0.404255 0.255892 0.328152 0.154605 0.500000 0.236181 0.345588 0.135802 0.585106 0.220441 0.352113 0.128458 0.691489 0.216667 0.368481 6 khoa_tieng_italia suite21 2026 94 0.046397 0.230835 0.798046 0.046574 0.031035 0.076576 0.030179 0.216749 0.468085 0.296296 0.379965 0.180921 0.585106 0.276382 0.404412 0.148148 0.638298 0.240481 0.384123 0.126482 0.680851 0.213333 0.362812 6 khoa_tieng_italia suite22 2026 94 0.046397 0.240713 0.800961 0.039320 0.007999 0.041756 -0.004641 0.261084 0.563830 0.356902 0.457686 0.197368 0.638298 0.301508 0.441176 0.150617 0.648936 0.244489 0.390525 0.124506 0.670213 0.210000 0.357143 6 khoa_tieng_italia suite22_primary 2026 94 0.046397 0.181675 0.759438 0.041586 0.018467 0.030567 -0.015830 0.182266 0.393617 0.249158 0.319516 0.144737 0.468085 0.221106 0.323529 0.130864 0.563830 0.212425 0.339309 0.110672 0.595745 0.186667 0.317460 6 khoa_tieng_italia suite22_relational 2026 94 0.046397 0.193010 0.784817 0.041173 0.018699 0.029816 -0.016580 0.201970 0.436170 0.276094 0.354059 0.167763 0.542553 0.256281 0.375000 0.133333 0.574468 0.216433 0.345711 0.116601 0.627660 0.196667 0.334467 6 khoa_tieng_italia suite23 2026 94 0.046397 0.237671 0.810862 0.041185 0.019933 0.065402 0.019005 0.231527 0.500000 0.316498 0.405872 0.190789 0.617021 0.291457 0.426471 0.155556 0.670213 0.252505 0.403329 0.126482 0.680851 0.213333 0.362812 6 khoa_tieng_italia suite23_graph 2026 94 0.046397 0.203012 0.801253 0.041844 0.026080 0.069300 0.022904 0.231527 0.500000 0.316498 0.405872 0.194079 0.627660 0.296482 0.433824 0.150617 0.648936 0.244489 0.390525 0.124506 0.670213 0.210000 0.357143 6 khoa_tieng_italia suite24 2026 94 0.046397 0.237398 0.799315 0.041303 0.028269 0.047322 0.000925 0.216749 0.468085 0.296296 0.379965 0.171053 0.553191 0.261307 0.382353 0.148148 0.638298 0.240481 0.384123 0.126482 0.680851 0.213333 0.362812 6 khoa_tieng_italia suite24_posthoc 2026 94 0.046397 0.263079 0.808836 0.039799 0.015964 0.062093 0.015696 0.236453 0.510638 0.323232 0.414508 0.190789 0.617021 0.291457 0.426471 0.160494 0.691489 0.260521 0.416133 0.132411 0.712766 0.223333 0.379819 6 khoa_tieng_italia suite25 2026 94 0.046397 0.229770 0.798965 0.040866 0.018673 0.055028 0.008631 0.216749 0.468085 0.296296 0.379965 0.164474 0.531915 0.251256 0.367647 0.138272 0.595745 0.224449 0.358515 0.118577 0.638298 0.200000 0.340136 6 khoa_tieng_italia suite25_blend 2026 94 0.046397 0.242134 0.810105 0.040997 0.017883 0.059588 0.013191 0.211823 0.457447 0.289562 0.371330 0.177632 0.574468 0.271357 0.397059 0.150617 0.648936 0.244489 0.390525 0.122530 0.659574 0.206667 0.351474 6 khoa_tieng_italia suite26_committee_blend 2026 94 0.046397 0.234487 0.813871 0.039200 0.009350 0.046982 0.000585 0.236453 0.510638 0.323232 0.414508 0.187500 0.606383 0.286432 0.419118 0.153086 0.659574 0.248497 0.396927 0.130435 0.702128 0.220000 0.374150 6 khoa_tieng_italia suite26_joint_head 2026 94 0.046397 0.270269 0.817880 0.039039 0.017875 0.036454 -0.009943 0.221675 0.478723 0.303030 0.388601 0.174342 0.563830 0.266332 0.389706 0.150617 0.648936 0.244489 0.390525 0.128458 0.691489 0.216667 0.368481 6 khoa_tieng_italia suite26_tair 2026 94 0.046397 0.235881 0.821167 0.040181 0.016200 0.031835 -0.014562 0.251232 0.542553 0.343434 0.440415 0.194079 0.627660 0.296482 0.433824 0.155556 0.670213 0.252505 0.403329 0.126482 0.680851 0.213333 0.362812 6 khoa_tieng_italia suite26_tree 2026 94 0.046397 0.229103 0.816630 0.040678 0.008429 0.052886 0.006489 0.236453 0.510638 0.323232 0.414508 0.184211 0.595745 0.281407 0.411765 0.153086 0.659574 0.248497 0.396927 0.126482 0.680851 0.213333 0.362812 6 khoa_tieng_italia suite26_tree_memory 2026 94 0.046397 0.213431 0.816462 0.040851 0.017169 0.031498 -0.014899 0.236453 0.510638 0.323232 0.414508 0.187500 0.606383 0.286432 0.419118 0.155556 0.670213 0.252505 0.403329 0.128458 0.691489 0.216667 0.368481 6 khoa_tieng_nga committee 1842 205 0.111292 0.480149 0.778807 0.077699 0.048070 0.090493 -0.020799 0.516304 0.463415 0.488432 0.473108 0.384058 0.517073 0.440748 0.483577 0.317935 0.570732 0.408377 0.492424 0.286957 0.643902 0.396992 0.515625 6 khoa_tieng_nga suite14 1842 205 0.111292 0.486138 0.793958 0.086941 0.068322 0.144715 0.033423 0.516304 0.463415 0.488432 0.473108 0.394928 0.531707 0.453222 0.497263 0.326087 0.585366 0.418848 0.505051 0.282609 0.634146 0.390977 0.507812 6 khoa_tieng_nga suite16 1842 205 0.111292 0.487353 0.792416 0.089870 0.070423 0.147086 0.035794 0.516304 0.463415 0.488432 0.473108 0.391304 0.526829 0.449064 0.492701 0.320652 0.575610 0.411867 0.496633 0.282609 0.634146 0.390977 0.507812 6 khoa_tieng_nga suite17 1842 205 0.111292 0.486381 0.790879 0.078432 0.050721 0.092391 -0.018901 0.510870 0.458537 0.483290 0.468127 0.380435 0.512195 0.436590 0.479015 0.323370 0.580488 0.415358 0.500842 0.282609 0.634146 0.390977 0.507812 6 khoa_tieng_nga suite18 1842 205 0.111292 0.487798 0.793209 0.078398 0.047560 0.092038 -0.019254 0.516304 0.463415 0.488432 0.473108 0.384058 0.517073 0.440748 0.483577 0.323370 0.580488 0.415358 0.500842 0.286957 0.643902 0.396992 0.515625 6 khoa_tieng_nga suite20 1842 205 0.111292 0.451087 0.799270 0.114993 0.108329 0.193461 0.082169 0.478261 0.429268 0.452442 0.438247 0.413043 0.556098 0.474012 0.520073 0.326087 0.585366 0.418848 0.505051 0.282609 0.634146 0.390977 0.507812 6 khoa_tieng_nga suite21 1842 205 0.111292 0.481212 0.779945 0.077513 0.047882 0.090598 -0.020694 0.516304 0.463415 0.488432 0.473108 0.384058 0.517073 0.440748 0.483577 0.317935 0.570732 0.408377 0.492424 0.289130 0.648780 0.400000 0.519531 6 khoa_tieng_nga suite22 1842 205 0.111292 0.489454 0.798981 0.076042 0.042447 0.068845 -0.042447 0.532609 0.478049 0.503856 0.488048 0.405797 0.546341 0.465696 0.510949 0.336957 0.604878 0.432810 0.521886 0.286957 0.643902 0.396992 0.515625 6 khoa_tieng_nga suite22_primary 1842 205 0.111292 0.475614 0.808797 0.079289 0.055364 0.056382 -0.054910 0.527174 0.473171 0.498715 0.483068 0.423913 0.570732 0.486486 0.533759 0.345109 0.619512 0.443281 0.534512 0.286957 0.643902 0.396992 0.515625 6 khoa_tieng_nga suite22_relational 1842 205 0.111292 0.480096 0.810209 0.078788 0.059714 0.052654 -0.058638 0.516304 0.463415 0.488432 0.473108 0.423913 0.570732 0.486486 0.533759 0.355978 0.639024 0.457243 0.551347 0.297826 0.668293 0.412030 0.535156 6 khoa_tieng_nga suite23 1842 205 0.111292 0.485135 0.795938 0.075788 0.039220 0.092508 -0.018784 0.521739 0.468293 0.493573 0.478088 0.394928 0.531707 0.453222 0.497263 0.320652 0.575610 0.411867 0.496633 0.289130 0.648780 0.400000 0.519531 6 khoa_tieng_nga suite23_graph 1842 205 0.111292 0.451878 0.799687 0.077377 0.020852 0.106160 -0.005132 0.516304 0.463415 0.488432 0.473108 0.402174 0.541463 0.461538 0.506387 0.334239 0.600000 0.429319 0.517677 0.291304 0.653659 0.403008 0.523437 6 khoa_tieng_nga suite24 1842 205 0.111292 0.479672 0.787234 0.078151 0.055890 0.061388 -0.049904 0.521739 0.468293 0.493573 0.478088 0.384058 0.517073 0.440748 0.483577 0.323370 0.580488 0.415358 0.500842 0.284783 0.639024 0.393985 0.511719 6 khoa_tieng_nga suite24_posthoc 1842 205 0.111292 0.497457 0.800122 0.076452 0.036565 0.080653 -0.030639 0.532609 0.478049 0.503856 0.488048 0.398551 0.536585 0.457380 0.501825 0.331522 0.595122 0.425829 0.513468 0.284783 0.639024 0.393985 0.511719 6 khoa_tieng_nga suite25 1842 205 0.111292 0.500049 0.816693 0.082222 0.061012 0.050280 -0.061012 0.516304 0.463415 0.488432 0.473108 0.376812 0.507317 0.432432 0.474453 0.336957 0.604878 0.432810 0.521886 0.302174 0.678049 0.418045 0.542969 6 khoa_tieng_nga suite25_blend 1842 205 0.111292 0.507001 0.803999 0.076644 0.051201 0.065807 -0.045486 0.521739 0.468293 0.493573 0.478088 0.394928 0.531707 0.453222 0.497263 0.328804 0.590244 0.422339 0.509259 0.286957 0.643902 0.396992 0.515625 6 khoa_tieng_nga suite26_committee_blend 1842 205 0.111292 0.471306 0.798296 0.079650 0.050186 0.061106 -0.050186 0.516304 0.463415 0.488432 0.473108 0.398551 0.536585 0.457380 0.501825 0.331522 0.595122 0.425829 0.513468 0.282609 0.634146 0.390977 0.507812 6 khoa_tieng_nga suite26_joint_head 1842 205 0.111292 0.506369 0.827844 0.080832 0.061705 0.049587 -0.061705 0.538043 0.482927 0.508997 0.493028 0.416667 0.560976 0.478170 0.524635 0.336957 0.604878 0.432810 0.521886 0.300000 0.673171 0.415038 0.539062 6 khoa_tieng_nga suite26_tair 1842 205 0.111292 0.433461 0.812173 0.090191 0.073005 0.040582 -0.070710 0.456522 0.409756 0.431877 0.418327 0.398551 0.536585 0.457380 0.501825 0.334239 0.600000 0.429319 0.517677 0.284783 0.639024 0.393985 0.511719 6 khoa_tieng_nga suite26_tree 1842 205 0.111292 0.414449 0.809351 0.082760 0.041752 0.069540 -0.041752 0.467391 0.419512 0.442159 0.428287 0.391304 0.526829 0.449064 0.492701 0.331522 0.595122 0.425829 0.513468 0.282609 0.634146 0.390977 0.507812 6 khoa_tieng_nga suite26_tree_memory 1842 205 0.111292 0.421853 0.809774 0.091815 0.075186 0.038155 -0.073137 0.461957 0.414634 0.437018 0.423307 0.387681 0.521951 0.444906 0.488139 0.331522 0.595122 0.425829 0.513468 0.282609 0.634146 0.390977 0.507812 6 khoa_tieng_nhat committee 2530 88 0.034783 0.176291 0.832526 0.032834 0.017889 0.036026 0.001244 0.181818 0.522727 0.269795 0.380165 0.139474 0.602273 0.226496 0.362022 0.112648 0.647727 0.191919 0.332168 0.102848 0.738636 0.180556 0.330285 6 khoa_tieng_nhat suite14 2530 88 0.034783 0.182082 0.860623 0.041501 0.047063 0.081845 0.047063 0.169960 0.488636 0.252199 0.355372 0.142105 0.613636 0.230769 0.368852 0.126482 0.727273 0.215488 0.372960 0.112342 0.806818 0.197222 0.360772 6 khoa_tieng_nhat suite16 2530 88 0.034783 0.184468 0.845835 0.040317 0.031902 0.063492 0.028709 0.177866 0.511364 0.263930 0.371901 0.139474 0.602273 0.226496 0.362022 0.118577 0.681818 0.202020 0.349650 0.104430 0.750000 0.183333 0.335366 6 khoa_tieng_nhat suite17 2530 88 0.034783 0.178249 0.841288 0.032799 0.021380 0.039862 0.005079 0.177866 0.511364 0.263930 0.371901 0.136842 0.590909 0.222222 0.355191 0.116601 0.670455 0.198653 0.343823 0.102848 0.738636 0.180556 0.330285 6 khoa_tieng_nhat suite18 2530 88 0.034783 0.176339 0.840293 0.032823 0.021340 0.039760 0.004978 0.173913 0.500000 0.258065 0.363636 0.136842 0.590909 0.222222 0.355191 0.116601 0.670455 0.198653 0.343823 0.102848 0.738636 0.180556 0.330285 6 khoa_tieng_nhat suite20 2530 88 0.034783 0.183912 0.855479 0.124188 0.172470 0.207252 0.172470 0.154150 0.443182 0.228739 0.322314 0.147368 0.636364 0.239316 0.382514 0.126482 0.727273 0.215488 0.372960 0.107595 0.772727 0.188889 0.345528 6 khoa_tieng_nhat suite21 2530 88 0.034783 0.184748 0.843548 0.032340 0.016800 0.036729 0.001946 0.177866 0.511364 0.263930 0.371901 0.136842 0.590909 0.222222 0.355191 0.114625 0.659091 0.195286 0.337995 0.106013 0.761364 0.186111 0.340447 6 khoa_tieng_nhat suite22 2530 88 0.034783 0.185277 0.851351 0.031522 0.018438 0.020794 -0.013989 0.177866 0.511364 0.263930 0.371901 0.136842 0.590909 0.222222 0.355191 0.116601 0.670455 0.198653 0.343823 0.106013 0.761364 0.186111 0.340447 6 khoa_tieng_nhat suite22_primary 2530 88 0.034783 0.146207 0.825795 0.032618 0.022773 0.016055 -0.018728 0.146245 0.420455 0.217009 0.305785 0.134211 0.579545 0.217949 0.348361 0.108696 0.625000 0.185185 0.320513 0.098101 0.704545 0.172222 0.315041 ============================================================================================================================================================================================== SUITE26 TARGET FOLD 7 ============================================================================================================================================================================================== [DATA] history=514,858 fail=13,041 (2.53%) train=405,366 validation=109,492 target=53,645 fail=4,179 (7.79%) [TREE] fitting selection tree on older training blocks only... [TREE] selection summary={'n_trees': 96, 'leaf_vocab_size': 73729, 'mean_leaves_per_tree': 768.0, 'min_leaves_per_tree': 768, 'max_leaves_per_tree': 768, 'training_oob_ap': 0.3935485586325756} [TREE-HISTORY-SEL] 50,000/514,858 [TREE-HISTORY-SEL] 100,000/514,858 [TREE-HISTORY-SEL] 150,000/514,858 [TREE-HISTORY-SEL] 200,000/514,858 [TREE-HISTORY-SEL] 250,000/514,858 [TREE-HISTORY-SEL] 300,000/514,858 [TREE-HISTORY-SEL] 350,000/514,858 [TREE-HISTORY-SEL] 400,000/514,858 [TREE-HISTORY-SEL] 450,000/514,858 [TREE-HISTORY-SEL] 500,000/514,858 [TREE-HISTORY-SEL] 514,858/514,858 [TREE] calibration a=0.8394 b=-2.4085 validation macroAP=0.2674 training_OOB_AP=0.3935485586325756 [HISTORY STORE] selection phase (memory candidates restricted to training partition)... [HISTORY STORE] 50,000/514,858 [HISTORY STORE] 100,000/514,858 [HISTORY STORE] 150,000/514,858 [HISTORY STORE] 200,000/514,858 [HISTORY STORE] 250,000/514,858 [HISTORY STORE] 300,000/514,858 [HISTORY STORE] 350,000/514,858 [HISTORY STORE] 400,000/514,858 [HISTORY STORE] 450,000/514,858 [HISTORY STORE] 500,000/514,858 FOLD 7 SELECTION STUDENT-HISTORY SUPPORT -------------------------------------------------------------------------------- faculty rows prevalence history_mean history_zero_rate history_failure_mean same_course_history_mean course_seen_mean new_course_rate history_grade_present_rate khoa_cong_nghe_thong_tin 52684 0.044074 11.078126 0.252316 0.192222 0.000019 1342.251594 0.008655 1.0 khoa_quan_tri_kinh_doanh_va_du_lich 75430 0.038406 10.124844 0.230465 0.190004 0.000013 1791.502811 0.007504 1.0 khoa_quoc_te_hoc 24904 0.013130 9.113315 0.268551 0.037102 0.000000 1222.484782 0.034131 1.0 khoa_tieng_anh 92960 0.016297 11.887349 0.203539 0.041846 0.000032 1393.188608 0.033692 1.0 khoa_tieng_bo_dao_nha 9532 0.047209 12.045741 0.194713 0.240034 0.000000 1290.049937 0.036614 1.0 khoa_tieng_duc 22146 0.022803 12.517701 0.231735 0.099702 0.000045 1385.570396 0.021494 1.0 khoa_tieng_han_quoc 36779 0.010713 12.048887 0.212295 0.038908 0.000000 1334.595720 0.033361 1.0 khoa_tieng_italia 22935 0.034314 12.797210 0.182952 0.146850 0.000044 1267.102725 0.061391 1.0 khoa_tieng_nga 17307 0.057780 11.936037 0.215693 0.251343 0.000000 1369.150864 0.080603 1.0 khoa_tieng_nhat 34455 0.012741 11.600261 0.243303 0.034567 0.000000 1424.351531 0.041765 1.0 khoa_tieng_phap 30327 0.014146 12.160748 0.222739 0.060243 0.000000 1323.431134 0.021037 1.0 khoa_tieng_tay_ban_nha 16330 0.032884 11.935885 0.223454 0.177832 0.000000 1279.189773 0.046663 1.0 khoa_tieng_trung_quoc 69961 0.011907 12.834322 0.190277 0.044310 0.000000 1464.260245 0.055417 1.0 khoa_viet_nam_hoc 9108 0.066535 8.636144 0.301493 0.274813 0.000000 223.007356 0.058191 1.0 ------------------------------------------------------------------------------------------------------------------------------------------------------ [VARIANT suite26_tree_memory] [SELECT MEMORY] epoch=01/12 loss=0.15135 BCE=0.11759 rank=0.15142 joint=0.06278 ability=0.00000 macroAP=0.2323 F2@20=0.3627 Brier=0.0609 best=01 [SELECT MEMORY] epoch=02/12 loss=0.14868 BCE=0.11740 rank=0.14897 joint=0.05173 ability=0.00000 macroAP=0.2372 F2@20=0.3650 Brier=0.0619 best=02 [SELECT MEMORY] epoch=03/12 loss=0.14115 BCE=0.11453 rank=0.12181 joint=0.04472 ability=0.00000 macroAP=0.2512 F2@20=0.3710 Brier=0.0623 best=03 [SELECT MEMORY] epoch=04/12 loss=0.13678 BCE=0.11323 rank=0.10318 joint=0.04066 ability=0.00000 macroAP=0.2322 F2@20=0.3625 Brier=0.0606 best=03 [SELECT MEMORY] epoch=05/12 loss=0.13080 BCE=0.11086 rank=0.08308 joint=0.03465 ability=0.00000 macroAP=0.2406 F2@20=0.3644 Brier=0.0608 best=03 [SELECT MEMORY] epoch=06/12 loss=0.12792 BCE=0.10969 rank=0.07463 joint=0.03114 ability=0.00000 macroAP=0.2367 F2@20=0.3636 Brier=0.0606 best=03 ------------------------------------------------------------------------------------------------------------------------------------------------------ [VARIANT suite26_tair] [SELECT TAIR] epoch=01/12 loss=0.15675 BCE=0.11676 rank=0.16133 joint=0.06477 ability=0.09243 macroAP=0.2318 F2@20=0.3615 Brier=0.0607 best=01 [SELECT TAIR] epoch=02/12 loss=0.15125 BCE=0.11625 rank=0.14366 joint=0.05423 ability=0.07711 macroAP=0.2395 F2@20=0.3640 Brier=0.0607 best=02 [SELECT TAIR] epoch=03/12 loss=0.14825 BCE=0.11594 rank=0.13235 joint=0.04870 ability=0.07262 macroAP=0.2321 F2@20=0.3630 Brier=0.0606 best=02 [SELECT TAIR] epoch=04/12 loss=0.14281 BCE=0.11443 rank=0.10961 joint=0.04327 ability=0.07087 macroAP=0.2316 F2@20=0.3630 Brier=0.0606 best=02 [SELECT TAIR] epoch=05/12 loss=0.13758 BCE=0.11189 rank=0.09593 joint=0.03890 ability=0.06742 macroAP=0.2449 F2@20=0.3683 Brier=0.0614 best=05 [SELECT TAIR] epoch=06/12 loss=0.13454 BCE=0.11168 rank=0.08140 joint=0.03431 ability=0.06409 macroAP=0.2429 F2@20=0.3646 Brier=0.0607 best=05 [SELECT TAIR] epoch=07/12 loss=0.13067 BCE=0.10922 rank=0.07538 joint=0.03125 ability=0.06254 macroAP=0.2607 F2@20=0.3720 Brier=0.0624 best=07 [SELECT TAIR] epoch=08/12 loss=0.12933 BCE=0.10911 rank=0.06940 joint=0.02933 ability=0.06032 macroAP=0.2438 F2@20=0.3643 Brier=0.0606 best=07 [SELECT TAIR] epoch=09/12 loss=0.12615 BCE=0.10717 rank=0.06321 joint=0.02700 ability=0.05916 macroAP=0.2446 F2@20=0.3627 Brier=0.0607 best=07 [SELECT TAIR] epoch=10/12 loss=0.12516 BCE=0.10661 rank=0.06161 joint=0.02606 ability=0.05765 macroAP=0.2378 F2@20=0.3611 Brier=0.0607 best=07 [COMMITTEE BLEND ABLATION] selected alpha=0.10 policyAP=0.4294 policyF2=0.4472 [TREE] fitting production tree on all permissible history... [TREE] production summary={'n_trees': 96, 'leaf_vocab_size': 73729, 'mean_leaves_per_tree': 768.0, 'min_leaves_per_tree': 768, 'max_leaves_per_tree': 768, 'training_oob_ap': 0.34896118212119587} [TREE-HISTORY-PROD] 50,000/514,858 [TREE-HISTORY-PROD] 100,000/514,858 [TREE-HISTORY-PROD] 150,000/514,858 [TREE-HISTORY-PROD] 200,000/514,858 [TREE-HISTORY-PROD] 250,000/514,858 [TREE-HISTORY-PROD] 300,000/514,858 [TREE-HISTORY-PROD] 350,000/514,858 [TREE-HISTORY-PROD] 400,000/514,858 [TREE-HISTORY-PROD] 450,000/514,858 [TREE-HISTORY-PROD] 500,000/514,858 [TREE-HISTORY-PROD] 514,858/514,858 [TREE-TARGET-PROD] 50,000/53,645 [TREE-TARGET-PROD] 53,645/53,645 [HISTORY STORE] production history... [HISTORY STORE] 50,000/514,858 [HISTORY STORE] 100,000/514,858 [HISTORY STORE] 150,000/514,858 [HISTORY STORE] 200,000/514,858 [HISTORY STORE] 250,000/514,858 [HISTORY STORE] 300,000/514,858 [HISTORY STORE] 350,000/514,858 [HISTORY STORE] 400,000/514,858 [HISTORY STORE] 450,000/514,858 [HISTORY STORE] 500,000/514,858 [HISTORY STORE] production target... [HISTORY STORE] 50,000/53,645 FOLD 7 TARGET STUDENT-HISTORY SUPPORT -------------------------------------------------------------------------------- faculty rows prevalence history_mean history_zero_rate history_failure_mean same_course_history_mean course_seen_mean new_course_rate history_grade_present_rate fold khoa_cong_nghe_thong_tin 6926 0.151314 12.520358 0.309703 0.838435 0.000000 1734.148282 0.111320 1.0 7 khoa_quan_tri_kinh_doanh_va_du_lich 8989 0.124930 11.009345 0.345200 0.662365 0.000111 2315.553788 0.058738 1.0 7 khoa_quoc_te_hoc 2755 0.046461 11.532486 0.290018 0.243194 0.000000 1853.978221 0.109256 1.0 7 khoa_tieng_anh 8369 0.029872 10.023061 0.238141 0.157366 0.000119 1687.826861 0.128331 1.0 7 khoa_tieng_bo_dao_nha 1209 0.118280 9.601323 0.302730 0.750207 0.000000 1816.044665 0.200165 1.0 7 khoa_tieng_duc 2284 0.048599 10.798599 0.287215 0.405867 0.000876 2266.680385 0.058231 1.0 7 khoa_tieng_han_quoc 3434 0.036401 10.590274 0.239080 0.248398 0.000000 1820.941468 0.253931 1.0 7 khoa_tieng_italia 2453 0.103547 12.527517 0.216062 0.527517 0.000408 1899.827558 0.105993 1.0 7 khoa_tieng_nga 1924 0.080042 11.597713 0.350312 0.735447 0.001559 1949.861227 0.257277 1.0 7 khoa_tieng_nhat 2795 0.051878 8.001073 0.252594 0.220394 0.000000 2171.032916 0.267621 1.0 7 khoa_tieng_phap 2915 0.040823 11.371184 0.281304 0.168439 0.000343 1868.383190 0.148199 1.0 7 khoa_tieng_tay_ban_nha 1957 0.097087 11.077670 0.307614 0.491569 0.000000 1905.812468 0.175268 1.0 7 khoa_tieng_trung_quoc 6657 0.032597 12.656151 0.199639 0.219618 0.000000 1342.588553 0.297281 1.0 7 khoa_viet_nam_hoc 978 0.175869 4.746421 0.322086 0.663599 0.000000 247.961145 0.184049 1.0 7 [REFIT MEMORY] epoch=01/3 loss=0.18741 BCE=0.14396 rank=0.20277 joint=0.07991 ability=0.00000 [REFIT MEMORY] epoch=03/3 loss=0.17805 BCE=0.14140 rank=0.17218 joint=0.06433 ability=0.00000 [VARIANT suite26_tree_memory] selected_epochs=3 target macroAP=0.2784 [REFIT TAIR] epoch=01/7 loss=0.19548 BCE=0.14486 rank=0.21012 joint=0.08438 ability=0.10785 [REFIT TAIR] epoch=07/7 loss=0.16720 BCE=0.13687 rank=0.11390 joint=0.04914 ability=0.07571 [VARIANT suite26_tair] selected_epochs=7 target macroAP=0.2934 FOLD 7 TREE CURRENT-STATE FEATURE IMPORTANCE -------------------------------------------------------------------------------- rank feature importance fold 1 hist_course_pass_rate 0.078137 7 2 prev_semester_gpa10 0.077254 7 3 course_status_FIT ||| ứng_dụng_công_nghệ_thông_tin ||| Computer Skills 0.052958 7 4 hist_semester_gpa10_mean 0.044414 7 5 prev_cumulative_gpa10 0.041021 7 6 recent3_semester_gpa10_mean 0.041014 7 7 hist_component_K2_mean 0.027393 7 8 recent3_course_grade10_mean 0.025883 7 9 recent3_component_grade_mean 0.025279 7 10 hist_course_grade10_mean 0.023200 7 11 hist_warning_in_last_semester 0.021227 7 12 recent3_course_grade10_median 0.019366 7 13 recent3_warning_count 0.018703 7 14 prev_failed_credits 0.017285 7 15 hist_course_grade10_std 0.016318 7 16 hist_component_grade_mean 0.013994 7 17 prev_outstanding_failed_credits 0.013615 7 18 prev_ssvhk_semester_ordinal 0.012140 7 19 recent3_course_grade10_std 0.012059 7 20 hist_component_low_rate 0.011051 7 21 hist_component_T1_count 0.011018 7 22 hist_passed_credits_sum 0.010954 7 23 prev_ssvhk_NHHK 0.010787 7 24 hist_component_courses 0.010387 7 25 recent3_course_grade10_count 0.009407 7 26 prev_semester_ordinal 0.009283 7 27 prev_semester_NHHK 0.008627 7 28 recent3_component_grade_median 0.008514 7 29 hist_component_high_rate 0.008047 7 30 student_prior_course_count_log 0.007817 7 31 target_semester_registered_credits 0.007745 7 32 hist_course_grade10_median 0.007376 7 33 recent3_component_grade_count 0.007342 7 34 course_cluster_id 0.006772 7 35 hist_failed_credits_sum 0.006672 7 36 hist_component_B1_count 0.006596 7 37 hist_component_K2_count 0.006297 7 38 hist_component_grade_std 0.006226 7 39 hist_component_grade_count 0.006067 7 40 hist_course_grade10_count 0.006042 7 SUITE26 TARGET FOLD 7 — NEW + AVAILABLE REFERENCE RESULTS -------------------------------------------------------------------------------- fold faculty model rows failures prevalence ap auc brier ece10 mean_score calibration_gap precision_at_10 recall_at_10 f1_at_10 fbeta_at_10 precision_at_15 recall_at_15 f1_at_15 fbeta_at_15 precision_at_20 recall_at_20 f1_at_20 fbeta_at_20 precision_at_25 recall_at_25 f1_at_25 fbeta_at_25 7 khoa_cong_nghe_thong_tin committee 6926 1048 0.151314 0.452730 0.808606 0.109826 0.056870 0.094664 -0.056650 0.544012 0.359733 0.433084 0.385875 0.478345 0.474237 0.476282 0.475053 0.421661 0.557252 0.480066 0.523579 0.381640 0.630725 0.475540 0.557900 7 khoa_cong_nghe_thong_tin council 6926 1048 0.151314 0.469554 0.820091 0.101543 0.005449 0.153609 0.002295 0.559885 0.370229 0.445721 0.397134 0.485082 0.480916 0.482990 0.481743 0.432491 0.571565 0.492396 0.537027 0.392610 0.648855 0.489209 0.573937 7 khoa_cong_nghe_thong_tin suite14 6926 1048 0.151314 0.436697 0.812011 0.105365 0.020490 0.154799 0.003486 0.496392 0.328244 0.395175 0.352098 0.461983 0.458015 0.459990 0.458803 0.412274 0.544847 0.469379 0.511924 0.382217 0.631679 0.476259 0.558744 7 khoa_cong_nghe_thong_tin suite16 6926 1048 0.151314 0.452808 0.804297 0.120705 0.095881 0.247195 0.095881 0.544012 0.359733 0.433084 0.385875 0.470645 0.466603 0.468615 0.467406 0.413718 0.546756 0.471023 0.513717 0.376443 0.622137 0.469065 0.550304 7 khoa_cong_nghe_thong_tin suite17 6926 1048 0.151314 0.448033 0.807381 0.112562 0.058201 0.093112 -0.058201 0.542569 0.358779 0.431936 0.384852 0.464870 0.460878 0.462865 0.461671 0.413718 0.546756 0.471023 0.513717 0.378176 0.625000 0.471223 0.552836 7 khoa_cong_nghe_thong_tin suite18 6926 1048 0.151314 0.443675 0.804949 0.112984 0.058825 0.092489 -0.058825 0.536797 0.354962 0.427341 0.380757 0.461983 0.458015 0.459990 0.458803 0.414440 0.547710 0.471845 0.514614 0.377021 0.623092 0.469784 0.551148 7 khoa_cong_nghe_thong_tin suite20 6926 1048 0.151314 0.404212 0.786572 0.121162 0.076374 0.197817 0.046503 0.473304 0.312977 0.376795 0.335722 0.434071 0.430344 0.432199 0.431084 0.387726 0.512405 0.441430 0.481442 0.354503 0.585878 0.441727 0.518231 7 khoa_cong_nghe_thong_tin suite21 6926 1048 0.151314 0.457833 0.805531 0.106416 0.038136 0.113409 -0.037905 0.552670 0.365458 0.439977 0.392016 0.487007 0.482824 0.484907 0.483655 0.425993 0.562977 0.484998 0.528958 0.383372 0.633588 0.477698 0.560432 7 khoa_cong_nghe_thong_tin suite22 6926 1048 0.151314 0.439532 0.806151 0.114838 0.074726 0.077158 -0.074156 0.515152 0.340649 0.410109 0.365404 0.470645 0.466603 0.468615 0.467406 0.425271 0.562023 0.484176 0.528062 0.375289 0.620229 0.467626 0.548616 7 khoa_cong_nghe_thong_tin suite22_primary 6926 1048 0.151314 0.403829 0.790014 0.120189 0.086038 0.065748 -0.085566 0.484848 0.320611 0.385985 0.343910 0.430221 0.426527 0.428366 0.427261 0.394946 0.521947 0.449651 0.490407 0.357968 0.591603 0.446043 0.523295 7 khoa_cong_nghe_thong_tin suite22_relational 6926 1048 0.151314 0.389028 0.784876 0.115053 0.068011 0.083351 -0.067963 0.467532 0.309160 0.372200 0.331627 0.429259 0.425573 0.427408 0.426305 0.382671 0.505725 0.435676 0.475166 0.352194 0.582061 0.438849 0.514855 7 khoa_cong_nghe_thong_tin suite23 6926 1048 0.151314 0.450967 0.809468 0.110841 0.060848 0.090903 -0.060411 0.541126 0.357824 0.430787 0.383828 0.473532 0.469466 0.471490 0.470273 0.420217 0.555344 0.478422 0.521786 0.384527 0.635496 0.479137 0.562120 7 khoa_cong_nghe_thong_tin suite23_graph 6926 1048 0.151314 0.371177 0.783022 0.121453 0.083852 0.067461 -0.083852 0.451659 0.298664 0.359563 0.320368 0.410972 0.407443 0.409200 0.408144 0.376173 0.497137 0.428278 0.467097 0.353349 0.583969 0.440288 0.516543 7 khoa_cong_nghe_thong_tin suite24 6926 1048 0.151314 0.454289 0.811096 0.108921 0.058334 0.093440 -0.057874 0.531025 0.351145 0.422746 0.376663 0.476420 0.472328 0.474365 0.473141 0.433935 0.573473 0.494040 0.538820 0.398383 0.658397 0.496403 0.582377 7 khoa_cong_nghe_thong_tin suite24_posthoc 6926 1048 0.151314 0.444902 0.806917 0.111991 0.065402 0.086382 -0.064932 0.531025 0.351145 0.422746 0.376663 0.465833 0.461832 0.463824 0.462627 0.420939 0.556298 0.479244 0.522682 0.386259 0.638359 0.481295 0.564652 7 khoa_cong_nghe_thong_tin suite25 6926 1048 0.151314 0.365854 0.793112 0.117378 0.066733 0.087270 -0.064043 0.404040 0.267176 0.321654 0.286592 0.394610 0.391221 0.392908 0.391894 0.373285 0.493321 0.424990 0.463511 0.359122 0.593511 0.447482 0.524983 7 khoa_cong_nghe_thong_tin suite25_blend 6926 1048 0.151314 0.444327 0.812178 0.111242 0.061157 0.090663 -0.060651 0.532468 0.352099 0.423894 0.377687 0.468720 0.464695 0.466699 0.465494 0.425271 0.562023 0.484176 0.528062 0.388568 0.642176 0.484173 0.568028 7 khoa_cong_nghe_thong_tin suite26_committee_blend 6926 1048 0.151314 0.453919 0.807104 0.110132 0.058556 0.093274 -0.058040 0.548341 0.362595 0.436531 0.388946 0.481232 0.477099 0.479157 0.477920 0.424549 0.561069 0.483354 0.527165 0.382217 0.631679 0.476259 0.558744 7 khoa_cong_nghe_thong_tin suite26_joint_head 6926 1048 0.151314 0.355797 0.767482 0.121374 0.080728 0.070586 -0.080728 0.422799 0.279580 0.336588 0.299898 0.377286 0.374046 0.375659 0.374689 0.349458 0.461832 0.397863 0.433925 0.329677 0.544847 0.410791 0.481938 7 khoa_cong_nghe_thong_tin suite26_tair 6926 1048 0.151314 0.374624 0.758601 0.116231 0.056734 0.094580 -0.056734 0.443001 0.292939 0.352671 0.314227 0.399423 0.395992 0.397700 0.396674 0.363177 0.479962 0.413481 0.450959 0.332564 0.549618 0.414388 0.486158 7 khoa_cong_nghe_thong_tin suite26_tree 6926 1048 0.151314 0.372611 0.778699 0.115688 0.057936 0.096018 -0.055296 0.441558 0.291985 0.351522 0.313204 0.402310 0.398855 0.400575 0.399541 0.373285 0.493321 0.424990 0.463511 0.347575 0.574427 0.433094 0.508103 7 khoa_cong_nghe_thong_tin suite26_tree_memory 6926 1048 0.151314 0.356904 0.749842 0.118925 0.062771 0.088542 -0.062771 0.417027 0.275763 0.331993 0.295803 0.378248 0.375000 0.376617 0.375645 0.338628 0.447519 0.385532 0.420477 0.317552 0.524809 0.395683 0.464213 7 khoa_cong_nghe_thong_tin v2 6926 1048 0.151314 0.455974 0.814170 0.150170 0.161980 0.313294 0.161980 0.555556 0.367366 0.442275 0.394063 0.479307 0.475191 0.477240 0.476008 0.421661 0.557252 0.480066 0.523579 0.377021 0.623092 0.469784 0.551148 7 khoa_quan_tri_kinh_doanh_va_du_lich committee 8989 1123 0.124930 0.420734 0.820544 0.092455 0.033308 0.091658 -0.033272 0.471635 0.377560 0.419387 0.393248 0.411721 0.494212 0.449211 0.475171 0.364294 0.583259 0.448477 0.520668 0.330218 0.660730 0.440356 0.550527 7 khoa_quan_tri_kinh_doanh_va_du_lich suite14 8989 1123 0.124930 0.429632 0.818054 0.093552 0.040122 0.129972 0.005042 0.466073 0.373108 0.414441 0.388611 0.409496 0.491541 0.446783 0.472603 0.365406 0.585040 0.449846 0.522258 0.327548 0.655387 0.436795 0.546075 7 khoa_quan_tri_kinh_doanh_va_du_lich suite16 8989 1123 0.124930 0.423531 0.822133 0.113955 0.124970 0.249900 0.124970 0.467186 0.373998 0.415430 0.389538 0.413947 0.496883 0.451639 0.477740 0.366518 0.586821 0.451215 0.523847 0.330663 0.661621 0.440950 0.551269 7 khoa_quan_tri_kinh_doanh_va_du_lich suite17 8989 1123 0.124930 0.422662 0.823105 0.094389 0.034920 0.090156 -0.034775 0.466073 0.373108 0.414441 0.388611 0.413947 0.496883 0.451639 0.477740 0.359288 0.575245 0.442314 0.513514 0.331108 0.662511 0.441543 0.552011 7 khoa_quan_tri_kinh_doanh_va_du_lich suite18 8989 1123 0.124930 0.424661 0.823354 0.094548 0.036699 0.089488 -0.035442 0.468298 0.374889 0.416419 0.390466 0.411721 0.494212 0.449211 0.475171 0.367075 0.587711 0.451900 0.524642 0.335113 0.670525 0.446884 0.558688 7 khoa_quan_tri_kinh_doanh_va_du_lich suite20 8989 1123 0.124930 0.371126 0.793751 0.104106 0.070994 0.172929 0.047998 0.429366 0.343722 0.381800 0.358004 0.378338 0.454141 0.412788 0.436644 0.338710 0.542297 0.416980 0.484102 0.308411 0.617097 0.411276 0.514171 7 khoa_quan_tri_kinh_doanh_va_du_lich suite21 8989 1123 0.124930 0.409326 0.815795 0.091391 0.021255 0.103718 -0.021212 0.460512 0.368655 0.409496 0.383973 0.389466 0.467498 0.424929 0.449486 0.349277 0.559216 0.429990 0.499205 0.320427 0.641140 0.427300 0.534204 7 khoa_quan_tri_kinh_doanh_va_du_lich suite22 8989 1123 0.124930 0.433960 0.822919 0.094610 0.053944 0.070987 -0.053944 0.480534 0.384684 0.427300 0.400668 0.422107 0.506679 0.460542 0.487158 0.368743 0.590383 0.453954 0.527027 0.331998 0.664292 0.442730 0.553495 7 khoa_quan_tri_kinh_doanh_va_du_lich suite22_primary 8989 1123 0.124930 0.422869 0.812281 0.097525 0.065772 0.059159 -0.065772 0.463849 0.371327 0.412463 0.386756 0.402077 0.482636 0.438689 0.464041 0.356507 0.570793 0.438891 0.509539 0.322652 0.645592 0.430267 0.537914 7 khoa_quan_tri_kinh_doanh_va_du_lich suite22_relational 8989 1123 0.124930 0.412924 0.813269 0.094293 0.053348 0.071582 -0.053348 0.461624 0.369546 0.410485 0.384901 0.390208 0.468388 0.425739 0.450342 0.350389 0.560997 0.431359 0.500795 0.314197 0.628673 0.418991 0.523817 7 khoa_quan_tri_kinh_doanh_va_du_lich suite23 8989 1123 0.124930 0.426798 0.824792 0.093274 0.039646 0.085285 -0.039646 0.472747 0.378451 0.420376 0.394175 0.414688 0.497774 0.452448 0.478596 0.368187 0.589492 0.453269 0.526232 0.336004 0.672306 0.448071 0.560172 7 khoa_quan_tri_kinh_doanh_va_du_lich suite23_graph 8989 1123 0.124930 0.385787 0.799617 0.099242 0.056315 0.068615 -0.056315 0.426029 0.341051 0.378833 0.355222 0.378338 0.454141 0.412788 0.436644 0.334260 0.535174 0.411503 0.477742 0.306631 0.613535 0.408902 0.511203 7 khoa_quan_tri_kinh_doanh_va_du_lich suite24 8989 1123 0.124930 0.425242 0.818026 0.091648 0.034024 0.090906 -0.034024 0.464961 0.372217 0.413452 0.387683 0.408754 0.490650 0.445973 0.471747 0.362069 0.579697 0.445738 0.517488 0.324878 0.650045 0.433234 0.541623 7 khoa_quan_tri_kinh_doanh_va_du_lich suite24_posthoc 8989 1123 0.124930 0.431383 0.824485 0.092793 0.040998 0.083933 -0.040998 0.477197 0.382012 0.424332 0.397885 0.418398 0.502226 0.456495 0.482877 0.373749 0.598397 0.460116 0.534181 0.331998 0.664292 0.442730 0.553495 7 khoa_quan_tri_kinh_doanh_va_du_lich suite25 8989 1123 0.124930 0.380019 0.806154 0.096740 0.050919 0.074011 -0.050919 0.436040 0.349065 0.387735 0.363569 0.372404 0.447017 0.406313 0.429795 0.340934 0.545859 0.419719 0.487281 0.311972 0.624221 0.416024 0.520107 7 khoa_quan_tri_kinh_doanh_va_du_lich suite25_blend 8989 1123 0.124930 0.423465 0.824561 0.093068 0.040211 0.084719 -0.040211 0.487208 0.390027 0.433234 0.406233 0.415430 0.498664 0.453258 0.479452 0.367075 0.587711 0.451900 0.524642 0.330218 0.660730 0.440356 0.550527 7 khoa_quan_tri_kinh_doanh_va_du_lich suite26_committee_blend 8989 1123 0.124930 0.424079 0.820984 0.092382 0.034262 0.090668 -0.034262 0.481646 0.385574 0.428289 0.401595 0.408012 0.489760 0.445164 0.470890 0.361513 0.578807 0.445053 0.516693 0.329773 0.659840 0.439763 0.549785 7 khoa_quan_tri_kinh_doanh_va_du_lich suite26_joint_head 8989 1123 0.124930 0.410134 0.810368 0.096227 0.057861 0.067069 -0.057861 0.456062 0.365093 0.405539 0.380263 0.405045 0.486198 0.441926 0.467466 0.361513 0.578807 0.445053 0.516693 0.318647 0.637578 0.424926 0.531236 7 khoa_quan_tri_kinh_doanh_va_du_lich suite26_tair 8989 1123 0.124930 0.388513 0.783710 0.095273 0.032437 0.095734 -0.029196 0.430478 0.344613 0.382789 0.358932 0.359792 0.431879 0.392554 0.415240 0.322581 0.516474 0.397124 0.461049 0.288385 0.577026 0.384570 0.480783 7 khoa_quan_tri_kinh_doanh_va_du_lich suite26_tree 8989 1123 0.124930 0.407032 0.818744 0.092844 0.030931 0.093999 -0.030931 0.451613 0.361532 0.401583 0.376554 0.402819 0.483526 0.439498 0.464897 0.363181 0.581478 0.447107 0.519078 0.323988 0.648264 0.432047 0.540139 7 khoa_quan_tri_kinh_doanh_va_du_lich suite26_tree_memory 8989 1123 0.124930 0.330415 0.768694 0.098608 0.033878 0.091053 -0.033878 0.375973 0.300980 0.334322 0.313485 0.329377 0.395370 0.359369 0.380137 0.302002 0.483526 0.371790 0.431638 0.267023 0.534283 0.356083 0.445170 7 khoa_quoc_te_hoc committee 2755 128 0.046461 0.244577 0.835587 0.041189 0.021055 0.025431 -0.021030 0.210145 0.453125 0.287129 0.368020 0.164649 0.531250 0.251386 0.367568 0.148820 0.640625 0.241532 0.385701 0.134978 0.726562 0.227662 0.387177 7 khoa_quoc_te_hoc suite14 2755 128 0.046461 0.276772 0.829166 0.045613 0.044744 0.090821 0.044360 0.224638 0.484375 0.306931 0.393401 0.184019 0.593750 0.280961 0.410811 0.150635 0.648438 0.244477 0.390405 0.132075 0.710938 0.222766 0.378851 7 khoa_quoc_te_hoc suite16 2755 128 0.046461 0.256292 0.833805 0.043374 0.045038 0.091499 0.045038 0.217391 0.468750 0.297030 0.380711 0.179177 0.578125 0.273567 0.400000 0.150635 0.648438 0.244477 0.390405 0.130624 0.703125 0.220318 0.374688 7 khoa_quoc_te_hoc suite17 2755 128 0.046461 0.251211 0.837389 0.040991 0.019601 0.026860 -0.019601 0.217391 0.468750 0.297030 0.380711 0.179177 0.578125 0.273567 0.400000 0.154265 0.664062 0.250368 0.399812 0.132075 0.710938 0.222766 0.378851 7 khoa_quoc_te_hoc suite18 2755 128 0.046461 0.254594 0.840514 0.041037 0.019923 0.026538 -0.019923 0.210145 0.453125 0.287129 0.368020 0.181598 0.585938 0.277264 0.405405 0.154265 0.664062 0.250368 0.399812 0.132075 0.710938 0.222766 0.378851 7 khoa_quoc_te_hoc suite20 2755 128 0.046461 0.293661 0.841731 0.085762 0.127868 0.174329 0.127868 0.239130 0.515625 0.326733 0.418782 0.193705 0.625000 0.295749 0.432432 0.154265 0.664062 0.250368 0.399812 0.132075 0.710938 0.222766 0.378851 7 khoa_quoc_te_hoc suite21 2755 128 0.046461 0.247735 0.826608 0.040636 0.017365 0.029096 -0.017365 0.213768 0.460938 0.292079 0.374365 0.176755 0.570312 0.269871 0.394595 0.143376 0.617188 0.232695 0.371590 0.124819 0.671875 0.210526 0.358035 7 khoa_quoc_te_hoc suite22 2755 128 0.046461 0.301344 0.847750 0.041061 0.025882 0.020870 -0.025591 0.250000 0.539062 0.341584 0.437817 0.184019 0.593750 0.280961 0.410811 0.159710 0.687500 0.259205 0.413923 0.134978 0.726562 0.227662 0.387177 7 khoa_quoc_te_hoc suite22_primary 2755 128 0.046461 0.290258 0.832074 0.040758 0.027133 0.020199 -0.026262 0.221014 0.476562 0.301980 0.387056 0.184019 0.593750 0.280961 0.410811 0.156080 0.671875 0.253314 0.404516 0.134978 0.726562 0.227662 0.387177 7 khoa_quoc_te_hoc suite22_relational 2755 128 0.046461 0.280852 0.833811 0.039668 0.026369 0.022448 -0.024013 0.231884 0.500000 0.316832 0.406091 0.188862 0.609375 0.288355 0.421622 0.163339 0.703125 0.265096 0.423330 0.136430 0.734375 0.230110 0.391341 7 khoa_quoc_te_hoc suite23 2755 128 0.046461 0.266959 0.852764 0.041020 0.021231 0.025230 -0.021231 0.224638 0.484375 0.306931 0.393401 0.181598 0.585938 0.277264 0.405405 0.157895 0.679688 0.256259 0.409219 0.143687 0.773438 0.242350 0.412157 7 khoa_quoc_te_hoc suite23_graph 2755 128 0.046461 0.298520 0.866212 0.040090 0.018223 0.029681 -0.016780 0.253623 0.546875 0.346535 0.444162 0.210654 0.679688 0.321627 0.470270 0.170599 0.734375 0.276878 0.442145 0.143687 0.773438 0.242350 0.412157 7 khoa_quoc_te_hoc suite24 2755 128 0.046461 0.254584 0.838474 0.040761 0.021451 0.025010 -0.021451 0.210145 0.453125 0.287129 0.368020 0.176755 0.570312 0.269871 0.394595 0.150635 0.648438 0.244477 0.390405 0.134978 0.726562 0.227662 0.387177 7 khoa_quoc_te_hoc suite24_posthoc 2755 128 0.046461 0.271060 0.845430 0.040736 0.020484 0.026302 -0.020159 0.221014 0.476562 0.301980 0.387056 0.184019 0.593750 0.280961 0.410811 0.152450 0.656250 0.247423 0.395108 0.134978 0.726562 0.227662 0.387177 7 khoa_quoc_te_hoc suite25 2755 128 0.046461 0.298129 0.822183 0.038781 0.015505 0.033452 -0.013009 0.239130 0.515625 0.326733 0.418782 0.179177 0.578125 0.273567 0.400000 0.145191 0.625000 0.235641 0.376294 0.130624 0.703125 0.220318 0.374688 7 khoa_quoc_te_hoc suite25_blend 2755 128 0.046461 0.287172 0.848490 0.040602 0.020980 0.025781 -0.020680 0.228261 0.492188 0.311881 0.399746 0.188862 0.609375 0.288355 0.421622 0.157895 0.679688 0.256259 0.409219 0.133527 0.718750 0.225214 0.383014 7 khoa_quoc_te_hoc suite26_committee_blend 2755 128 0.046461 0.256306 0.837151 0.041023 0.020113 0.026348 -0.020113 0.217391 0.468750 0.297030 0.380711 0.169492 0.546875 0.258780 0.378378 0.150635 0.648438 0.244477 0.390405 0.134978 0.726562 0.227662 0.387177 7 khoa_quoc_te_hoc suite26_joint_head 2755 128 0.046461 0.231713 0.754910 0.040997 0.020698 0.026691 -0.019770 0.210145 0.453125 0.287129 0.368020 0.159806 0.515625 0.243993 0.356757 0.130672 0.562500 0.212077 0.338664 0.111756 0.601562 0.188494 0.320566 7 khoa_quoc_te_hoc suite26_tair 2755 128 0.046461 0.224702 0.783802 0.040596 0.013514 0.048970 0.002509 0.184783 0.398438 0.252475 0.323604 0.145278 0.468750 0.221811 0.324324 0.123412 0.531250 0.200295 0.319849 0.113208 0.609375 0.190942 0.324729 7 khoa_quoc_te_hoc suite26_tree 2755 128 0.046461 0.287214 0.835631 0.039275 0.018546 0.045424 -0.001037 0.246377 0.531250 0.336634 0.431472 0.186441 0.601562 0.284658 0.416216 0.157895 0.679688 0.256259 0.409219 0.136430 0.734375 0.230110 0.391341 7 khoa_quoc_te_hoc suite26_tree_memory 2755 128 0.046461 0.247591 0.780741 0.040740 0.013647 0.049767 0.003306 0.177536 0.382812 0.242574 0.310914 0.140436 0.453125 0.214418 0.313514 0.121597 0.523438 0.197349 0.315146 0.111756 0.601562 0.188494 0.320566 7 khoa_tieng_anh committee 8369 250 0.029872 0.220891 0.838668 0.025903 0.010536 0.037179 0.007307 0.150538 0.504000 0.231831 0.342950 0.119522 0.600000 0.199336 0.332594 0.100956 0.676000 0.175676 0.316006 0.086520 0.724000 0.154569 0.292691 7 khoa_tieng_anh suite14 8369 250 0.029872 0.224717 0.849914 0.030271 0.026780 0.056653 0.026780 0.163680 0.548000 0.252070 0.372891 0.125100 0.628000 0.208638 0.348115 0.103943 0.696000 0.180873 0.325355 0.090822 0.760000 0.162254 0.307245 7 khoa_tieng_anh suite16 8369 250 0.029872 0.222178 0.851778 0.040644 0.071691 0.101563 0.071691 0.154122 0.516000 0.237351 0.351116 0.125896 0.632000 0.209967 0.350333 0.106930 0.716000 0.186071 0.334705 0.091778 0.768000 0.163962 0.310479 7 khoa_tieng_anh suite17 8369 250 0.029872 0.226466 0.851076 0.026203 0.012469 0.037402 0.007530 0.158901 0.532000 0.244710 0.362003 0.121116 0.608000 0.201993 0.337029 0.103345 0.692000 0.179834 0.323485 0.093212 0.780000 0.166524 0.315330 7 khoa_tieng_anh suite18 8369 250 0.029872 0.229178 0.851633 0.026111 0.013404 0.037649 0.007777 0.157706 0.528000 0.242870 0.359281 0.123506 0.620000 0.205980 0.343681 0.103345 0.692000 0.179834 0.323485 0.093212 0.780000 0.166524 0.315330 7 khoa_tieng_anh suite20 8369 250 0.029872 0.225304 0.850646 0.033741 0.036559 0.066431 0.036559 0.164875 0.552000 0.253910 0.375612 0.129084 0.648000 0.215282 0.359202 0.107527 0.720000 0.187110 0.336574 0.094646 0.792000 0.169086 0.320181 7 khoa_tieng_anh suite21 8369 250 0.029872 0.225915 0.841714 0.025722 0.005751 0.032642 0.002770 0.156511 0.524000 0.241030 0.356560 0.121912 0.612000 0.203322 0.339246 0.100956 0.676000 0.175676 0.316006 0.088432 0.740000 0.157985 0.299159 7 khoa_tieng_anh suite22 8369 250 0.029872 0.242628 0.852800 0.025584 0.007040 0.023233 -0.006639 0.154122 0.516000 0.237351 0.351116 0.122709 0.616000 0.204651 0.341463 0.103943 0.696000 0.180873 0.325355 0.088910 0.744000 0.158839 0.300776 7 khoa_tieng_anh suite22_primary 8369 250 0.029872 0.222989 0.842808 0.026022 0.011507 0.019345 -0.010527 0.152927 0.512000 0.235511 0.348394 0.119522 0.600000 0.199336 0.332594 0.102748 0.688000 0.178794 0.321616 0.087476 0.732000 0.156277 0.295925 7 khoa_tieng_anh suite22_relational 8369 250 0.029872 0.200856 0.837740 0.026431 0.009799 0.023419 -0.006453 0.149343 0.500000 0.229991 0.340229 0.121116 0.608000 0.201993 0.337029 0.102748 0.688000 0.178794 0.321616 0.088432 0.740000 0.157985 0.299159 7 khoa_tieng_anh suite23 8369 250 0.029872 0.227546 0.842672 0.025738 0.008864 0.034580 0.004707 0.157706 0.528000 0.242870 0.359281 0.122709 0.616000 0.204651 0.341463 0.102748 0.688000 0.178794 0.321616 0.086998 0.728000 0.155423 0.294308 7 khoa_tieng_anh suite23_graph 8369 250 0.029872 0.201967 0.805682 0.026306 0.005536 0.024336 -0.005536 0.137395 0.460000 0.211592 0.313010 0.116335 0.584000 0.194020 0.323725 0.097969 0.656000 0.170478 0.306657 0.084608 0.708000 0.151153 0.286223 7 khoa_tieng_anh suite24 8369 250 0.029872 0.215066 0.836749 0.025850 0.004123 0.033424 0.003552 0.152927 0.512000 0.235511 0.348394 0.121116 0.608000 0.201993 0.337029 0.097969 0.656000 0.170478 0.306657 0.084608 0.708000 0.151153 0.286223 7 khoa_tieng_anh suite24_posthoc 8369 250 0.029872 0.235783 0.842027 0.025567 0.005109 0.030842 0.000969 0.158901 0.532000 0.244710 0.362003 0.126693 0.636000 0.211296 0.352550 0.105137 0.704000 0.182952 0.329095 0.089866 0.752000 0.160547 0.304010 7 khoa_tieng_anh suite25 8369 250 0.029872 0.197452 0.820001 0.026301 0.003287 0.027870 -0.002002 0.143369 0.480000 0.220791 0.326619 0.115538 0.580000 0.192691 0.321508 0.095579 0.640000 0.166320 0.299177 0.086998 0.728000 0.155423 0.294308 7 khoa_tieng_anh suite25_blend 8369 250 0.029872 0.230265 0.846591 0.025654 0.007103 0.032808 0.002936 0.158901 0.532000 0.244710 0.362003 0.125100 0.628000 0.208638 0.348115 0.101553 0.680000 0.176715 0.317876 0.087476 0.732000 0.156277 0.295925 7 khoa_tieng_anh suite26_committee_blend 8369 250 0.029872 0.228457 0.843423 0.025745 0.009130 0.035419 0.005547 0.154122 0.516000 0.237351 0.351116 0.119522 0.600000 0.199336 0.332594 0.102151 0.684000 0.177755 0.319746 0.087954 0.736000 0.157131 0.297542 7 khoa_tieng_anh suite26_joint_head 8369 250 0.029872 0.202106 0.797636 0.026388 0.004706 0.026266 -0.003606 0.152927 0.512000 0.235511 0.348394 0.118725 0.596000 0.198007 0.330377 0.097969 0.656000 0.170478 0.306657 0.082218 0.688000 0.146883 0.278137 7 khoa_tieng_anh suite26_tair 8369 250 0.029872 0.190746 0.821711 0.026447 0.002595 0.031471 0.001599 0.146953 0.492000 0.226311 0.334785 0.115538 0.580000 0.192691 0.321508 0.097372 0.652000 0.169439 0.304787 0.082696 0.692000 0.147737 0.279754 7 khoa_tieng_anh suite26_tree 8369 250 0.029872 0.231910 0.846231 0.025776 0.004808 0.030160 0.000288 0.154122 0.516000 0.237351 0.351116 0.125100 0.628000 0.208638 0.348115 0.102151 0.684000 0.177755 0.319746 0.086042 0.720000 0.153715 0.291074 7 khoa_tieng_anh suite26_tree_memory 8369 250 0.029872 0.170850 0.816701 0.026792 0.002138 0.031481 0.001608 0.139785 0.468000 0.215271 0.318454 0.115538 0.580000 0.192691 0.321508 0.097372 0.652000 0.169439 0.304787 0.082218 0.688000 0.146883 0.278137 7 khoa_tieng_bo_dao_nha committee 1209 143 0.118280 0.407454 0.793864 0.087043 0.014967 0.125831 0.007552 0.438017 0.370629 0.401515 0.382395 0.375691 0.475524 0.419753 0.451527 0.326446 0.552448 0.410390 0.485258 0.301325 0.636364 0.408989 0.520595 7 khoa_tieng_bo_dao_nha suite14 1209 143 0.118280 0.410330 0.800135 0.121050 0.111428 0.224915 0.106636 0.404959 0.342657 0.371212 0.353535 0.370166 0.468531 0.413580 0.444887 0.326446 0.552448 0.410390 0.485258 0.298013 0.629371 0.404494 0.514874 7 khoa_tieng_bo_dao_nha suite16 1209 143 0.118280 0.416213 0.807325 0.144803 0.205013 0.322635 0.204355 0.471074 0.398601 0.431818 0.411255 0.381215 0.482517 0.425926 0.458167 0.334711 0.566434 0.420779 0.497543 0.301325 0.636364 0.408989 0.520595 7 khoa_tieng_bo_dao_nha suite17 1209 143 0.118280 0.407123 0.806203 0.088706 0.025045 0.124066 0.005787 0.438017 0.370629 0.401515 0.382395 0.375691 0.475524 0.419753 0.451527 0.330579 0.559441 0.415584 0.491400 0.304636 0.643357 0.413483 0.526316 7 khoa_tieng_bo_dao_nha suite18 1209 143 0.118280 0.406984 0.804051 0.088566 0.024533 0.123780 0.005500 0.429752 0.363636 0.393939 0.375180 0.381215 0.482517 0.425926 0.458167 0.334711 0.566434 0.420779 0.497543 0.298013 0.629371 0.404494 0.514874 7 khoa_tieng_bo_dao_nha suite20 1209 143 0.118280 0.368151 0.793503 0.133773 0.126242 0.240465 0.122185 0.347107 0.293706 0.318182 0.303030 0.309392 0.391608 0.345679 0.371846 0.301653 0.510490 0.379221 0.448403 0.304636 0.643357 0.413483 0.526316 7 khoa_tieng_bo_dao_nha suite21 1209 143 0.118280 0.421969 0.794113 0.086812 0.022280 0.129662 0.011382 0.446281 0.377622 0.409091 0.389610 0.370166 0.468531 0.413580 0.444887 0.326446 0.552448 0.410390 0.485258 0.291391 0.615385 0.395506 0.503432 7 khoa_tieng_bo_dao_nha suite22 1209 143 0.118280 0.416755 0.826218 0.088001 0.036671 0.081609 -0.036671 0.454545 0.384615 0.416667 0.396825 0.392265 0.496503 0.438272 0.471448 0.347107 0.587413 0.436364 0.515971 0.321192 0.678322 0.435955 0.554920 7 khoa_tieng_bo_dao_nha suite22_primary 1209 143 0.118280 0.380703 0.827851 0.093287 0.059651 0.058629 -0.059651 0.396694 0.335664 0.363636 0.346320 0.381215 0.482517 0.425926 0.458167 0.363636 0.615385 0.457143 0.540541 0.327815 0.692308 0.444944 0.566362 7 khoa_tieng_bo_dao_nha suite22_relational 1209 143 0.118280 0.405848 0.808657 0.089156 0.044620 0.079896 -0.038384 0.396694 0.335664 0.363636 0.346320 0.375691 0.475524 0.419753 0.451527 0.347107 0.587413 0.436364 0.515971 0.324503 0.685315 0.440449 0.560641 7 khoa_tieng_bo_dao_nha suite23 1209 143 0.118280 0.376355 0.793181 0.090981 0.029528 0.088831 -0.029448 0.388430 0.328671 0.356061 0.339105 0.331492 0.419580 0.370370 0.398406 0.322314 0.545455 0.405195 0.479115 0.288079 0.608392 0.391011 0.497712 7 khoa_tieng_bo_dao_nha suite23_graph 1209 143 0.118280 0.328141 0.747727 0.097168 0.051380 0.066899 -0.051380 0.363636 0.307692 0.333333 0.317460 0.309392 0.391608 0.345679 0.371846 0.285124 0.482517 0.358442 0.423833 0.254967 0.538462 0.346067 0.440503 7 khoa_tieng_bo_dao_nha suite24 1209 143 0.118280 0.389881 0.789272 0.088105 0.009399 0.116143 -0.002136 0.413223 0.349650 0.378788 0.360750 0.375691 0.475524 0.419753 0.451527 0.338843 0.573427 0.425974 0.503686 0.288079 0.608392 0.391011 0.497712 7 khoa_tieng_bo_dao_nha suite24_posthoc 1209 143 0.118280 0.404840 0.799532 0.087353 0.011935 0.109897 -0.008383 0.421488 0.356643 0.386364 0.367965 0.370166 0.468531 0.413580 0.444887 0.330579 0.559441 0.415584 0.491400 0.294702 0.622378 0.400000 0.509153 7 khoa_tieng_bo_dao_nha suite25 1209 143 0.118280 0.356246 0.795609 0.089449 0.017499 0.108007 -0.010273 0.371901 0.314685 0.340909 0.324675 0.381215 0.482517 0.425926 0.458167 0.318182 0.538462 0.400000 0.472973 0.301325 0.636364 0.408989 0.520595 7 khoa_tieng_bo_dao_nha suite25_blend 1209 143 0.118280 0.415633 0.805337 0.086003 0.015989 0.116830 -0.001450 0.462810 0.391608 0.424242 0.404040 0.397790 0.503497 0.444444 0.478088 0.326446 0.552448 0.410390 0.485258 0.294702 0.622378 0.400000 0.509153 7 khoa_tieng_bo_dao_nha suite26_committee_blend 1209 143 0.118280 0.411022 0.795523 0.086934 0.014068 0.121538 0.003258 0.438017 0.370629 0.401515 0.382395 0.381215 0.482517 0.425926 0.458167 0.334711 0.566434 0.420779 0.497543 0.301325 0.636364 0.408989 0.520595 7 khoa_tieng_bo_dao_nha suite26_joint_head 1209 143 0.118280 0.347568 0.762316 0.092685 0.040146 0.078134 -0.040146 0.421488 0.356643 0.386364 0.367965 0.364641 0.461538 0.407407 0.438247 0.322314 0.545455 0.405195 0.479115 0.284768 0.601399 0.386517 0.491991 7 khoa_tieng_bo_dao_nha suite26_tair 1209 143 0.118280 0.348554 0.755957 0.092785 0.021000 0.101962 -0.016318 0.347107 0.293706 0.318182 0.303030 0.342541 0.433566 0.382716 0.411687 0.285124 0.482517 0.358442 0.423833 0.261589 0.552448 0.355056 0.451945 7 khoa_tieng_bo_dao_nha suite26_tree 1209 143 0.118280 0.367811 0.787209 0.090899 0.030648 0.120540 0.002260 0.371901 0.314685 0.340909 0.324675 0.353591 0.447552 0.395062 0.424967 0.326446 0.552448 0.410390 0.485258 0.281457 0.594406 0.382022 0.486270 7 khoa_tieng_bo_dao_nha suite26_tree_memory 1209 143 0.118280 0.299353 0.745467 0.095430 0.025563 0.095979 -0.022300 0.363636 0.307692 0.333333 0.317460 0.298343 0.377622 0.333333 0.358566 0.260331 0.440559 0.327273 0.386978 0.241722 0.510490 0.328090 0.417620 7 khoa_tieng_duc committee 2284 111 0.048599 0.295560 0.873899 0.039600 0.011405 0.052561 0.003962 0.250000 0.513514 0.336283 0.424107 0.212828 0.657658 0.321586 0.463787 0.185996 0.765766 0.299296 0.471698 0.166375 0.855856 0.278592 0.467980 7 khoa_tieng_duc suite14 2284 111 0.048599 0.307079 0.858443 0.069469 0.066918 0.104658 0.056059 0.254386 0.522523 0.342183 0.431548 0.218659 0.675676 0.330396 0.476493 0.177243 0.729730 0.285211 0.449501 0.154116 0.792793 0.258065 0.433498 7 khoa_tieng_duc suite16 2284 111 0.048599 0.315161 0.891415 0.056293 0.090237 0.138836 0.090237 0.289474 0.594595 0.389381 0.491071 0.239067 0.738739 0.361233 0.520966 0.199125 0.819820 0.320423 0.504994 0.168126 0.864865 0.281525 0.472906 7 khoa_tieng_duc suite17 2284 111 0.048599 0.318817 0.884707 0.039261 0.016696 0.051359 0.002760 0.285088 0.585586 0.383481 0.483631 0.236152 0.729730 0.356828 0.514612 0.192560 0.792793 0.309859 0.488346 0.166375 0.855856 0.278592 0.467980 7 khoa_tieng_duc suite18 2284 111 0.048599 0.322293 0.885710 0.039159 0.018121 0.051442 0.002843 0.289474 0.594595 0.389381 0.491071 0.230321 0.711712 0.348018 0.501906 0.196937 0.810811 0.316901 0.499445 0.164623 0.846847 0.275660 0.463054 7 khoa_tieng_duc suite20 2284 111 0.048599 0.274386 0.859131 0.067022 0.076423 0.125022 0.076423 0.254386 0.522523 0.342183 0.431548 0.204082 0.630631 0.308370 0.444727 0.175055 0.720721 0.281690 0.443951 0.150613 0.774775 0.252199 0.423645 7 khoa_tieng_duc suite21 2284 111 0.048599 0.309353 0.875760 0.039211 0.015049 0.053065 0.004466 0.263158 0.540541 0.353982 0.446429 0.218659 0.675676 0.330396 0.476493 0.190372 0.783784 0.306338 0.482797 0.159370 0.819820 0.266862 0.448276 7 khoa_tieng_duc suite22 2284 111 0.048599 0.337025 0.887742 0.038797 0.012881 0.035718 -0.012881 0.276316 0.567568 0.371681 0.468750 0.227405 0.702703 0.343612 0.495553 0.201313 0.828829 0.323944 0.510544 0.168126 0.864865 0.281525 0.472906 7 khoa_tieng_duc suite22_primary 2284 111 0.048599 0.333694 0.879943 0.039331 0.020070 0.029650 -0.018949 0.250000 0.513514 0.336283 0.424107 0.215743 0.666667 0.325991 0.470140 0.190372 0.783784 0.306338 0.482797 0.164623 0.846847 0.275660 0.463054 7 khoa_tieng_duc suite22_relational 2284 111 0.048599 0.294707 0.878762 0.039592 0.014405 0.037800 -0.010799 0.263158 0.540541 0.353982 0.446429 0.227405 0.702703 0.343612 0.495553 0.190372 0.783784 0.306338 0.482797 0.164623 0.846847 0.275660 0.463054 7 khoa_tieng_duc suite23 2284 111 0.048599 0.308791 0.886556 0.039295 0.008540 0.047592 -0.001007 0.263158 0.540541 0.353982 0.446429 0.233236 0.720721 0.352423 0.508259 0.201313 0.828829 0.323944 0.510544 0.166375 0.855856 0.278592 0.467980 7 khoa_tieng_duc suite23_graph 2284 111 0.048599 0.259042 0.872282 0.040615 0.004697 0.046004 -0.002595 0.236842 0.486486 0.318584 0.401786 0.209913 0.648649 0.317181 0.457433 0.185996 0.765766 0.299296 0.471698 0.161121 0.828829 0.269795 0.453202 7 khoa_tieng_duc suite24 2284 111 0.048599 0.284096 0.874724 0.040079 0.007475 0.047023 -0.001576 0.258772 0.531532 0.348083 0.438988 0.218659 0.675676 0.330396 0.476493 0.192560 0.792793 0.309859 0.488346 0.166375 0.855856 0.278592 0.467980 7 khoa_tieng_duc suite24_posthoc 2284 111 0.048599 0.298205 0.883770 0.039426 0.009914 0.048126 -0.000473 0.263158 0.540541 0.353982 0.446429 0.224490 0.693694 0.339207 0.489199 0.196937 0.810811 0.316901 0.499445 0.171629 0.882883 0.287390 0.482759 7 khoa_tieng_duc suite25 2284 111 0.048599 0.294021 0.866092 0.040111 0.012994 0.038666 -0.009933 0.245614 0.504505 0.330383 0.416667 0.215743 0.666667 0.325991 0.470140 0.188184 0.774775 0.302817 0.477248 0.159370 0.819820 0.266862 0.448276 7 khoa_tieng_duc suite25_blend 2284 111 0.048599 0.320955 0.882987 0.039016 0.009564 0.046349 -0.002250 0.280702 0.576577 0.377581 0.476190 0.230321 0.711712 0.348018 0.501906 0.190372 0.783784 0.306338 0.482797 0.162872 0.837838 0.272727 0.458128 7 khoa_tieng_duc suite26_committee_blend 2284 111 0.048599 0.306349 0.879147 0.039311 0.014161 0.050514 0.001915 0.267544 0.549550 0.359882 0.453869 0.218659 0.675676 0.330396 0.476493 0.194748 0.801802 0.313380 0.493896 0.168126 0.864865 0.281525 0.472906 7 khoa_tieng_duc suite26_joint_head 2284 111 0.048599 0.276857 0.844434 0.040048 0.008830 0.039769 -0.008830 0.250000 0.513514 0.336283 0.424107 0.209913 0.648649 0.317181 0.457433 0.181619 0.747748 0.292254 0.460599 0.155867 0.801802 0.260997 0.438424 7 khoa_tieng_duc suite26_tair 2284 111 0.048599 0.217921 0.823151 0.041499 0.006241 0.050838 0.002239 0.232456 0.477477 0.312684 0.394345 0.157434 0.486486 0.237885 0.343075 0.146608 0.603604 0.235915 0.371809 0.131349 0.675676 0.219941 0.369458 7 khoa_tieng_duc suite26_tree 2284 111 0.048599 0.319200 0.882456 0.038314 0.019240 0.056116 0.007517 0.280702 0.576577 0.377581 0.476190 0.236152 0.729730 0.356828 0.514612 0.196937 0.810811 0.316901 0.499445 0.168126 0.864865 0.281525 0.472906 7 khoa_tieng_duc suite26_tree_memory 2284 111 0.048599 0.210563 0.821783 0.041663 0.008744 0.050115 0.001516 0.228070 0.468468 0.306785 0.386905 0.157434 0.486486 0.237885 0.343075 0.146608 0.603604 0.235915 0.371809 0.131349 0.675676 0.219941 0.369458 7 khoa_tieng_han_quoc committee 3434 125 0.036401 0.378628 0.893046 0.027931 0.019712 0.046258 0.009857 0.250729 0.688000 0.367521 0.510083 0.178641 0.736000 0.287500 0.453202 0.145560 0.800000 0.246305 0.421230 0.122378 0.840000 0.213632 0.386598 7 khoa_tieng_han_quoc suite14 3434 125 0.036401 0.390847 0.894860 0.041802 0.083986 0.120113 0.083713 0.247813 0.680000 0.363248 0.504152 0.186408 0.768000 0.300000 0.472906 0.152838 0.840000 0.258621 0.442291 0.125874 0.864000 0.219736 0.397644 7 khoa_tieng_han_quoc suite16 3434 125 0.036401 0.369296 0.908961 0.042225 0.076943 0.113239 0.076839 0.247813 0.680000 0.363248 0.504152 0.184466 0.760000 0.296875 0.467980 0.152838 0.840000 0.258621 0.442291 0.128205 0.880000 0.223805 0.405007 7 khoa_tieng_han_quoc suite17 3434 125 0.036401 0.395896 0.907657 0.028624 0.025014 0.048008 0.011607 0.253644 0.696000 0.371795 0.516014 0.184466 0.760000 0.296875 0.467980 0.149927 0.824000 0.253695 0.433867 0.129371 0.888000 0.225839 0.408689 7 khoa_tieng_han_quoc suite18 3434 125 0.036401 0.397145 0.905077 0.028427 0.025321 0.048186 0.011786 0.253644 0.696000 0.371795 0.516014 0.186408 0.768000 0.300000 0.472906 0.149927 0.824000 0.253695 0.433867 0.129371 0.888000 0.225839 0.408689 7 khoa_tieng_han_quoc suite20 3434 125 0.036401 0.325721 0.870333 0.080771 0.155230 0.191630 0.155230 0.230321 0.632000 0.337607 0.468565 0.180583 0.744000 0.290625 0.458128 0.147016 0.808000 0.248768 0.425442 0.118881 0.816000 0.207528 0.375552 7 khoa_tieng_han_quoc suite21 3434 125 0.036401 0.409328 0.904446 0.027092 0.019248 0.046894 0.010493 0.256560 0.704000 0.376068 0.521945 0.190291 0.784000 0.306250 0.482759 0.151383 0.832000 0.256158 0.438079 0.124709 0.856000 0.217701 0.393962 7 khoa_tieng_han_quoc suite22 3434 125 0.036401 0.420860 0.903021 0.027502 0.011681 0.036048 -0.000353 0.247813 0.680000 0.363248 0.504152 0.178641 0.736000 0.287500 0.453202 0.142649 0.784000 0.241379 0.412805 0.122378 0.840000 0.213632 0.386598 7 khoa_tieng_han_quoc suite22_primary 3434 125 0.036401 0.367778 0.888051 0.028407 0.006603 0.034958 -0.001443 0.224490 0.616000 0.329060 0.456702 0.170874 0.704000 0.275000 0.433498 0.144105 0.792000 0.243842 0.417018 0.121212 0.832000 0.211597 0.382916 7 khoa_tieng_han_quoc suite22_relational 3434 125 0.036401 0.334423 0.881644 0.028951 0.007234 0.030779 -0.005622 0.230321 0.632000 0.337607 0.468565 0.166990 0.688000 0.268750 0.423645 0.135371 0.744000 0.229064 0.391744 0.118881 0.816000 0.207528 0.375552 7 khoa_tieng_han_quoc suite23 3434 125 0.036401 0.388981 0.897059 0.027755 0.020340 0.044922 0.008522 0.247813 0.680000 0.363248 0.504152 0.180583 0.744000 0.290625 0.458128 0.149927 0.824000 0.253695 0.433867 0.122378 0.840000 0.213632 0.386598 7 khoa_tieng_han_quoc suite23_graph 3434 125 0.036401 0.372797 0.888335 0.028799 0.013089 0.043089 0.006689 0.227405 0.624000 0.333333 0.462633 0.174757 0.720000 0.281250 0.443350 0.147016 0.808000 0.248768 0.425442 0.122378 0.840000 0.213632 0.386598 7 khoa_tieng_han_quoc suite24 3434 125 0.036401 0.421452 0.892183 0.026808 0.016017 0.041227 0.004826 0.250729 0.688000 0.367521 0.510083 0.172816 0.712000 0.278125 0.438424 0.141194 0.776000 0.238916 0.408593 0.120047 0.824000 0.209563 0.379234 7 khoa_tieng_han_quoc suite24_posthoc 3434 125 0.036401 0.398967 0.893374 0.027696 0.014569 0.037240 0.000839 0.241983 0.664000 0.354701 0.492289 0.172816 0.712000 0.278125 0.438424 0.141194 0.776000 0.238916 0.408593 0.124709 0.856000 0.217701 0.393962 7 khoa_tieng_han_quoc suite25 3434 125 0.036401 0.363573 0.907688 0.027774 0.012741 0.043397 0.006996 0.244898 0.672000 0.358974 0.498221 0.184466 0.760000 0.296875 0.467980 0.151383 0.832000 0.256158 0.438079 0.124709 0.856000 0.217701 0.393962 7 khoa_tieng_han_quoc suite25_blend 3434 125 0.036401 0.424551 0.906153 0.027300 0.021259 0.043603 0.007202 0.256560 0.704000 0.376068 0.521945 0.184466 0.760000 0.296875 0.467980 0.149927 0.824000 0.253695 0.433867 0.128205 0.880000 0.223805 0.405007 7 khoa_tieng_han_quoc suite26_committee_blend 3434 125 0.036401 0.390694 0.899266 0.027936 0.017601 0.042899 0.006499 0.247813 0.680000 0.363248 0.504152 0.176699 0.728000 0.284375 0.448276 0.148472 0.816000 0.251232 0.429655 0.128205 0.880000 0.223805 0.405007 7 khoa_tieng_han_quoc suite26_joint_head 3434 125 0.036401 0.371223 0.890588 0.029031 0.015707 0.037729 0.001328 0.233236 0.640000 0.341880 0.474496 0.176699 0.728000 0.284375 0.448276 0.148472 0.816000 0.251232 0.429655 0.122378 0.840000 0.213632 0.386598 7 khoa_tieng_han_quoc suite26_tair 3434 125 0.036401 0.228343 0.845937 0.031770 0.006145 0.033415 -0.002986 0.174927 0.480000 0.256410 0.355872 0.151456 0.624000 0.243750 0.384236 0.126638 0.696000 0.214286 0.366470 0.110723 0.760000 0.193286 0.349779 7 khoa_tieng_han_quoc suite26_tree 3434 125 0.036401 0.308779 0.889892 0.029735 0.009704 0.035135 -0.001266 0.241983 0.664000 0.354701 0.492289 0.182524 0.752000 0.293750 0.463054 0.147016 0.808000 0.248768 0.425442 0.122378 0.840000 0.213632 0.386598 7 khoa_tieng_han_quoc suite26_tree_memory 3434 125 0.036401 0.190363 0.840135 0.032622 0.008912 0.032969 -0.003432 0.157434 0.432000 0.230769 0.320285 0.149515 0.616000 0.240625 0.379310 0.126638 0.696000 0.214286 0.366470 0.111888 0.768000 0.195320 0.353461 7 khoa_tieng_italia committee 2453 254 0.103547 0.376654 0.833768 0.081358 0.030066 0.074511 -0.029036 0.412245 0.397638 0.404810 0.400476 0.355978 0.515748 0.421222 0.473266 0.309572 0.598425 0.408054 0.504313 0.278956 0.673228 0.394464 0.524862 7 khoa_tieng_italia suite14 2453 254 0.103547 0.370111 0.815172 0.083474 0.045812 0.148349 0.044803 0.375510 0.362205 0.368737 0.364790 0.339674 0.492126 0.401929 0.451590 0.309572 0.598425 0.408054 0.504313 0.272431 0.657480 0.385236 0.512584 7 khoa_tieng_italia suite16 2453 254 0.103547 0.374142 0.841907 0.095756 0.116017 0.219564 0.116017 0.412245 0.397638 0.404810 0.400476 0.358696 0.519685 0.424437 0.476879 0.309572 0.598425 0.408054 0.504313 0.278956 0.673228 0.394464 0.524862 7 khoa_tieng_italia suite17 2453 254 0.103547 0.380997 0.843408 0.082405 0.038232 0.073915 -0.029632 0.432653 0.417323 0.424850 0.420301 0.347826 0.503937 0.411576 0.462428 0.305499 0.590551 0.402685 0.497678 0.280587 0.677165 0.396770 0.527931 7 khoa_tieng_italia suite18 2453 254 0.103547 0.379311 0.843700 0.082442 0.039211 0.073674 -0.029873 0.424490 0.409449 0.416834 0.412371 0.345109 0.500000 0.408360 0.458815 0.313646 0.606299 0.413423 0.510949 0.283850 0.685039 0.401384 0.534070 7 khoa_tieng_italia suite20 2453 254 0.103547 0.309218 0.790598 0.095503 0.069825 0.130270 0.026723 0.371429 0.358268 0.364729 0.360825 0.312500 0.452756 0.369775 0.415462 0.270876 0.523622 0.357047 0.441274 0.239804 0.578740 0.339100 0.451197 7 khoa_tieng_italia suite21 2453 254 0.103547 0.380500 0.833413 0.081002 0.031883 0.072278 -0.031269 0.408163 0.393701 0.400802 0.396511 0.350543 0.507874 0.414791 0.466040 0.311609 0.602362 0.410738 0.507631 0.277325 0.669291 0.392157 0.521793 7 khoa_tieng_italia suite22 2453 254 0.103547 0.388433 0.845596 0.082777 0.048007 0.055540 -0.048007 0.428571 0.413386 0.420842 0.416336 0.355978 0.515748 0.421222 0.473266 0.313646 0.606299 0.413423 0.510949 0.292007 0.704724 0.412918 0.549417 7 khoa_tieng_italia suite22_primary 2453 254 0.103547 0.353890 0.832868 0.084914 0.057566 0.046619 -0.056928 0.420408 0.405512 0.412826 0.408406 0.361413 0.523622 0.427653 0.480491 0.319756 0.618110 0.421477 0.520902 0.288744 0.696850 0.408304 0.543278 7 khoa_tieng_italia suite22_relational 2453 254 0.103547 0.367143 0.823126 0.080747 0.044379 0.060322 -0.043224 0.404082 0.389764 0.396794 0.392546 0.345109 0.500000 0.408360 0.458815 0.315682 0.610236 0.416107 0.514267 0.295269 0.712598 0.417532 0.555556 7 khoa_tieng_italia suite23 2453 254 0.103547 0.383335 0.838926 0.081594 0.033265 0.070282 -0.033265 0.412245 0.397638 0.404810 0.400476 0.347826 0.503937 0.411576 0.462428 0.307536 0.594488 0.405369 0.500995 0.280587 0.677165 0.396770 0.527931 7 khoa_tieng_italia suite23_graph 2453 254 0.103547 0.372226 0.811534 0.085138 0.055158 0.048389 -0.055158 0.395918 0.381890 0.388778 0.384615 0.339674 0.492126 0.401929 0.451590 0.283096 0.547244 0.373154 0.461181 0.269168 0.649606 0.380623 0.506446 7 khoa_tieng_italia suite24 2453 254 0.103547 0.370845 0.831731 0.081194 0.034910 0.069359 -0.034188 0.379592 0.366142 0.372745 0.368755 0.317935 0.460630 0.376206 0.422688 0.301426 0.582677 0.397315 0.491042 0.277325 0.669291 0.392157 0.521793 7 khoa_tieng_italia suite24_posthoc 2453 254 0.103547 0.380830 0.842248 0.080860 0.035236 0.068431 -0.035115 0.416327 0.401575 0.408818 0.404441 0.342391 0.496063 0.405145 0.455202 0.299389 0.578740 0.394631 0.487724 0.290375 0.700787 0.410611 0.546347 7 khoa_tieng_italia suite25 2453 254 0.103547 0.357138 0.819160 0.082695 0.047268 0.057303 -0.046244 0.395918 0.381890 0.388778 0.384615 0.328804 0.476378 0.389068 0.437139 0.307536 0.594488 0.405369 0.500995 0.272431 0.657480 0.385236 0.512584 7 khoa_tieng_italia suite25_blend 2453 254 0.103547 0.391577 0.844456 0.081180 0.037342 0.066205 -0.037342 0.395918 0.381890 0.388778 0.384615 0.353261 0.511811 0.418006 0.469653 0.321792 0.622047 0.424161 0.524220 0.296900 0.716535 0.419839 0.558625 7 khoa_tieng_italia suite26_committee_blend 2453 254 0.103547 0.379694 0.838657 0.081449 0.031849 0.071697 -0.031849 0.408163 0.393701 0.400802 0.396511 0.364130 0.527559 0.430868 0.484104 0.305499 0.590551 0.402685 0.497678 0.282219 0.681102 0.399077 0.531001 7 khoa_tieng_italia suite26_joint_head 2453 254 0.103547 0.401329 0.819133 0.082300 0.052392 0.051155 -0.052392 0.428571 0.413386 0.420842 0.416336 0.353261 0.511811 0.418006 0.469653 0.331976 0.641732 0.437584 0.540810 0.288744 0.696850 0.408304 0.543278 7 khoa_tieng_italia suite26_tair 2453 254 0.103547 0.304729 0.809462 0.085197 0.045420 0.064107 -0.039440 0.310204 0.299213 0.304609 0.301348 0.301630 0.437008 0.356913 0.401012 0.258656 0.500000 0.340940 0.421367 0.265905 0.641732 0.376009 0.500307 7 khoa_tieng_italia suite26_tree 2453 254 0.103547 0.422341 0.850849 0.077975 0.028855 0.077768 -0.025779 0.408163 0.393701 0.400802 0.396511 0.385870 0.559055 0.456592 0.513006 0.336049 0.649606 0.442953 0.547445 0.298532 0.720472 0.422145 0.561694 7 khoa_tieng_italia suite26_tree_memory 2453 254 0.103547 0.299150 0.808269 0.085380 0.043458 0.064933 -0.038613 0.310204 0.299213 0.304609 0.301348 0.290761 0.421260 0.344051 0.386561 0.258656 0.500000 0.340940 0.421367 0.265905 0.641732 0.376009 0.500307 7 khoa_tieng_nga committee 1924 154 0.080042 0.273913 0.772320 0.069679 0.040335 0.120377 0.040335 0.322917 0.402597 0.358382 0.383663 0.259516 0.487013 0.338600 0.414365 0.231169 0.577922 0.330241 0.444555 0.203742 0.636364 0.308661 0.446673 7 khoa_tieng_nga suite14 1924 154 0.080042 0.280095 0.794402 0.102062 0.125900 0.205942 0.125900 0.302083 0.376623 0.335260 0.358911 0.276817 0.519481 0.361174 0.441989 0.241558 0.603896 0.345083 0.464535 0.212058 0.662338 0.321260 0.464904 7 khoa_tieng_nga suite16 1924 154 0.080042 0.286349 0.789757 0.132084 0.212355 0.292396 0.212355 0.322917 0.402597 0.358382 0.383663 0.262976 0.493506 0.343115 0.419890 0.238961 0.597403 0.341373 0.459540 0.224532 0.701299 0.340157 0.492252 7 khoa_tieng_nga suite17 1924 154 0.080042 0.283023 0.792087 0.067457 0.042707 0.119182 0.039141 0.322917 0.402597 0.358382 0.383663 0.266436 0.500000 0.347630 0.425414 0.236364 0.590909 0.337662 0.454545 0.224532 0.701299 0.340157 0.492252 7 khoa_tieng_nga suite18 1924 154 0.080042 0.284172 0.792065 0.067368 0.040907 0.118843 0.038802 0.328125 0.409091 0.364162 0.389851 0.262976 0.493506 0.343115 0.419890 0.241558 0.603896 0.345083 0.464535 0.218295 0.681818 0.330709 0.478578 7 khoa_tieng_nga suite20 1924 154 0.080042 0.300443 0.790201 0.114801 0.129937 0.209979 0.129937 0.302083 0.376623 0.335260 0.358911 0.252595 0.474026 0.329571 0.403315 0.220779 0.551948 0.315399 0.424575 0.195426 0.610390 0.296063 0.428441 7 khoa_tieng_nga suite21 1924 154 0.080042 0.274526 0.783495 0.070708 0.045359 0.125401 0.045359 0.312500 0.389610 0.346821 0.371287 0.259516 0.487013 0.338600 0.414365 0.231169 0.577922 0.330241 0.444555 0.209979 0.655844 0.318110 0.460346 7 khoa_tieng_nga suite22 1924 154 0.080042 0.296673 0.798918 0.065207 0.016046 0.076298 -0.003743 0.317708 0.396104 0.352601 0.377475 0.269896 0.506494 0.352144 0.430939 0.233766 0.584416 0.333952 0.449550 0.214137 0.668831 0.324409 0.469462 7 khoa_tieng_nga suite22_primary 1924 154 0.080042 0.304066 0.804439 0.065248 0.030153 0.053585 -0.026457 0.312500 0.389610 0.346821 0.371287 0.283737 0.532468 0.370203 0.453039 0.233766 0.584416 0.333952 0.449550 0.220374 0.688312 0.333858 0.483136 7 khoa_tieng_nga suite22_relational 1924 154 0.080042 0.273462 0.786830 0.066479 0.022843 0.070492 -0.009550 0.281250 0.350649 0.312139 0.334158 0.262976 0.493506 0.343115 0.419890 0.236364 0.590909 0.337662 0.454545 0.207900 0.649351 0.314961 0.455789 7 khoa_tieng_nga suite23 1924 154 0.080042 0.269359 0.785797 0.066653 0.016658 0.094190 0.014149 0.312500 0.389610 0.346821 0.371287 0.266436 0.500000 0.347630 0.425414 0.218182 0.545455 0.311688 0.419580 0.203742 0.636364 0.308661 0.446673 7 khoa_tieng_nga suite23_graph 1924 154 0.080042 0.237855 0.776915 0.067374 0.015506 0.070952 -0.009090 0.265625 0.331169 0.294798 0.315594 0.231834 0.435065 0.302483 0.370166 0.207792 0.519481 0.296846 0.399600 0.195426 0.610390 0.296063 0.428441 7 khoa_tieng_nga suite24 1924 154 0.080042 0.261993 0.772195 0.069109 0.029056 0.102909 0.022868 0.302083 0.376623 0.335260 0.358911 0.259516 0.487013 0.338600 0.414365 0.223377 0.558442 0.319109 0.429570 0.207900 0.649351 0.314961 0.455789 7 khoa_tieng_nga suite24_posthoc 1924 154 0.080042 0.274058 0.787545 0.067900 0.025988 0.105498 0.025456 0.322917 0.402597 0.358382 0.383663 0.262976 0.493506 0.343115 0.419890 0.231169 0.577922 0.330241 0.444555 0.207900 0.649351 0.314961 0.455789 7 khoa_tieng_nga suite25 1924 154 0.080042 0.252835 0.767118 0.068887 0.020989 0.090369 0.010327 0.281250 0.350649 0.312139 0.334158 0.242215 0.454545 0.316027 0.386740 0.212987 0.532468 0.304267 0.409590 0.197505 0.616883 0.299213 0.432999 7 khoa_tieng_nga suite25_blend 1924 154 0.080042 0.274642 0.777493 0.068079 0.029010 0.108575 0.028533 0.307292 0.383117 0.341040 0.365099 0.252595 0.474026 0.329571 0.403315 0.236364 0.590909 0.337662 0.454545 0.216216 0.675325 0.327559 0.474020 7 khoa_tieng_nga suite26_committee_blend 1924 154 0.080042 0.278907 0.778362 0.068484 0.035598 0.115004 0.034963 0.328125 0.409091 0.364162 0.389851 0.266436 0.500000 0.347630 0.425414 0.228571 0.571429 0.326531 0.439560 0.214137 0.668831 0.324409 0.469462 7 khoa_tieng_nga suite26_joint_head 1924 154 0.080042 0.239168 0.767958 0.066367 0.007383 0.079274 -0.000767 0.296875 0.370130 0.329480 0.352723 0.256055 0.480519 0.334086 0.408840 0.244156 0.610390 0.348794 0.469530 0.209979 0.655844 0.318110 0.460346 7 khoa_tieng_nga suite26_tair 1924 154 0.080042 0.270007 0.784560 0.066308 0.022422 0.087381 0.007339 0.322917 0.402597 0.358382 0.383663 0.256055 0.480519 0.334086 0.408840 0.218182 0.545455 0.311688 0.419580 0.182952 0.571429 0.277165 0.401094 7 khoa_tieng_nga suite26_tree 1924 154 0.080042 0.259419 0.786703 0.066380 0.021007 0.097985 0.017944 0.322917 0.402597 0.358382 0.383663 0.273356 0.512987 0.356659 0.436464 0.246753 0.616883 0.352505 0.474525 0.216216 0.675325 0.327559 0.474020 7 khoa_tieng_nga suite26_tree_memory 1924 154 0.080042 0.272485 0.783766 0.066011 0.018394 0.084757 0.004715 0.322917 0.402597 0.358382 0.383663 0.252595 0.474026 0.329571 0.403315 0.212987 0.532468 0.304267 0.409590 0.182952 0.571429 0.277165 0.401094 7 khoa_tieng_nhat committee 2795 145 0.051878 0.219483 0.818690 0.044658 0.010347 0.057900 0.006022 0.221429 0.427586 0.291765 0.360465 0.190931 0.551724 0.283688 0.400400 0.169946 0.655172 0.269886 0.417032 0.147353 0.710345 0.244076 0.402658 7 khoa_tieng_nhat suite14 2795 145 0.051878 0.242224 0.814481 0.059030 0.084926 0.136662 0.084783 0.232143 0.448276 0.305882 0.377907 0.210024 0.606897 0.312057 0.440440 0.171735 0.662069 0.272727 0.421422 0.151645 0.731034 0.251185 0.414386 7 khoa_tieng_nhat suite16 2795 145 0.051878 0.214219 0.826428 0.070294 0.108857 0.160735 0.108857 0.232143 0.448276 0.305882 0.377907 0.202864 0.586207 0.301418 0.425425 0.168157 0.648276 0.267045 0.412643 0.150215 0.724138 0.248815 0.410477 7 khoa_tieng_nhat suite17 2795 145 0.051878 0.221994 0.828807 0.044421 0.008847 0.057476 0.005597 0.221429 0.427586 0.291765 0.360465 0.198091 0.572414 0.294326 0.415415 0.168157 0.648276 0.267045 0.412643 0.147353 0.710345 0.244076 0.402658 7 khoa_tieng_nhat suite18 2795 145 0.051878 0.223455 0.826025 0.044404 0.008346 0.057603 0.005724 0.225000 0.434483 0.296471 0.366279 0.200477 0.579310 0.297872 0.420420 0.169946 0.655172 0.269886 0.417032 0.148784 0.717241 0.246445 0.406568 7 khoa_tieng_nhat suite20 2795 145 0.051878 0.275866 0.825453 0.104720 0.145163 0.197042 0.145163 0.228571 0.441379 0.301176 0.372093 0.195704 0.565517 0.290780 0.410410 0.175313 0.675862 0.278409 0.430202 0.153076 0.737931 0.253555 0.418296 7 khoa_tieng_nhat suite21 2795 145 0.051878 0.238623 0.824379 0.044568 0.009483 0.061083 0.009205 0.246429 0.475862 0.324706 0.401163 0.186158 0.537931 0.276596 0.390390 0.168157 0.648276 0.267045 0.412643 0.151645 0.731034 0.251185 0.414386 7 khoa_tieng_nhat suite22 2795 145 0.051878 0.252934 0.831092 0.043939 0.013317 0.041895 -0.009983 0.239286 0.462069 0.315294 0.389535 0.193317 0.558621 0.287234 0.405405 0.168157 0.648276 0.267045 0.412643 0.155937 0.751724 0.258294 0.426114 7 khoa_tieng_nhat suite22_primary 2795 145 0.051878 0.247780 0.824455 0.044225 0.015714 0.036627 -0.015251 0.239286 0.462069 0.315294 0.389535 0.190931 0.551724 0.283688 0.400400 0.168157 0.648276 0.267045 0.412643 0.145923 0.703448 0.241706 0.398749 SUITE26 ALL-FOLD MACRO SUMMARY — F1..F7 -------------------------------------------------------------------------------- model faculties mean_fold_ap mean_fold_auc mean_fold_brier mean_fold_ece10 mean_fold_mean_score mean_fold_calibration_gap mean_fold_precision_at_20 mean_fold_recall_at_20 mean_fold_f1_at_20 mean_fold_fbeta_at_20 council 1 0.383294 0.855707 0.051318 0.038571 0.102113 0.036700 0.219794 0.713506 0.315986 0.456062 suite22 14 0.372436 0.883711 0.031744 0.016681 0.039454 -0.002942 0.155678 0.777482 0.240468 0.380613 suite25_blend 14 0.369201 0.879386 0.031713 0.018808 0.044979 0.002583 0.154109 0.766073 0.237766 0.375922 suite24_posthoc 14 0.368226 0.879847 0.031737 0.017638 0.040377 -0.002018 0.154055 0.766467 0.237812 0.376162 suite17 14 0.365412 0.881649 0.032409 0.021339 0.050720 0.008324 0.154873 0.775350 0.239154 0.378685 suite23 14 0.365170 0.880518 0.031951 0.018668 0.044508 0.002113 0.154685 0.771253 0.238812 0.377867 suite18 14 0.364397 0.881092 0.032422 0.021219 0.050687 0.008292 0.155208 0.774247 0.239569 0.379101 suite21 14 0.361970 0.875832 0.032425 0.021011 0.053026 0.010630 0.152872 0.761517 0.235898 0.373167 suite14 14 0.361533 0.870571 0.040871 0.047178 0.084325 0.041930 0.151436 0.748357 0.233261 0.368112 suite26_joint_head 14 0.360436 0.858354 0.033318 0.025136 0.040155 -0.002241 0.149578 0.739726 0.230636 0.364078 suite16 14 0.360057 0.880558 0.055790 0.088683 0.130253 0.087858 0.154557 0.774494 0.238709 0.378085 suite26_committee_blend 14 0.356417 0.875512 0.031924 0.017798 0.043442 0.001046 0.153227 0.760342 0.236403 0.373701 committee 14 0.353855 0.870543 0.032294 0.019349 0.049202 0.006806 0.151948 0.754042 0.234244 0.370098 suite24 14 0.352417 0.873192 0.032387 0.021546 0.040048 -0.002347 0.151991 0.751953 0.234221 0.369870 v2 1 0.351818 0.856084 0.099018 0.143562 0.208975 0.143562 0.215630 0.707648 0.310683 0.449853 suite25 14 0.348362 0.873845 0.033170 0.022545 0.041990 -0.000405 0.150561 0.752459 0.232618 0.368273 suite22_primary 14 0.331806 0.874561 0.033042 0.017945 0.035777 -0.006619 0.150628 0.758551 0.232863 0.369165 suite22_relational 14 0.328498 0.875074 0.033245 0.019819 0.033370 -0.009026 0.151426 0.764126 0.234137 0.371434 suite23_graph 14 0.311112 0.865060 0.034481 0.023921 0.041751 -0.000645 0.145662 0.737430 0.225378 0.357804 suite26_tree 14 0.303307 0.871974 0.034516 0.023636 0.051251 0.008856 0.151249 0.757275 0.233906 0.370729 suite26_tree_memory 14 0.299220 0.856142 0.034511 0.021968 0.040038 -0.002358 0.141291 0.698284 0.218315 0.345391 suite20 14 0.294114 0.866518 0.084017 0.106857 0.146452 0.104057 0.147111 0.741956 0.227711 0.361405 suite26_tair 14 0.291830 0.855852 0.034405 0.020614 0.039526 -0.002870 0.141865 0.693187 0.218508 0.344558 SUITE26 HOLDOUT MACRO SUMMARY — F6/F7 -------------------------------------------------------------------------------- model faculties mean_fold_ap mean_fold_auc mean_fold_brier mean_fold_ece10 mean_fold_mean_score mean_fold_calibration_gap mean_fold_precision_at_20 mean_fold_recall_at_20 mean_fold_f1_at_20 mean_fold_fbeta_at_20 council 1 0.444927 0.833026 0.087385 0.015389 0.139283 0.013812 0.381290 0.617044 0.466517 0.544238 v2 1 0.422654 0.826598 0.142849 0.162288 0.287759 0.162288 0.370122 0.598342 0.452673 0.527904 suite25_blend 14 0.369526 0.854274 0.052186 0.022578 0.063154 -0.007687 0.234216 0.689122 0.326631 0.454289 suite22 14 0.369159 0.855570 0.052508 0.023325 0.051735 -0.019106 0.235332 0.693883 0.328604 0.457353 suite24_posthoc 14 0.362838 0.853278 0.052062 0.019741 0.063971 -0.006870 0.234074 0.690256 0.326745 0.454824 suite14 14 0.360232 0.850384 0.068662 0.073762 0.140512 0.069671 0.233303 0.686579 0.325251 0.452347 suite23 14 0.358265 0.850081 0.052685 0.022269 0.066189 -0.004652 0.233652 0.685744 0.325725 0.452802 suite17 14 0.357815 0.852825 0.053247 0.025095 0.073521 0.002680 0.234047 0.687406 0.326232 0.453504 suite18 14 0.357805 0.852900 0.053261 0.025283 0.073371 0.002530 0.235224 0.689275 0.327754 0.455319 suite21 14 0.357066 0.846907 0.053102 0.023850 0.076118 0.005277 0.230796 0.676295 0.321421 0.446429 suite16 14 0.356077 0.851952 0.072796 0.088931 0.157983 0.087142 0.234085 0.688178 0.326393 0.453872 suite24 14 0.354254 0.846098 0.052775 0.024209 0.057118 -0.013723 0.232192 0.678738 0.323175 0.448556 suite26_committee_blend 14 0.351719 0.849339 0.052731 0.022667 0.060206 -0.010635 0.233135 0.687222 0.325288 0.452682 committee 14 0.350152 0.843399 0.053294 0.024045 0.072407 0.001566 0.231095 0.675598 0.321675 0.446492 suite25 14 0.341269 0.842423 0.053728 0.023776 0.057810 -0.013032 0.225497 0.670205 0.315232 0.439753 suite22_relational 14 0.340764 0.846168 0.053463 0.027534 0.047688 -0.023154 0.231217 0.682699 0.322820 0.449392 suite26_joint_head 14 0.339302 0.834148 0.054513 0.028979 0.044254 -0.026587 0.228118 0.670867 0.318360 0.442753 suite22_primary 14 0.336369 0.840535 0.054646 0.030688 0.042596 -0.028245 0.226298 0.663805 0.315606 0.438565 suite20 14 0.324935 0.839578 0.099934 0.118914 0.185249 0.114408 0.222727 0.666560 0.312170 0.436498 suite23_graph 14 0.321909 0.831552 0.055275 0.026463 0.057773 -0.013068 0.221040 0.654324 0.308978 0.430633 suite26_tree 14 0.312259 0.843597 0.054311 0.020942 0.062149 -0.008692 0.228000 0.676548 0.318939 0.444876 suite26_tair 14 0.302149 0.830961 0.056116 0.026845 0.049690 -0.021151 0.215635 0.636123 0.300529 0.418191 suite26_tree_memory 14 0.287641 0.827734 0.057084 0.027961 0.048141 -0.022700 0.210762 0.629294 0.294794 0.411756 SUITE26 PRIMARY PAIRED HOLDOUT COMPARISON -------------------------------------------------------------------------------- candidate base cells wins losses mean_delta_ap median_delta_ap worst_delta_ap mean_delta_auc mean_delta_f2_at20 suite26_tair suite26_tree 28 15 13 -0.010110 0.002284 -0.117612 -0.012636 -0.026685 suite26_tair suite26_tree_memory 28 22 6 0.014508 0.011578 -0.022889 0.003226 0.006435 suite26_tair suite26_joint_head 28 7 21 -0.037154 -0.033676 -0.142880 -0.003188 -0.024563 suite26_tair committee 28 5 23 -0.048003 -0.041842 -0.151724 -0.012439 -0.028302 suite26_tair suite17 28 4 24 -0.055667 -0.052378 -0.167553 -0.021864 -0.035314 suite26_tair suite18 28 4 24 -0.055656 -0.052851 -0.168802 -0.021940 -0.037129 suite26_tair suite21 28 5 23 -0.054918 -0.048504 -0.180985 -0.015946 -0.028238 suite26_tair suite22 28 2 26 -0.067011 -0.066555 -0.192517 -0.024609 -0.039162 suite26_tair suite23 28 4 24 -0.056116 -0.044564 -0.160638 -0.019120 -0.034612 suite26_tair suite24 28 4 24 -0.052106 -0.044468 -0.193110 -0.015138 -0.030366 suite26_tair suite25 28 6 22 -0.039121 -0.042892 -0.136291 -0.011463 -0.021562 suite26_tair suite25_blend 28 2 26 -0.067377 -0.065482 -0.196208 -0.023313 -0.036099 suite26_tair suite22_relational 28 4 24 -0.038616 -0.049030 -0.112031 -0.015207 -0.031202 suite26_tair suite23_graph 28 11 17 -0.019761 -0.021833 -0.144454 -0.000591 -0.012442 suite26_tair suite24_posthoc 28 3 25 -0.060689 -0.052361 -0.170624 -0.022317 -0.036633 suite26_tair council 2 0 2 -0.091148 -0.091148 -0.094929 -0.047112 -0.067428 SUITE26 HOLDOUT FACULTY HEAD-TO-HEAD -------------------------------------------------------------------------------- faculty suite26_ap suite26_tree_ap delta_vs_suite26_tree suite26_tree_memory_ap delta_vs_suite26_tree_memory suite26_joint_head_ap delta_vs_suite26_joint_head committee_ap delta_vs_committee suite17_ap delta_vs_suite17 suite18_ap delta_vs_suite18 suite21_ap delta_vs_suite21 suite22_ap delta_vs_suite22 suite23_ap delta_vs_suite23 suite24_ap delta_vs_suite24 suite25_ap delta_vs_suite25 suite25_blend_ap delta_vs_suite25_blend suite22_relational_ap delta_vs_suite22_relational suite23_graph_ap delta_vs_suite23_graph suite24_posthoc_ap delta_vs_suite24_posthoc council_ap delta_vs_council suite26_committee_blend_ap delta_vs_suite26_committee_blend khoa_viet_nam_hoc 0.647668 0.598532 0.049136 0.627037 0.020631 0.560291 0.087377 0.627200 0.020468 0.631835 0.015833 0.628428 0.019241 0.629217 0.018452 0.622336 0.025333 0.627200 0.020468 0.624606 0.023063 0.537547 0.110121 0.623726 0.023943 0.618109 0.029560 0.585399 0.062270 0.629651 0.018017 NaN NaN 0.640736 0.006933 khoa_quan_tri_kinh_doanh_va_du_lich 0.388979 0.358853 0.030127 0.343705 0.045274 0.420604 -0.031625 0.399207 -0.010228 0.407873 -0.018894 0.408235 -0.019256 0.395783 -0.006804 0.429798 -0.040818 0.419884 -0.030904 0.412122 -0.023143 0.396922 -0.007943 0.419906 -0.030927 0.428919 -0.039940 0.401072 -0.012092 0.434632 -0.045653 NaN NaN 0.412929 -0.023949 khoa_tieng_nhat 0.174530 0.171441 0.003088 0.175933 -0.001404 0.181990 -0.007460 0.197887 -0.023358 0.200121 -0.025592 0.199897 -0.025367 0.211685 -0.037155 0.219105 -0.044576 0.211387 -0.036857 0.217737 -0.043207 0.244932 -0.070403 0.230154 -0.055624 0.172764 0.001765 0.190682 -0.016152 0.215882 -0.041352 NaN NaN 0.200584 -0.026054 khoa_tieng_nga 0.351734 0.336934 0.014800 0.347169 0.004565 0.372768 -0.021034 0.377031 -0.025297 0.384702 -0.032968 0.385985 -0.034251 0.377869 -0.026135 0.393063 -0.041329 0.377247 -0.025513 0.370832 -0.019098 0.376442 -0.024708 0.390821 -0.039087 0.376779 -0.025045 0.344867 0.006867 0.385757 -0.034023 NaN NaN 0.375106 -0.023372 khoa_tieng_italia 0.270305 0.325722 -0.055417 0.256290 0.014014 0.335799 -0.065494 0.302636 -0.032331 0.308005 -0.037700 0.306753 -0.036448 0.305668 -0.035363 0.314573 -0.044268 0.310503 -0.040198 0.304122 -0.033817 0.293454 -0.023149 0.316856 -0.046551 0.280077 -0.009772 0.287619 -0.017314 0.321954 -0.051650 NaN NaN 0.307091 -0.036786 khoa_tieng_tay_ban_nha 0.354933 0.341546 0.013387 0.330804 0.024130 0.403878 -0.048944 0.387535 -0.032601 0.395079 -0.040146 0.393249 -0.038315 0.408967 -0.054034 0.422826 -0.067892 0.396799 -0.041865 0.390748 -0.035814 0.423684 -0.068750 0.428023 -0.073089 0.409366 -0.054432 0.376631 -0.021698 0.395576 -0.040642 NaN NaN 0.394149 -0.039216 khoa_tieng_phap 0.227000 0.301176 -0.074175 0.229096 -0.002096 0.250217 -0.023217 0.276935 -0.049935 0.283644 -0.056644 0.283197 -0.056197 0.276015 -0.049015 0.307482 -0.080482 0.301838 -0.074838 0.265082 -0.038082 0.311834 -0.084834 0.317518 -0.090518 0.282759 -0.055758 0.294883 -0.067883 0.292919 -0.065919 NaN NaN 0.266301 -0.039301 khoa_tieng_han_quoc 0.260435 0.283746 -0.023311 0.230704 0.029732 0.359818 -0.099383 0.315879 -0.055444 0.333005 -0.072570 0.332781 -0.072346 0.336184 -0.075748 0.358607 -0.098172 0.326835 -0.066400 0.345569 -0.085134 0.329263 -0.068828 0.360616 -0.100180 0.321931 -0.061496 0.302161 -0.041726 0.341377 -0.080942 NaN NaN 0.335927 -0.075492 khoa_cong_nghe_thong_tin 0.353780 0.329808 0.023972 0.334443 0.019337 0.380749 -0.026970 0.412578 -0.058799 0.417591 -0.063811 0.414407 -0.060627 0.419185 -0.065405 0.424266 -0.070486 0.436409 -0.082629 0.422765 -0.068985 0.378358 -0.024578 0.420793 -0.067014 0.395557 -0.041777 0.390513 -0.036733 0.430383 -0.076603 0.444927 -0.091148 0.412797 -0.059017 khoa_tieng_anh 0.180283 0.206222 -0.025939 0.167540 0.012743 0.236327 -0.056043 0.254547 -0.074263 0.262702 -0.082418 0.265981 -0.085697 0.258094 -0.077811 0.260863 -0.080580 0.262926 -0.082643 0.266065 -0.085782 0.214845 -0.034562 0.257801 -0.077517 0.227032 -0.046749 0.199023 -0.018739 0.265655 -0.085372 NaN NaN 0.252602 -0.072319 khoa_tieng_bo_dao_nha 0.386121 0.358328 0.027794 0.338398 0.047723 0.416069 -0.029947 0.464251 -0.078130 0.468486 -0.082364 0.466295 -0.080174 0.470990 -0.084869 0.462717 -0.076596 0.448702 -0.062581 0.458294 -0.072173 0.395266 -0.009144 0.458830 -0.072709 0.422689 -0.036568 0.403060 -0.016939 0.467859 -0.081738 NaN NaN 0.471615 -0.085494 khoa_tieng_trung_quoc 0.169586 0.223474 -0.053888 0.174648 -0.005062 0.220689 -0.051103 0.249532 -0.079946 0.260093 -0.090507 0.259264 -0.089678 0.261752 -0.092166 0.276961 -0.107375 0.258389 -0.088803 0.255801 -0.086215 0.267839 -0.098253 0.275364 -0.105778 0.255026 -0.085440 0.192740 -0.023154 0.262955 -0.093369 NaN NaN 0.243120 -0.073534 khoa_quoc_te_hoc 0.175411 0.202077 -0.026666 0.186387 -0.010976 0.230141 -0.054730 0.261211 -0.085800 0.267580 -0.092169 0.272936 -0.097525 0.261558 -0.086147 0.273008 -0.097597 0.275410 -0.099999 0.260185 -0.084774 0.227086 -0.051675 0.272923 -0.097512 0.226127 -0.050716 0.235727 -0.060316 0.266267 -0.090856 NaN NaN 0.246052 -0.070641 khoa_tieng_duc 0.289314 0.333763 -0.044448 0.284821 0.004494 0.380894 -0.091579 0.375697 -0.086383 0.388699 -0.099385 0.391861 -0.102546 0.385958 -0.096644 0.402625 -0.113311 0.362176 -0.072862 0.365631 -0.076317 0.380298 -0.090984 0.400027 -0.110713 0.353566 -0.064252 0.302357 -0.013042 0.368864 -0.079550 NaN NaN 0.365052 -0.075737 SUITE26 OPERATIONAL HOLDOUT SUMMARY -------------------------------------------------------------------------------- model policy precision recall f2 flag_rate council drift 0.362458 0.677219 0.577004 0.239326 v2 drift 0.329869 0.689634 0.566143 0.267790 suite22 drift 0.308292 0.559244 0.471545 0.136108 suite22_relational drift 0.282202 0.559786 0.462842 0.149110 suite25_blend drift 0.331290 0.528847 0.462594 0.125499 suite21 drift 0.293533 0.549521 0.460218 0.137155 suite16 drift 0.306182 0.532161 0.459589 0.129384 suite14 drift 0.301348 0.577052 0.459410 0.152635 suite22_primary drift 0.280765 0.549106 0.458443 0.143752 suite17 drift 0.320536 0.526790 0.458270 0.123769 suite23 drift 0.298495 0.536196 0.457975 0.127811 suite18 drift 0.315042 0.526902 0.457464 0.126292 committee drift 0.297712 0.536400 0.456412 0.131944 suite20 drift 0.254200 0.588446 0.451344 0.169770 suite24_posthoc drift 0.325142 0.514559 0.448843 0.120999 suite26_committee_blend drift 0.318789 0.512271 0.445522 0.122762 suite26_tree drift 0.281992 0.534689 0.444973 0.144893 suite26_joint_head drift 0.308859 0.503249 0.442882 0.120996 suite23_graph drift 0.273355 0.537770 0.440044 0.147205 suite25 drift 0.289184 0.529915 0.438788 0.133256 suite24 drift 0.328779 0.482702 0.426244 0.115982 suite26_tair drift 0.263340 0.506342 0.413944 0.146681 suite26_tree_memory drift 0.269270 0.435885 0.373490 0.132064 council fixed 0.337237 0.715084 0.584178 0.271607 v2 fixed 0.326554 0.697703 0.568481 0.273674 suite24_posthoc fixed 0.253466 0.644501 0.481227 0.191691 suite25_blend fixed 0.294381 0.579343 0.473570 0.156642 suite23 fixed 0.261100 0.601835 0.471875 0.166373 suite22 fixed 0.303257 0.575038 0.469659 0.148487 suite21 fixed 0.263968 0.607119 0.467661 0.176598 suite14 fixed 0.229569 0.680828 0.464967 0.231594 suite18 fixed 0.276459 0.582698 0.464491 0.165061 committee fixed 0.252639 0.601720 0.464087 0.177001 suite22_relational fixed 0.258380 0.604078 0.462545 0.184614 suite17 fixed 0.275617 0.578188 0.459598 0.166242 suite26_committee_blend fixed 0.289279 0.563318 0.458562 0.153936 suite26_tree fixed 0.275078 0.558107 0.452809 0.156593 suite24 fixed 0.292799 0.543508 0.448997 0.145270 suite25 fixed 0.283160 0.551008 0.444068 0.147558 suite22_primary fixed 0.310156 0.520893 0.441704 0.131853 suite16 fixed 0.338597 0.486699 0.441082 0.113206 suite26_joint_head fixed 0.328044 0.478151 0.424884 0.112530 suite23_graph fixed 0.260857 0.521173 0.424134 0.146983 suite20 fixed 0.296812 0.487541 0.417312 0.128561 suite26_tair fixed 0.262006 0.479237 0.397171 0.141917 suite26_tree_memory fixed 0.277067 0.399582 0.349685 0.120137 POOLED F6/F7 CONFUSION MATRIX | khoa_cong_nghe_thong_tin | suite26_tair | fixed Actual\Pred Normal Failure Normal 9373 1593 Failure 839 772 P=0.3264 R=0.4792 F2=0.4382 flag=0.1880 POOLED F6/F7 CONFUSION MATRIX | khoa_cong_nghe_thong_tin | suite26_tair | drift Actual\Pred Normal Failure Normal 9149 1817 Failure 737 874 P=0.3248 R=0.5425 F2=0.4784 flag=0.2140 POOLED F6/F7 CONFUSION MATRIX | khoa_cong_nghe_thong_tin | suite26_tree_memory | fixed Actual\Pred Normal Failure Normal 9379 1587 Failure 907 704 P=0.3073 R=0.4370 F2=0.4030 flag=0.1822 POOLED F6/F7 CONFUSION MATRIX | khoa_cong_nghe_thong_tin | suite26_tree_memory | drift Actual\Pred Normal Failure Normal 9037 1929 Failure 769 842 P=0.3039 R=0.5227 F2=0.4569 flag=0.2203 POOLED F6/F7 CONFUSION MATRIX | khoa_cong_nghe_thong_tin | suite26_tree | fixed Actual\Pred Normal Failure Normal 8493 2473 Failure 537 1074 P=0.3028 R=0.6667 F2=0.5375 flag=0.2820 POOLED F6/F7 CONFUSION MATRIX | khoa_cong_nghe_thong_tin | suite26_tree | drift Actual\Pred Normal Failure Normal 7866 3100 Failure 428 1183 P=0.2762 R=0.7343 F2=0.5514 flag=0.3405 POOLED F6/F7 CONFUSION MATRIX | khoa_cong_nghe_thong_tin | suite26_joint_head | fixed Actual\Pred Normal Failure Normal 9712 1254 Failure 882 729 P=0.3676 R=0.4525 F2=0.4325 flag=0.1577 POOLED F6/F7 CONFUSION MATRIX | khoa_cong_nghe_thong_tin | suite26_joint_head | drift Actual\Pred Normal Failure Normal 9113 1853 Failure 693 918 P=0.3313 R=0.5698 F2=0.4981 flag=0.2203 POOLED F6/F7 CONFUSION MATRIX | khoa_cong_nghe_thong_tin | suite26_committee_blend | fixed Actual\Pred Normal Failure Normal 8736 2230 Failure 523 1088 P=0.3279 R=0.6754 F2=0.5573 flag=0.2638 POOLED F6/F7 CONFUSION MATRIX | khoa_cong_nghe_thong_tin | suite26_committee_blend | drift Actual\Pred Normal Failure Normal 8892 2074 Failure 556 1055 P=0.3372 R=0.6549 F2=0.5510 flag=0.2488 POOLED F6/F7 CONFUSION MATRIX | khoa_cong_nghe_thong_tin | committee | fixed Actual\Pred Normal Failure Normal 8493 2473 Failure 458 1153 P=0.3180 R=0.7157 F2=0.5725 flag=0.2883 POOLED F6/F7 CONFUSION MATRIX | khoa_cong_nghe_thong_tin | committee | drift Actual\Pred Normal Failure Normal 8912 2054 Failure 536 1075 P=0.3436 R=0.6673 F2=0.5615 flag=0.2488 POOLED F6/F7 CONFUSION MATRIX | khoa_cong_nghe_thong_tin | suite22 | fixed Actual\Pred Normal Failure Normal 8482 2484 Failure 462 1149 P=0.3163 R=0.7132 F2=0.5701 flag=0.2889 POOLED F6/F7 CONFUSION MATRIX | khoa_cong_nghe_thong_tin | suite22 | drift Actual\Pred Normal Failure Normal 8641 2325 Failure 488 1123 P=0.3257 R=0.6971 F2=0.5676 flag=0.2742 POOLED F6/F7 CONFUSION MATRIX | khoa_cong_nghe_thong_tin | suite23 | fixed Actual\Pred Normal Failure Normal 8971 1995 Failure 541 1070 P=0.3491 R=0.6642 F2=0.5626 flag=0.2437 POOLED F6/F7 CONFUSION MATRIX | khoa_cong_nghe_thong_tin | suite23 | drift Actual\Pred Normal Failure Normal 9085 1881 Failure 562 1049 P=0.3580 R=0.6511 F2=0.5595 flag=0.2330 POOLED F6/F7 CONFUSION MATRIX | khoa_cong_nghe_thong_tin | suite24 | fixed Actual\Pred Normal Failure Normal 8978 1988 Failure 550 1061 P=0.3480 R=0.6586 F2=0.5588 flag=0.2424 POOLED F6/F7 CONFUSION MATRIX | khoa_cong_nghe_thong_tin | suite24 | drift Actual\Pred Normal Failure Normal 9032 1934 Failure 535 1076 P=0.3575 R=0.6679 F2=0.5691 flag=0.2393 POOLED F6/F7 CONFUSION MATRIX | khoa_cong_nghe_thong_tin | suite25 | fixed Actual\Pred Normal Failure Normal 9444 1522 Failure 729 882 P=0.3669 R=0.5475 F2=0.4984 flag=0.1911 POOLED F6/F7 CONFUSION MATRIX | khoa_cong_nghe_thong_tin | suite25 | drift Actual\Pred Normal Failure Normal 8999 1967 Failure 608 1003 P=0.3377 R=0.6226 F2=0.5327 flag=0.2361 POOLED F6/F7 CONFUSION MATRIX | khoa_cong_nghe_thong_tin | council | fixed Actual\Pred Normal Failure Normal 8702 2264 Failure 459 1152 P=0.3372 R=0.7151 F2=0.5842 flag=0.2716 POOLED F6/F7 CONFUSION MATRIX | khoa_cong_nghe_thong_tin | council | drift Actual\Pred Normal Failure Normal 9047 1919 Failure 520 1091 P=0.3625 R=0.6772 F2=0.5770 flag=0.2393 POOLED F6/F7 CONFUSION MATRIX | khoa_cong_nghe_thong_tin | v2 | fixed Actual\Pred Normal Failure Normal 8648 2318 Failure 487 1124 P=0.3266 R=0.6977 F2=0.5685 flag=0.2737 POOLED F6/F7 CONFUSION MATRIX | khoa_cong_nghe_thong_tin | v2 | drift Actual\Pred Normal Failure Normal 8709 2257 Failure 500 1111 P=0.3299 R=0.6896 F2=0.5661 flag=0.2678 SUITE26 STUDENT-CLUSTER BOOTSTRAP — HOLDOUT -------------------------------------------------------------------------------- faculty reference delta_ap ci_low ci_high positive_ci negative_ci khoa_cong_nghe_thong_tin suite26_tree 0.006244 -0.014893 0.028237 False False khoa_cong_nghe_thong_tin committee -0.064882 -0.092850 -0.035334 False True khoa_cong_nghe_thong_tin suite18 -0.055289 -0.089237 -0.023610 False True khoa_cong_nghe_thong_tin suite21 -0.074239 -0.098890 -0.048218 False True khoa_cong_nghe_thong_tin suite22 -0.074477 -0.101029 -0.044835 False True khoa_cong_nghe_thong_tin suite23 -0.090956 -0.115903 -0.064645 False True khoa_cong_nghe_thong_tin suite24 -0.080840 -0.105561 -0.056792 False True khoa_cong_nghe_thong_tin suite25 -0.024159 -0.050916 0.002336 False False khoa_cong_nghe_thong_tin council -0.097770 -0.122954 -0.072431 False True khoa_quan_tri_kinh_doanh_va_du_lich suite26_tree -0.004182 -0.028092 0.017529 False False khoa_quan_tri_kinh_doanh_va_du_lich committee -0.031520 -0.059584 -0.002021 False True khoa_quan_tri_kinh_doanh_va_du_lich suite18 -0.023512 -0.050711 0.006718 False False khoa_quan_tri_kinh_doanh_va_du_lich suite21 -0.027176 -0.051402 -0.001867 False True khoa_quan_tri_kinh_doanh_va_du_lich suite22 -0.060864 -0.083955 -0.035478 False True khoa_quan_tri_kinh_doanh_va_du_lich suite23 -0.049451 -0.076015 -0.022580 False True khoa_quan_tri_kinh_doanh_va_du_lich suite24 -0.041122 -0.066316 -0.018702 False True khoa_quan_tri_kinh_doanh_va_du_lich suite25 -0.023899 -0.051963 0.002648 False False khoa_quoc_te_hoc suite26_tree -0.003455 -0.052558 0.054083 False False khoa_quoc_te_hoc committee -0.009345 -0.099175 0.121323 False False khoa_quoc_te_hoc suite18 -0.002694 -0.095842 0.106949 False False khoa_quoc_te_hoc suite21 -0.022626 -0.104525 0.094032 False False khoa_quoc_te_hoc suite22 -0.061807 -0.138506 0.028831 False False khoa_quoc_te_hoc suite23 -0.024808 -0.112582 0.098619 False False khoa_quoc_te_hoc suite24 -0.045588 -0.130586 0.071834 False False khoa_quoc_te_hoc suite25 -0.048454 -0.140018 0.030864 False False khoa_tieng_anh suite26_tree -0.033794 -0.062551 -0.002267 False True khoa_tieng_anh committee -0.054219 -0.105247 -0.001766 False True khoa_tieng_anh suite18 -0.050693 -0.103730 0.003412 False False khoa_tieng_anh suite21 -0.057167 -0.112986 -0.008284 False True khoa_tieng_anh suite22 -0.072289 -0.120875 -0.027594 False True khoa_tieng_anh suite23 -0.071104 -0.119351 -0.020466 False True khoa_tieng_anh suite24 -0.076577 -0.131613 -0.017245 False True khoa_tieng_anh suite25 -0.032912 -0.080479 0.003994 False False khoa_tieng_bo_dao_nha suite26_tree -0.015659 -0.077023 0.047950 False False khoa_tieng_bo_dao_nha committee -0.098677 -0.164707 -0.023435 False True khoa_tieng_bo_dao_nha suite18 -0.083410 -0.145148 -0.010162 False True khoa_tieng_bo_dao_nha suite21 -0.105177 -0.169736 -0.038734 False True khoa_tieng_bo_dao_nha suite22 -0.100031 -0.164609 -0.030029 False True khoa_tieng_bo_dao_nha suite23 -0.062219 -0.137397 0.016568 False False khoa_tieng_bo_dao_nha suite24 -0.088727 -0.145471 -0.026318 False True khoa_tieng_bo_dao_nha suite25 -0.032521 -0.110219 0.031209 False False khoa_tieng_duc suite26_tree -0.080755 -0.127687 -0.037875 False True khoa_tieng_duc committee -0.122401 -0.192755 -0.048962 False True khoa_tieng_duc suite18 -0.123599 -0.194198 -0.047459 False True khoa_tieng_duc suite21 -0.133455 -0.197088 -0.052304 False True khoa_tieng_duc suite22 -0.151124 -0.208230 -0.083330 False True khoa_tieng_duc suite23 -0.114640 -0.171062 -0.040657 False True khoa_tieng_duc suite24 -0.110846 -0.178544 -0.035731 False True khoa_tieng_duc suite25 -0.124292 -0.184698 -0.049777 False True khoa_tieng_han_quoc suite26_tree -0.062697 -0.093968 -0.033461 False True khoa_tieng_han_quoc committee -0.090380 -0.162599 -0.023935 False True khoa_tieng_han_quoc suite18 -0.084765 -0.160834 -0.009544 False True khoa_tieng_han_quoc suite21 -0.114460 -0.185055 -0.043054 False True khoa_tieng_han_quoc suite22 -0.133024 -0.185551 -0.079125 False True khoa_tieng_han_quoc suite23 -0.108374 -0.172161 -0.043468 False True khoa_tieng_han_quoc suite24 -0.124545 -0.187882 -0.060048 False True khoa_tieng_han_quoc suite25 -0.100100 -0.149776 -0.040623 False True khoa_tieng_italia suite26_tree -0.058875 -0.102020 -0.011667 False True khoa_tieng_italia committee 0.020685 -0.026382 0.078538 False False khoa_tieng_italia suite18 0.033868 -0.009423 0.085977 False False khoa_tieng_italia suite21 0.017440 -0.027597 0.063401 False False khoa_tieng_italia suite22 -0.037542 -0.083157 0.012848 False False khoa_tieng_italia suite23 -0.004410 -0.051465 0.039320 False False khoa_tieng_italia suite24 -0.017534 -0.068863 0.032243 False False khoa_tieng_italia suite25 -0.014378 -0.064956 0.040051 False False khoa_tieng_nga suite26_tree -0.033085 -0.073919 -0.000203 False True khoa_tieng_nga committee -0.096984 -0.147691 -0.045367 False True khoa_tieng_nga suite18 -0.114465 -0.172792 -0.055275 False True khoa_tieng_nga suite21 -0.096122 -0.146880 -0.044901 False True khoa_tieng_nga suite22 -0.121501 -0.166465 -0.069509 False True khoa_tieng_nga suite23 -0.113581 -0.170780 -0.049407 False True khoa_tieng_nga suite24 -0.077800 -0.119162 -0.028171 False True khoa_tieng_nga suite25 -0.044893 -0.092651 -0.005407 False True khoa_tieng_nhat suite26_tree -0.007763 -0.026767 0.010916 False False khoa_tieng_nhat committee -0.027969 -0.064894 0.011477 False False khoa_tieng_nhat suite18 -0.020904 -0.063761 0.020364 False False khoa_tieng_nhat suite21 -0.038801 -0.075103 -0.000768 False True khoa_tieng_nhat suite22 -0.047769 -0.079031 -0.015934 False True khoa_tieng_nhat suite23 -0.039995 -0.077219 -0.003284 False True khoa_tieng_nhat suite24 -0.042781 -0.078567 -0.005552 False True khoa_tieng_nhat suite25 -0.074597 -0.110853 -0.031096 False True khoa_tieng_phap suite26_tree -0.069477 -0.136038 -0.004050 False True khoa_tieng_phap committee -0.027714 -0.140019 0.049462 False False khoa_tieng_phap suite18 -0.021908 -0.139220 0.051999 False False khoa_tieng_phap suite21 -0.025559 -0.121262 0.052978 False False khoa_tieng_phap suite22 -0.061628 -0.134503 0.005878 False False khoa_tieng_phap suite23 -0.067181 -0.138431 -0.009703 False True khoa_tieng_phap suite24 -0.038440 -0.126764 0.023853 False False khoa_tieng_phap suite25 -0.065428 -0.141760 0.019396 False False khoa_tieng_tay_ban_nha suite26_tree -0.011738 -0.076004 0.038141 False False khoa_tieng_tay_ban_nha committee -0.024912 -0.101338 0.054041 False False khoa_tieng_tay_ban_nha suite18 -0.006967 -0.086489 0.054432 False False khoa_tieng_tay_ban_nha suite21 -0.056401 -0.125420 0.011967 False False khoa_tieng_tay_ban_nha suite22 -0.074628 -0.147158 -0.005079 False True khoa_tieng_tay_ban_nha suite23 -0.026819 -0.100301 0.036199 False False khoa_tieng_tay_ban_nha suite24 -0.049844 -0.123833 0.018429 False False khoa_tieng_tay_ban_nha suite25 -0.062884 -0.140255 0.011454 False False khoa_tieng_trung_quoc suite26_tree -0.059084 -0.088024 -0.033968 False True khoa_tieng_trung_quoc committee -0.103520 -0.150719 -0.056312 False True khoa_tieng_trung_quoc suite18 -0.112052 -0.161741 -0.061214 False True khoa_tieng_trung_quoc suite21 -0.118104 -0.166063 -0.070994 False True khoa_tieng_trung_quoc suite22 -0.136676 -0.181957 -0.091146 False True khoa_tieng_trung_quoc suite23 -0.115351 -0.164779 -0.067792 False True khoa_tieng_trung_quoc suite24 -0.109639 -0.153956 -0.064709 False True khoa_tieng_trung_quoc suite25 -0.096896 -0.134634 -0.061508 False True khoa_viet_nam_hoc suite26_tree 0.040851 -0.036637 0.112687 False False khoa_viet_nam_hoc committee -0.012895 -0.073687 0.051314 False False khoa_viet_nam_hoc suite18 -0.015032 -0.081301 0.059114 False False khoa_viet_nam_hoc suite21 -0.013973 -0.077240 0.063349 False False khoa_viet_nam_hoc suite22 -0.005324 -0.066304 0.061964 False False khoa_viet_nam_hoc suite23 -0.012895 -0.074174 0.057111 False False khoa_viet_nam_hoc suite24 -0.010932 -0.072555 0.061973 False False khoa_viet_nam_hoc suite25 0.068573 -0.004940 0.139269 False False SUITE26 COMPONENT UPLIFT — HOLDOUT -------------------------------------------------------------------------------- fold faculty component delta_ap delta_f2_20 6 khoa_cong_nghe_thong_tin student_memory_gain 0.024978 0.007392 6 khoa_quan_tri_kinh_doanh_va_du_lich student_memory_gain 0.046322 0.001295 6 khoa_quoc_te_hoc student_memory_gain 0.008242 0.000000 6 khoa_tieng_anh student_memory_gain -0.016302 0.008676 6 khoa_tieng_bo_dao_nha student_memory_gain 0.028599 -0.021277 6 khoa_tieng_duc student_memory_gain 0.010752 0.014205 6 khoa_tieng_han_quoc student_memory_gain 0.012331 0.008718 6 khoa_tieng_italia student_memory_gain -0.015671 0.006402 6 khoa_tieng_nga student_memory_gain 0.007404 0.000000 6 khoa_tieng_nhat student_memory_gain 0.007084 0.000000 6 khoa_tieng_phap student_memory_gain -0.079390 0.000000 6 khoa_tieng_tay_ban_nha student_memory_gain 0.010419 0.000000 6 khoa_tieng_trung_quoc student_memory_gain -0.016746 0.000000 6 khoa_viet_nam_hoc student_memory_gain -0.003952 0.031712 7 khoa_cong_nghe_thong_tin student_memory_gain -0.015707 -0.043034 7 khoa_quan_tri_kinh_doanh_va_du_lich student_memory_gain -0.076617 -0.087440 7 khoa_quoc_te_hoc student_memory_gain -0.039623 -0.094073 7 khoa_tieng_anh student_memory_gain -0.061061 -0.014959 7 khoa_tieng_bo_dao_nha student_memory_gain -0.068458 -0.098280 7 khoa_tieng_duc student_memory_gain -0.108637 -0.127636 7 khoa_tieng_han_quoc student_memory_gain -0.118416 -0.058972 7 khoa_tieng_italia student_memory_gain -0.123191 -0.126078 7 khoa_tieng_nga student_memory_gain 0.013066 -0.064935 7 khoa_tieng_nhat student_memory_gain 0.001900 -0.057068 7 khoa_tieng_phap student_memory_gain -0.064768 0.004721 7 khoa_tieng_tay_ban_nha student_memory_gain -0.031903 -0.104257 7 khoa_tieng_trung_quoc student_memory_gain -0.080906 -0.095498 7 khoa_viet_nam_hoc student_memory_gain 0.060962 -0.016968 6 khoa_cong_nghe_thong_tin latent_ability_requirement_gain 0.020953 0.007392 6 khoa_quan_tri_kinh_doanh_va_du_lich latent_ability_requirement_gain 0.032450 0.018135 6 khoa_quoc_te_hoc latent_ability_requirement_gain 0.000938 0.000000 6 khoa_tieng_anh latent_ability_requirement_gain 0.005589 -0.002892 6 khoa_tieng_bo_dao_nha latent_ability_requirement_gain 0.046246 0.000000 6 khoa_tieng_duc latent_ability_requirement_gain 0.001630 -0.014205 6 khoa_tieng_han_quoc latent_ability_requirement_gain 0.021483 -0.008718 6 khoa_tieng_italia latent_ability_requirement_gain 0.022450 0.000000 6 khoa_tieng_nga latent_ability_requirement_gain 0.011608 0.004209 6 khoa_tieng_nhat latent_ability_requirement_gain -0.003461 0.000000 6 khoa_tieng_phap latent_ability_requirement_gain -0.004170 0.000000 6 khoa_tieng_tay_ban_nha latent_ability_requirement_gain 0.036711 0.016474 6 khoa_tieng_trung_quoc latent_ability_requirement_gain -0.016888 0.000000 6 khoa_viet_nam_hoc latent_ability_requirement_gain 0.022029 -0.010571 7 khoa_cong_nghe_thong_tin latent_ability_requirement_gain 0.017721 0.030482 7 khoa_quan_tri_kinh_doanh_va_du_lich latent_ability_requirement_gain 0.058098 0.029412 7 khoa_quoc_te_hoc latent_ability_requirement_gain -0.022889 0.004704 7 khoa_tieng_anh latent_ability_requirement_gain 0.019897 0.000000 7 khoa_tieng_bo_dao_nha latent_ability_requirement_gain 0.049201 0.036855 7 khoa_tieng_duc latent_ability_requirement_gain 0.007358 0.000000 7 khoa_tieng_han_quoc latent_ability_requirement_gain 0.037980 0.000000 7 khoa_tieng_italia latent_ability_requirement_gain 0.005579 0.000000 7 khoa_tieng_nga latent_ability_requirement_gain -0.002478 0.009990 7 khoa_tieng_nhat latent_ability_requirement_gain 0.000654 -0.013169 7 khoa_tieng_phap latent_ability_requirement_gain -0.000022 0.000000 7 khoa_tieng_tay_ban_nha latent_ability_requirement_gain 0.011548 0.008688 7 khoa_tieng_trung_quoc latent_ability_requirement_gain 0.006764 0.006821 7 khoa_viet_nam_hoc latent_ability_requirement_gain 0.019234 0.056561 SUITE26 MEMORY / ABILITY ABLATION SUMMARY — HOLDOUT -------------------------------------------------------------------------------- ablation cells mean_delta_ap median_delta_ap loss_cells mean_abs_prob_change no_ability 28 -0.004954 -0.003312 19 0.001336 no_grades 28 -0.002728 -0.001452 20 0.001108 no_labels 28 -0.018684 -0.012758 24 0.002456 no_memory 28 0.010110 -0.002284 15 0.058445 no_recency 28 0.000416 0.000279 12 0.000340 no_tree_leaf 28 -0.029065 -0.020335 20 0.035044 tree_only 28 0.010110 -0.002284 15 0.058445 uniform_attention 28 -0.003122 -0.001398 20 0.001258 SUITE26 SHUFFLED-STUDENT-HISTORY INTERVENTION — HOLDOUT -------------------------------------------------------------------------------- cells mean_delta_ap median_delta_ap loss_cells mean_abs_prob_change 28 -0.034472 -0.017334 21 0.021119 SUITE26 TREE-MEMORY / ABILITY MECHANISM DIAGNOSTICS — HOLDOUT -------------------------------------------------------------------------------- fold faculty rows history_mean weighted_history_fail_rate weighted_fail_rate_for_failures weighted_fail_rate_for_normals weighted_grade same_course_attention_mass weighted_recency attention_top1 ability_logit_mean ability_logit_failures ability_logit_normals delta_mean delta_failures delta_normals theta_norm requirement_norm 6 khoa_cong_nghe_thong_tin 5651 15.652097 0.057561 0.207938 0.040921 0.704099 0.000000e+00 1.790384 0.318769 -3.457243 -1.484066 -3.675580 -1.957580 -1.794453 -1.975631 1.552652 2.128457 6 khoa_quan_tri_kinh_doanh_va_du_lich 7442 13.849906 0.056756 0.284873 0.037005 0.681499 0.000000e+00 1.903566 0.483313 -3.696005 -1.113875 -3.919571 -1.931341 -1.595423 -1.960425 1.697496 2.133081 6 khoa_quoc_te_hoc 2466 14.680454 0.018037 0.155924 0.014598 0.728347 0.000000e+00 1.491841 0.508758 -5.175441 -3.007429 -5.229507 -1.993827 -1.923370 -1.995585 1.827335 1.973520 6 khoa_tieng_anh 6204 15.395068 0.010990 0.167400 0.007853 0.767999 4.917756e-06 1.377763 0.538291 -5.583745 -3.313806 -5.629279 -1.949377 -1.734640 -1.953685 1.922338 2.034459 6 khoa_tieng_bo_dao_nha 892 18.449552 0.081007 0.344798 0.057495 0.667168 0.000000e+00 2.161378 0.414816 -3.637874 -0.634507 -3.905573 -1.918500 -1.703211 -1.937689 1.893753 1.986030 6 khoa_tieng_duc 1839 16.505710 0.025509 0.239508 0.015267 0.716417 0.000000e+00 1.814707 0.461216 -4.665164 -1.087992 -4.836379 -1.961991 -1.751886 -1.972047 1.806931 2.066282 6 khoa_tieng_han_quoc 3277 15.333232 0.018257 0.157202 0.012838 0.764136 0.000000e+00 1.855992 0.648388 -5.464731 -2.726064 -5.571533 -1.973797 -1.781037 -1.981314 2.032796 1.983726 6 khoa_tieng_italia 2026 16.836130 0.041911 0.227149 0.032899 0.677640 0.000000e+00 1.906325 0.436563 -3.907159 -1.976872 -4.001076 -1.950739 -1.745420 -1.960729 1.641237 2.058495 6 khoa_tieng_nga 1842 16.522801 0.040717 0.178834 0.023421 0.670835 0.000000e+00 1.679412 0.447524 -3.816910 -1.779217 -4.072088 -1.955113 -1.838724 -1.969689 1.700035 2.099893 6 khoa_tieng_nhat 2530 14.580632 0.016131 0.067096 0.014294 0.712293 0.000000e+00 1.883623 0.535298 -5.495585 -3.140466 -5.580455 -1.974704 -1.871235 -1.978432 1.975537 2.006222 6 khoa_tieng_phap 2263 15.046399 0.014781 0.161171 0.011473 0.727866 0.000000e+00 1.352693 0.449133 -5.123104 -2.380585 -5.185068 -1.988351 -1.899876 -1.990350 1.895578 1.968611 6 khoa_tieng_tay_ban_nha 1333 15.357839 0.051545 0.253531 0.037788 0.695769 0.000000e+00 1.488690 0.482387 -4.153791 -1.433841 -4.339045 -1.966192 -1.802320 -1.977353 1.709535 2.065868 6 khoa_tieng_trung_quoc 4990 15.687174 0.012915 0.089473 0.010264 0.713293 0.000000e+00 1.350827 0.425289 -5.471409 -2.667205 -5.568507 -1.930993 -1.609068 -1.942140 1.965737 1.972747 6 khoa_viet_nam_hoc 604 7.884106 0.120910 0.467972 0.061721 0.659731 0.000000e+00 1.406852 0.477297 -3.098643 -0.548665 -3.533524 -1.882704 -1.581794 -1.934021 1.599431 1.753243 7 khoa_cong_nghe_thong_tin 6926 12.520358 0.048264 0.113614 0.036612 0.491857 0.000000e+00 2.613056 0.322557 -4.669262 -2.978995 -4.970623 -1.309316 -0.940513 -1.375070 1.655836 2.554371 7 khoa_quan_tri_kinh_doanh_va_du_lich 8989 11.009345 0.045398 0.138895 0.032050 0.428043 2.345803e-06 2.175724 0.239669 -3.921319 -2.299665 -4.152836 -1.253944 -0.902468 -1.304123 1.312101 2.373349 7 khoa_quoc_te_hoc 2755 11.532486 0.016298 0.075722 0.013403 0.516125 0.000000e+00 2.141024 0.303705 -5.293030 -3.410145 -5.384773 -1.401887 -1.057347 -1.418674 1.552289 2.521284 7 khoa_tieng_anh 8369 10.023061 0.015168 0.108374 0.012298 0.586106 2.594198e-07 2.148036 0.423117 -5.762628 -3.727662 -5.825289 -1.480062 -1.056740 -1.493097 2.023438 2.707524 7 khoa_tieng_bo_dao_nha 1209 9.601323 0.063597 0.165486 0.049929 0.453047 0.000000e+00 2.148892 0.291032 -4.042062 -2.379410 -4.265101 -1.332586 -1.116594 -1.361560 1.581235 2.517658 7 khoa_tieng_duc 2284 10.798599 0.023616 0.144401 0.017446 0.520912 1.656460e-05 2.466296 0.320177 -5.277400 -2.927518 -5.397436 -1.395868 -1.374821 -1.396944 1.861903 2.566609 7 khoa_tieng_han_quoc 3434 10.590274 0.015527 0.165706 0.009854 0.582879 0.000000e+00 2.164081 0.260046 -5.713959 -2.843027 -5.822410 -1.435658 -1.341522 -1.439214 2.046978 2.603741 7 khoa_tieng_italia 2453 12.527517 0.039005 0.126653 0.028881 0.528039 2.123866e-07 2.419065 0.346803 -5.015379 -2.790892 -5.272323 -1.557926 -1.383367 -1.578089 1.816173 2.543582 7 khoa_tieng_nga 1924 11.597713 0.044554 0.099391 0.039783 0.421994 3.041843e-04 2.301586 0.231951 -4.048879 -2.606766 -4.174351 -1.248326 -0.937821 -1.275341 1.387524 2.490617 7 khoa_tieng_nhat 2795 8.001073 0.015818 0.066956 0.013020 0.544844 0.000000e+00 2.562627 0.302082 -5.383416 -3.764122 -5.472018 -1.430101 -1.217982 -1.441708 1.831067 2.515560 7 khoa_tieng_phap 2915 11.371184 0.012931 0.074695 0.010302 0.528109 1.188038e-07 2.473295 0.391171 -5.905590 -3.353452 -6.014210 -1.416384 -0.774326 -1.443710 1.957471 2.625747 7 khoa_tieng_tay_ban_nha 1957 11.077670 0.034503 0.098195 0.027654 0.495706 0.000000e+00 2.228764 0.313136 -4.806986 -2.718545 -5.031549 -1.362575 -1.019584 -1.399456 1.691147 2.467195 7 khoa_tieng_trung_quoc 6657 12.656151 0.015651 0.109024 0.012505 0.605829 0.000000e+00 2.168822 0.387264 -5.646567 -3.363206 -5.723505 -1.539094 -1.489118 -1.540778 2.092551 2.597065 7 khoa_viet_nam_hoc 978 4.746421 0.108146 0.252149 0.077416 0.427527 0.000000e+00 1.838003 0.290852 -2.104426 -1.207698 -2.295787 -1.258992 -0.794239 -1.358170 1.646442 2.460256 SUITE26 HISTORY ATTENTION GROUPS — HOLDOUT -------------------------------------------------------------------------------- group tokens mean_attention attention_mass high_grade 718371 0.070223 50309.105685 history_fail 36945 0.089454 3118.804397 history_pass 1215444 0.064764 78684.195629 low_grade 36945 0.089454 3118.804397 mid_grade 497073 0.056951 28375.089944 other_course 1252379 0.065321 81802.322308 same_course 10 0.051211 0.677719 SUITE26 COMMITTEE COMPLEMENTARITY — HOLDOUT -------------------------------------------------------------------------------- fold faculty rows committee_false_negatives_at20 memory_rescued_fn_at20 blend_rescued_fn_at20 committee_false_alarms_at20 memory_corrected_fa_at20 blend_corrected_fa_at20 committee_only_correct memory_only_correct 6 khoa_cong_nghe_thong_tin 5651 202 36 15 769 232 110 310 268 6 khoa_quan_tri_kinh_doanh_va_du_lich 7442 179 36 16 1074 254 150 308 290 6 khoa_quoc_te_hoc 2466 20 4 3 453 143 65 151 147 6 khoa_tieng_anh 6204 45 12 5 1164 333 135 327 345 6 khoa_tieng_bo_dao_nha 892 22 4 4 127 56 29 62 60 6 khoa_tieng_duc 1839 11 3 1 295 72 37 73 75 6 khoa_tieng_han_quoc 3277 29 4 4 561 121 52 133 125 6 khoa_tieng_italia 2026 34 6 3 345 115 33 115 121 6 khoa_tieng_nga 1842 88 10 6 251 72 37 70 82 6 khoa_tieng_nhat 2530 31 8 6 449 95 54 91 103 6 khoa_tieng_phap 2263 7 0 0 410 117 71 127 117 6 khoa_tieng_tay_ban_nha 1333 24 8 6 206 69 24 77 77 6 khoa_tieng_trung_quoc 4990 34 3 0 865 172 82 179 175 6 khoa_viet_nam_hoc 604 19 2 0 52 11 5 23 13 7 khoa_cong_nghe_thong_tin 6926 464 77 17 801 332 59 571 409 7 khoa_quan_tri_kinh_doanh_va_du_lich 8989 468 99 20 1143 425 58 674 524 7 khoa_quoc_te_hoc 2755 46 13 4 469 226 26 267 239 7 khoa_tieng_anh 8369 81 26 5 1505 726 73 764 752 7 khoa_tieng_bo_dao_nha 1209 64 9 2 163 49 6 78 58 7 khoa_tieng_duc 2284 26 8 4 372 213 17 257 221 7 khoa_tieng_han_quoc 3434 25 13 3 587 384 33 423 397 7 khoa_tieng_italia 2453 102 29 4 339 164 23 243 193 7 khoa_tieng_nga 1924 65 11 1 296 98 11 119 109 7 khoa_tieng_nhat 2795 50 10 1 464 225 20 275 235 7 khoa_tieng_phap 2915 47 29 4 511 266 27 277 295 7 khoa_tieng_tay_ban_nha 1957 59 19 3 260 126 16 197 145 7 khoa_tieng_trung_quoc 6657 81 16 4 1195 547 73 601 563 7 khoa_viet_nam_hoc 978 68 22 3 92 44 5 62 66 SUITE26 COLD/NEW MEMORY REGIMES — HOLDOUT -------------------------------------------------------------------------------- fold faculty regime model rows failures prevalence ap auc 6 khoa_cong_nghe_thong_tin returning_student+new_course suite26_tair 82 1 0.012195 0.016949 0.283951 6 khoa_cong_nghe_thong_tin returning_student+new_course suite26_tree_memory 82 1 0.012195 0.016393 0.259259 6 khoa_cong_nghe_thong_tin returning_student+new_course suite26_tree 82 1 0.012195 0.016949 0.283951 6 khoa_cong_nghe_thong_tin returning_student+new_course committee 82 1 0.012195 0.030303 0.604938 6 khoa_cong_nghe_thong_tin returning_student+seen_course suite26_tair 5569 562 0.100916 0.333780 0.812597 6 khoa_cong_nghe_thong_tin returning_student+seen_course suite26_tree_memory 5569 562 0.100916 0.313008 0.807898 6 khoa_cong_nghe_thong_tin returning_student+seen_course suite26_tree 5569 562 0.100916 0.287829 0.803114 6 khoa_cong_nghe_thong_tin returning_student+seen_course committee 5569 562 0.100916 0.373790 0.835682 6 khoa_quan_tri_kinh_doanh_va_du_lich new_student+seen_course suite26_tair 12 5 0.416667 0.625952 0.742857 6 khoa_quan_tri_kinh_doanh_va_du_lich new_student+seen_course suite26_tree_memory 12 5 0.416667 0.625952 0.742857 6 khoa_quan_tri_kinh_doanh_va_du_lich new_student+seen_course suite26_tree 12 5 0.416667 0.625952 0.742857 6 khoa_quan_tri_kinh_doanh_va_du_lich new_student+seen_course committee 12 5 0.416667 0.597778 0.714286 6 khoa_quan_tri_kinh_doanh_va_du_lich returning_student+new_course suite26_tair 362 31 0.085635 0.257027 0.822045 6 khoa_quan_tri_kinh_doanh_va_du_lich returning_student+new_course suite26_tree_memory 362 31 0.085635 0.251939 0.820388 6 khoa_quan_tri_kinh_doanh_va_du_lich returning_student+new_course suite26_tree 362 31 0.085635 0.250649 0.820193 6 khoa_quan_tri_kinh_doanh_va_du_lich returning_student+new_course committee 362 31 0.085635 0.272908 0.832180 6 khoa_quan_tri_kinh_doanh_va_du_lich returning_student+seen_course suite26_tair 7068 557 0.078806 0.398585 0.855154 6 khoa_quan_tri_kinh_doanh_va_du_lich returning_student+seen_course suite26_tree_memory 7068 557 0.078806 0.364992 0.845971 6 khoa_quan_tri_kinh_doanh_va_du_lich returning_student+seen_course suite26_tree 7068 557 0.078806 0.315229 0.841983 6 khoa_quan_tri_kinh_doanh_va_du_lich returning_student+seen_course committee 7068 557 0.078806 0.388068 0.859799 6 khoa_quoc_te_hoc returning_student+new_course suite26_tair 221 6 0.027149 0.370180 0.728295 6 khoa_quoc_te_hoc returning_student+new_course suite26_tree_memory 221 6 0.027149 0.370180 0.728295 6 khoa_quoc_te_hoc returning_student+new_course suite26_tree 221 6 0.027149 0.370180 0.728295 6 khoa_quoc_te_hoc returning_student+new_course committee 221 6 0.027149 0.366802 0.688760 6 khoa_quoc_te_hoc returning_student+seen_course suite26_tair 2245 54 0.024053 0.116768 0.806718 6 khoa_quoc_te_hoc returning_student+seen_course suite26_tree_memory 2245 54 0.024053 0.117817 0.807356 6 khoa_quoc_te_hoc returning_student+seen_course suite26_tree 2245 54 0.024053 0.105247 0.803772 6 khoa_quoc_te_hoc returning_student+seen_course committee 2245 54 0.024053 0.263092 0.841667 6 khoa_tieng_anh new_student+new_course suite26_tair 1 0 0.000000 NaN NaN 6 khoa_tieng_anh new_student+new_course suite26_tree_memory 1 0 0.000000 NaN NaN 6 khoa_tieng_anh new_student+new_course suite26_tree 1 0 0.000000 NaN NaN 6 khoa_tieng_anh new_student+new_course committee 1 0 0.000000 NaN NaN 6 khoa_tieng_anh new_student+seen_course suite26_tair 135 7 0.051852 0.053227 0.483259 6 khoa_tieng_anh new_student+seen_course suite26_tree_memory 135 7 0.051852 0.053227 0.483259 6 khoa_tieng_anh new_student+seen_course suite26_tree 135 7 0.051852 0.053227 0.483259 6 khoa_tieng_anh new_student+seen_course committee 135 7 0.051852 0.082122 0.633929 6 khoa_tieng_anh returning_student+new_course suite26_tair 717 8 0.011158 0.298674 0.728138 6 khoa_tieng_anh returning_student+new_course suite26_tree_memory 717 8 0.011158 0.245441 0.723731 6 khoa_tieng_anh returning_student+new_course suite26_tree 717 8 0.011158 0.298674 0.728138 6 khoa_tieng_anh returning_student+new_course committee 717 8 0.011158 0.361699 0.806682 6 khoa_tieng_anh returning_student+seen_course suite26_tair 5351 107 0.019996 0.236726 0.847708 6 khoa_tieng_anh returning_student+seen_course suite26_tree_memory 5351 107 0.019996 0.206446 0.846961 6 khoa_tieng_anh returning_student+seen_course suite26_tree 5351 107 0.019996 0.192437 0.846783 6 khoa_tieng_anh returning_student+seen_course committee 5351 107 0.019996 0.288659 0.826978 6 khoa_tieng_bo_dao_nha returning_student+new_course suite26_tair 136 17 0.125000 0.436636 0.810183 6 khoa_tieng_bo_dao_nha returning_student+new_course suite26_tree_memory 136 17 0.125000 0.421570 0.824024 6 khoa_tieng_bo_dao_nha returning_student+new_course suite26_tree 136 17 0.125000 0.389453 0.823035 6 khoa_tieng_bo_dao_nha returning_student+new_course committee 136 17 0.125000 0.642827 0.842313 6 khoa_tieng_bo_dao_nha returning_student+seen_course suite26_tair 756 56 0.074074 0.417329 0.888929 6 khoa_tieng_bo_dao_nha returning_student+seen_course suite26_tree_memory 756 56 0.074074 0.378689 0.881199 6 khoa_tieng_bo_dao_nha returning_student+seen_course suite26_tree 756 56 0.074074 0.347726 0.872015 6 khoa_tieng_bo_dao_nha returning_student+seen_course committee 756 56 0.074074 0.519533 0.893495 6 khoa_tieng_duc new_student+seen_course suite26_tair 14 1 0.071429 0.125000 0.538462 6 khoa_tieng_duc new_student+seen_course suite26_tree_memory 14 1 0.071429 0.125000 0.538462 6 khoa_tieng_duc new_student+seen_course suite26_tree 14 1 0.071429 0.125000 0.538462 6 khoa_tieng_duc new_student+seen_course committee 14 1 0.071429 0.166667 0.615385 6 khoa_tieng_duc returning_student+new_course suite26_tair 252 13 0.051587 0.457691 0.932250 6 khoa_tieng_duc returning_student+new_course suite26_tree_memory 252 13 0.051587 0.333606 0.937882 6 khoa_tieng_duc returning_student+new_course suite26_tree 252 13 0.051587 0.461675 0.936756 6 khoa_tieng_duc returning_student+new_course committee 252 13 0.051587 0.544837 0.921468 6 khoa_tieng_duc returning_student+seen_course suite26_tair 1573 70 0.044501 0.476985 0.941755 6 khoa_tieng_duc returning_student+seen_course suite26_tree_memory 1573 70 0.044501 0.469019 0.940547 6 khoa_tieng_duc returning_student+seen_course suite26_tree 1573 70 0.044501 0.399536 0.937782 6 khoa_tieng_duc returning_student+seen_course committee 1573 70 0.044501 0.464772 0.928087 6 khoa_tieng_han_quoc new_student+seen_course suite26_tair 5 0 0.000000 NaN NaN 6 khoa_tieng_han_quoc new_student+seen_course suite26_tree_memory 5 0 0.000000 NaN NaN 6 khoa_tieng_han_quoc new_student+seen_course suite26_tree 5 0 0.000000 NaN NaN 6 khoa_tieng_han_quoc new_student+seen_course committee 5 0 0.000000 NaN NaN 6 khoa_tieng_han_quoc returning_student+new_course suite26_tair 767 61 0.079531 0.414163 0.829819 6 khoa_tieng_han_quoc returning_student+new_course suite26_tree_memory 767 61 0.079531 0.371982 0.826545 6 khoa_tieng_han_quoc returning_student+new_course suite26_tree 767 61 0.079531 0.414132 0.829564 6 khoa_tieng_han_quoc returning_student+new_course committee 767 61 0.079531 0.351014 0.818813 6 khoa_tieng_han_quoc returning_student+seen_course suite26_tair 2505 62 0.024750 0.275584 0.859889 6 khoa_tieng_han_quoc returning_student+seen_course suite26_tree_memory 2505 62 0.024750 0.271236 0.860431 6 khoa_tieng_han_quoc returning_student+seen_course suite26_tree 2505 62 0.024750 0.238067 0.856361 6 khoa_tieng_han_quoc returning_student+seen_course committee 2505 62 0.024750 0.250917 0.873982 6 khoa_tieng_italia new_student+seen_course suite26_tair 10 1 0.100000 0.333333 0.888889 6 khoa_tieng_italia new_student+seen_course suite26_tree_memory 10 1 0.100000 0.333333 0.888889 6 khoa_tieng_italia new_student+seen_course suite26_tree 10 1 0.100000 0.333333 0.888889 6 khoa_tieng_italia new_student+seen_course committee 10 1 0.100000 0.333333 0.777778 6 khoa_tieng_italia returning_student+new_course suite26_tair 366 27 0.073770 0.234971 0.739594 6 khoa_tieng_italia returning_student+new_course suite26_tree_memory 366 27 0.073770 0.254560 0.738009 6 khoa_tieng_italia returning_student+new_course suite26_tree 366 27 0.073770 0.214407 0.737081 6 khoa_tieng_italia returning_student+new_course committee 366 27 0.073770 0.239045 0.697804 6 khoa_tieng_italia returning_student+seen_course suite26_tair 1650 66 0.040000 0.277649 0.863541 6 khoa_tieng_italia returning_student+seen_course suite26_tree_memory 1650 66 0.040000 0.230029 0.857309 6 khoa_tieng_italia returning_student+seen_course suite26_tree 1650 66 0.040000 0.247991 0.855908 6 khoa_tieng_italia returning_student+seen_course committee 1650 66 0.040000 0.234140 0.839742 6 khoa_tieng_nga new_student+seen_course suite26_tair 5 1 0.200000 0.200000 0.000000 6 khoa_tieng_nga new_student+seen_course suite26_tree_memory 5 1 0.200000 0.200000 0.000000 6 khoa_tieng_nga new_student+seen_course suite26_tree 5 1 0.200000 0.200000 0.000000 6 khoa_tieng_nga new_student+seen_course committee 5 1 0.200000 0.200000 0.000000 6 khoa_tieng_nga returning_student+new_course suite26_tair 405 42 0.103704 0.373670 0.772137 6 khoa_tieng_nga returning_student+new_course suite26_tree_memory 405 42 0.103704 0.371737 0.771678 6 khoa_tieng_nga returning_student+new_course suite26_tree 405 42 0.103704 0.373069 0.771711 6 khoa_tieng_nga returning_student+new_course committee 405 42 0.103704 0.385260 0.728683 6 khoa_tieng_nga returning_student+seen_course suite26_tair 1432 162 0.113128 0.501200 0.824147 6 khoa_tieng_nga returning_student+seen_course suite26_tree_memory 1432 162 0.113128 0.489971 0.821449 6 khoa_tieng_nga returning_student+seen_course suite26_tree 1432 162 0.113128 0.444107 0.820390 6 khoa_tieng_nga returning_student+seen_course committee 1432 162 0.113128 0.520902 0.797217 6 khoa_tieng_nhat new_student+seen_course suite26_tair 7 2 0.285714 0.226190 0.000000 6 khoa_tieng_nhat new_student+seen_course suite26_tree_memory 7 2 0.285714 0.226190 0.000000 6 khoa_tieng_nhat new_student+seen_course suite26_tree 7 2 0.285714 0.226190 0.000000 6 khoa_tieng_nhat new_student+seen_course committee 7 2 0.285714 0.242857 0.100000 6 khoa_tieng_nhat returning_student+new_course suite26_tair 608 48 0.078947 0.286701 0.819401 6 khoa_tieng_nhat returning_student+new_course suite26_tree_memory 608 48 0.078947 0.271981 0.819810 6 khoa_tieng_nhat returning_student+new_course suite26_tree 608 48 0.078947 0.285860 0.819289 6 khoa_tieng_nhat returning_student+new_course committee 608 48 0.078947 0.307945 0.792764 6 khoa_tieng_nhat returning_student+seen_course suite26_tair 1915 38 0.019843 0.141914 0.895571 6 khoa_tieng_nhat returning_student+seen_course suite26_tree_memory 1915 38 0.019843 0.153364 0.898207 6 khoa_tieng_nhat returning_student+seen_course suite26_tree 1915 38 0.019843 0.141250 0.895270 6 khoa_tieng_nhat returning_student+seen_course committee 1915 38 0.019843 0.166848 0.881810 6 khoa_tieng_phap new_student+seen_course suite26_tair 8 1 0.125000 0.250000 0.785714 6 khoa_tieng_phap new_student+seen_course suite26_tree_memory 8 1 0.125000 0.250000 0.785714 6 khoa_tieng_phap new_student+seen_course suite26_tree 8 1 0.125000 0.250000 0.785714 6 khoa_tieng_phap new_student+seen_course committee 8 1 0.125000 0.333333 0.714286 6 khoa_tieng_phap returning_student+new_course suite26_tair 327 6 0.018349 0.151546 0.819834 6 khoa_tieng_phap returning_student+new_course suite26_tree_memory 327 6 0.018349 0.162230 0.819574 6 khoa_tieng_phap returning_student+new_course suite26_tree 327 6 0.018349 0.159483 0.819055 6 khoa_tieng_phap returning_student+new_course committee 327 6 0.018349 0.332606 0.855919 6 khoa_tieng_phap returning_student+seen_course suite26_tair 1928 43 0.022303 0.289800 0.899870 6 khoa_tieng_phap returning_student+seen_course suite26_tree_memory 1928 43 0.022303 0.306646 0.901123 6 khoa_tieng_phap returning_student+seen_course suite26_tree 1928 43 0.022303 0.333855 0.899753 6 khoa_tieng_phap returning_student+seen_course committee 1928 43 0.022303 0.295941 0.921387 6 khoa_tieng_tay_ban_nha returning_student+new_course suite26_tair 232 11 0.047414 0.550706 0.960510 6 khoa_tieng_tay_ban_nha returning_student+new_course suite26_tree_memory 232 11 0.047414 0.379130 0.941999 6 khoa_tieng_tay_ban_nha returning_student+new_course suite26_tree 232 11 0.047414 0.364080 0.918346 6 khoa_tieng_tay_ban_nha returning_student+new_course committee 232 11 0.047414 0.672803 0.956808 6 khoa_tieng_tay_ban_nha returning_student+seen_course suite26_tair 1101 74 0.067212 0.310532 0.848759 6 khoa_tieng_tay_ban_nha returning_student+seen_course suite26_tree_memory 1101 74 0.067212 0.301918 0.845187 6 khoa_tieng_tay_ban_nha returning_student+seen_course suite26_tree 1101 74 0.067212 0.273551 0.846904 6 khoa_tieng_tay_ban_nha returning_student+seen_course committee 1101 74 0.067212 0.341771 0.842720 6 khoa_tieng_trung_quoc new_student+new_course suite26_tair 104 16 0.153846 0.380938 0.770952 6 khoa_tieng_trung_quoc new_student+new_course suite26_tree_memory 104 16 0.153846 0.380938 0.770952 6 khoa_tieng_trung_quoc new_student+new_course suite26_tree 104 16 0.153846 0.380938 0.770952 6 khoa_tieng_trung_quoc new_student+new_course committee 104 16 0.153846 0.356641 0.774858 6 khoa_tieng_trung_quoc new_student+seen_course suite26_tair 32 5 0.156250 0.423810 0.807407 6 khoa_tieng_trung_quoc new_student+seen_course suite26_tree_memory 32 5 0.156250 0.423810 0.807407 6 khoa_tieng_trung_quoc new_student+seen_course suite26_tree 32 5 0.156250 0.423810 0.807407 6 khoa_tieng_trung_quoc new_student+seen_course committee 32 5 0.156250 0.488889 0.851852 6 khoa_tieng_trung_quoc returning_student+new_course suite26_tair 1733 94 0.054241 0.365076 0.889236 6 khoa_tieng_trung_quoc returning_student+new_course suite26_tree_memory 1733 94 0.054241 0.377028 0.887042 6 khoa_tieng_trung_quoc returning_student+new_course suite26_tree 1733 94 0.054241 0.353934 0.888314 6 khoa_tieng_trung_quoc returning_student+new_course committee 1733 94 0.054241 0.408140 0.873480 6 khoa_tieng_trung_quoc returning_student+seen_course suite26_tair 3121 52 0.016661 0.218984 0.907352 6 khoa_tieng_trung_quoc returning_student+seen_course suite26_tree_memory 3121 52 0.016661 0.238917 0.906459 6 khoa_tieng_trung_quoc returning_student+seen_course suite26_tree 3121 52 0.016661 0.254424 0.905779 6 khoa_tieng_trung_quoc returning_student+seen_course committee 3121 52 0.016661 0.301190 0.914467 6 khoa_viet_nam_hoc new_student+new_course suite26_tair 3 3 1.000000 NaN NaN 6 khoa_viet_nam_hoc new_student+new_course suite26_tree_memory 3 3 1.000000 NaN NaN 6 khoa_viet_nam_hoc new_student+new_course suite26_tree 3 3 1.000000 NaN NaN 6 khoa_viet_nam_hoc new_student+new_course committee 3 3 1.000000 NaN NaN 6 khoa_viet_nam_hoc new_student+seen_course suite26_tair 6 2 0.333333 1.000000 1.000000 6 khoa_viet_nam_hoc new_student+seen_course suite26_tree_memory 6 2 0.333333 1.000000 1.000000 6 khoa_viet_nam_hoc new_student+seen_course suite26_tree 6 2 0.333333 1.000000 1.000000 6 khoa_viet_nam_hoc new_student+seen_course committee 6 2 0.333333 1.000000 1.000000 6 khoa_viet_nam_hoc returning_student+new_course suite26_tair 79 19 0.240506 0.647505 0.850000 6 khoa_viet_nam_hoc returning_student+new_course suite26_tree_memory 79 19 0.240506 0.675056 0.858772 6 khoa_viet_nam_hoc returning_student+new_course suite26_tree 79 19 0.240506 0.634165 0.845614 6 khoa_viet_nam_hoc returning_student+new_course committee 79 19 0.240506 0.851186 0.911404 6 khoa_viet_nam_hoc returning_student+seen_course suite26_tair 516 64 0.124031 0.668740 0.927925 6 khoa_viet_nam_hoc returning_student+seen_course suite26_tree_memory 516 64 0.124031 0.613934 0.923586 6 khoa_viet_nam_hoc returning_student+seen_course suite26_tree 516 64 0.124031 0.654233 0.922808 6 khoa_viet_nam_hoc returning_student+seen_course committee 516 64 0.124031 0.657437 0.919801 7 khoa_cong_nghe_thong_tin new_student+new_course suite26_tair 554 159 0.287004 0.440160 0.683465 7 khoa_cong_nghe_thong_tin new_student+new_course suite26_tree_memory 554 159 0.287004 0.440160 0.683465 7 khoa_cong_nghe_thong_tin new_student+new_course suite26_tree 554 159 0.287004 0.440160 0.683465 7 khoa_cong_nghe_thong_tin new_student+new_course committee 554 159 0.287004 0.575365 0.781960 7 khoa_cong_nghe_thong_tin new_student+seen_course suite26_tair 1591 299 0.187932 0.449726 0.757836 7 khoa_cong_nghe_thong_tin new_student+seen_course suite26_tree_memory 1591 299 0.187932 0.449726 0.757836 7 khoa_cong_nghe_thong_tin new_student+seen_course suite26_tree 1591 299 0.187932 0.449726 0.757836 7 khoa_cong_nghe_thong_tin new_student+seen_course committee 1591 299 0.187932 0.535750 0.802652 7 khoa_cong_nghe_thong_tin returning_student+new_course suite26_tair 217 21 0.096774 0.282628 0.784135 7 khoa_cong_nghe_thong_tin returning_student+new_course suite26_tree_memory 217 21 0.096774 0.294423 0.788994 7 khoa_cong_nghe_thong_tin returning_student+new_course suite26_tree 217 21 0.096774 0.294423 0.788994 7 khoa_cong_nghe_thong_tin returning_student+new_course committee 217 21 0.096774 0.262296 0.763484 7 khoa_cong_nghe_thong_tin returning_student+seen_course suite26_tair 4564 569 0.124671 0.353491 0.789345 7 khoa_cong_nghe_thong_tin returning_student+seen_course suite26_tree_memory 4564 569 0.124671 0.354750 0.787862 7 khoa_cong_nghe_thong_tin returning_student+seen_course suite26_tree 4564 569 0.124671 0.351188 0.787803 7 khoa_cong_nghe_thong_tin returning_student+seen_course committee 4564 569 0.124671 0.415861 0.810585 7 khoa_quan_tri_kinh_doanh_va_du_lich new_student+new_course suite26_tair 343 71 0.206997 0.408742 0.738194 7 khoa_quan_tri_kinh_doanh_va_du_lich new_student+new_course suite26_tree_memory 343 71 0.206997 0.408742 0.738194 7 khoa_quan_tri_kinh_doanh_va_du_lich new_student+new_course suite26_tree 343 71 0.206997 0.408742 0.738194 7 khoa_quan_tri_kinh_doanh_va_du_lich new_student+new_course committee 343 71 0.206997 0.417228 0.726129 7 khoa_quan_tri_kinh_doanh_va_du_lich new_student+seen_course suite26_tair 2760 424 0.153623 0.410756 0.769045 7 khoa_quan_tri_kinh_doanh_va_du_lich new_student+seen_course suite26_tree_memory 2760 424 0.153623 0.410756 0.769045 7 khoa_quan_tri_kinh_doanh_va_du_lich new_student+seen_course suite26_tree 2760 424 0.153623 0.410756 0.769045 7 khoa_quan_tri_kinh_doanh_va_du_lich new_student+seen_course committee 2760 424 0.153623 0.387060 0.758517 7 khoa_quan_tri_kinh_doanh_va_du_lich returning_student+new_course suite26_tair 185 6 0.032432 0.116194 0.806331 7 khoa_quan_tri_kinh_doanh_va_du_lich returning_student+new_course suite26_tree_memory 185 6 0.032432 0.243353 0.814711 7 khoa_quan_tri_kinh_doanh_va_du_lich returning_student+new_course suite26_tree 185 6 0.032432 0.243353 0.814711 7 khoa_quan_tri_kinh_doanh_va_du_lich returning_student+new_course committee 185 6 0.032432 0.102071 0.743948 7 khoa_quan_tri_kinh_doanh_va_du_lich returning_student+seen_course suite26_tair 5701 622 0.109104 0.453620 0.848260 7 khoa_quan_tri_kinh_doanh_va_du_lich returning_student+seen_course suite26_tree_memory 5701 622 0.109104 0.420854 0.845585 7 khoa_quan_tri_kinh_doanh_va_du_lich returning_student+seen_course suite26_tree 5701 622 0.109104 0.427077 0.845380 7 khoa_quan_tri_kinh_doanh_va_du_lich returning_student+seen_course committee 5701 622 0.109104 0.455243 0.850478 7 khoa_quoc_te_hoc new_student+seen_course suite26_tair 799 57 0.071339 0.425542 0.833641 7 khoa_quoc_te_hoc new_student+seen_course suite26_tree_memory 799 57 0.071339 0.425542 0.833641 7 khoa_quoc_te_hoc new_student+seen_course suite26_tree 799 57 0.071339 0.425542 0.833641 7 khoa_quoc_te_hoc new_student+seen_course committee 799 57 0.071339 0.257286 0.798718 SUITE26 HISTORY-SUPPORT vs GAIN CORRELATIONS — HOLDOUT -------------------------------------------------------------------------------- support cells pearson_r history_mean 28 0.171721 history_failure_mean 28 0.361398 course_seen_mean 28 -0.352459 SUITE26 HISTORY-K SENSITIVITY — HOLDOUT -------------------------------------------------------------------------------- history_k macro_ap macro_auc 4 0.304879 0.831610 8 0.304340 0.831423 16 0.302826 0.831123 32 0.302149 0.830961 SUITE26 PREDECLARED PREMISE / SUCCESS AUDIT -------------------------------------------------------------------------------- premise mean_delta_ap wins cells verdict meaningful_faculty_losses it_delta_ap mean_delta_f2 fold_6_delta_ap fold_7_delta_ap student_memory_B_minus_tree -0.024618 12 28 NOT_SUPPORTED NaN NaN NaN NaN NaN latent_ability_C_minus_memory 0.014508 22 28 SUPPORTED NaN NaN NaN NaN NaN primary_beats_committee -0.048003 5 28 NOT_SUPPORTED NaN NaN NaN NaN NaN primary_beats_suite22 -0.067011 2 28 NOT_SUPPORTED NaN NaN NaN NaN NaN primary_beats_suite25 -0.039121 6 28 NOT_SUPPORTED NaN NaN NaN NaN NaN joint_head_beats_tree 0.027044 13 28 WEAK_SUPPORT NaN NaN NaN NaN NaN ablation_no_memory_should_hurt 0.010110 15 28 NOT_SUPPORTED NaN NaN NaN NaN NaN ablation_no_labels_should_hurt -0.018684 24 28 SUPPORTED NaN NaN NaN NaN NaN ablation_no_grades_should_hurt -0.002728 20 28 WEAK_SUPPORT NaN NaN NaN NaN NaN ablation_no_recency_should_hurt 0.000416 12 28 NOT_SUPPORTED NaN NaN NaN NaN NaN ablation_no_tree_leaf_should_hurt -0.029065 20 28 SUPPORTED NaN NaN NaN NaN NaN ablation_no_ability_should_hurt -0.004954 19 28 SUPPORTED NaN NaN NaN NaN NaN ablation_uniform_attention_should_hurt -0.003122 20 28 SUPPORTED NaN NaN NaN NaN NaN ablation_tree_only_should_hurt 0.010110 15 28 NOT_SUPPORTED NaN NaN NaN NaN NaN shuffled_student_history_should_hurt -0.034472 21 28 SUPPORTED NaN NaN NaN NaN NaN PROJECT_COUNCIL_BREAKTHROUGH -0.091148 0 1 NOT_SUCCESSFUL 1.0 -0.091148 -0.067428 -0.087366 -0.094929 [DONE] Suite26 complete in 5.25 hours | output=/root/disk_3tb/earlywarning/30072026/results/suite26_tree_native_student_memory