{"bench_id":"b008-suushiki","slug":"suushiki-2026-10-08","title":"Escribir fórmulas funcionales de hoja de cálculo (4 IA, 6 tareas, 3 intentos cada una)","field":"Fórmulas de Excel y hojas de cálculo","field_key":"suushiki","round":1,"run_date":"2026-10-08","timezone":"Asia/Tokyo","version":"v1","conductor":"AInformation","funder":"AInformation (financiado por la propia empresa)","sponsor":null,"method":{"tasks_n":6,"repeats":3,"ais_n":4,"trials_total":72,"trials_valid":72,"excluded":[],"new_chat_each_time":true,"order_rotated":true,"order_by_repeat":{"1":["ChatGPT","Gemini","Claude","Copilot"],"2":["Gemini","Claude","Copilot","ChatGPT"],"3":["Claude","Copilot","ChatGPT","Gemini"]},"timeout_seconds":300,"scoring":"Solo calificación mecánica (la IA no califica)","materials_generated_at":"2026-10-07","materials_note":"Hoja de ventas de la ficticia empresa Sample Shoji (columna A: mes; columnas B a F: productos; columna G: total; filas 2 a 13: datos). Las fórmulas obtenidas se calculan realmente para comprobar la respuesta","counted_outcomes":["scored","refused","timeout"],"excluded_outcomes":["limit","our_error","human_check"],"answer_cleanup":"Al leer la respuesta desde la pantalla, en algunas IA una línea pensada para lectura en voz alta o un resumen del razonamiento en curso aparece en el mismo recuadro que la respuesta. Antes de calificar, se elimina la parte que está al principio de la respuesta y que luego se repite de forma idéntica más adelante. Se aplica el mismo proceso a las 4 IA. Las respuestas sin este recorte se conservan tal cual en answers/","csv_url":"/data/research/bench/suushiki-2026-10-08/latest.csv"},"ais":[{"name":"ChatGPT","plan":"ChatGPT Pro","model_shown":"Medium","checked_at":"2026-10-07 19:36"},{"name":"Gemini","plan":"Google AI Pro","model_shown":"Flash","checked_at":"2026-10-07 19:36"},{"name":"Claude","plan":"Claude Max","model_shown":"Opus 4.8 alto","checked_at":"2026-10-07 19:36"},{"name":"Copilot","plan":"Microsoft 365 Personal","model_shown":null,"checked_at":"2026-10-07 19:36"}],"summary":{"headline":"Se dieron 6 tareas, cada una 3 veces, y la tasa de aciertos más alta fue del 100.0% para ChatGPT, Gemini y Claude, empatados","winner":null,"note":"Resultado de una sola verificación. El orden puede cambiar si cambian el día o las tareas"},"scores":[{"ai":"ChatGPT","correct":18,"trials":18,"accuracy":1,"accuracy_display":100,"seconds_median":14.199999999999999289457264239899814128875732421875,"seconds_min":14,"seconds_max":20.39999999999999857891452847979962825775146484375,"consistency":1,"consistency_display":100,"source_alive":null,"source_alive_display":null,"instruction_follow":1,"instruction_follow_display":100,"failures":{"refused":0,"timeout":0,"limit":0,"our_error":0,"human_check":0}},{"ai":"Gemini","correct":18,"trials":18,"accuracy":1,"accuracy_display":100,"seconds_median":19.10000000000000142108547152020037174224853515625,"seconds_min":19,"seconds_max":19.60000000000000142108547152020037174224853515625,"consistency":1,"consistency_display":100,"source_alive":null,"source_alive_display":null,"instruction_follow":1,"instruction_follow_display":100,"failures":{"refused":0,"timeout":0,"limit":0,"our_error":0,"human_check":0}},{"ai":"Claude","correct":18,"trials":18,"accuracy":1,"accuracy_display":100,"seconds_median":13.9000000000000003552713678800500929355621337890625,"seconds_min":13.800000000000000710542735760100185871124267578125,"seconds_max":16.5,"consistency":1,"consistency_display":100,"source_alive":null,"source_alive_display":null,"instruction_follow":0,"instruction_follow_display":0,"failures":{"refused":0,"timeout":0,"limit":0,"our_error":0,"human_check":0}},{"ai":"Copilot","correct":17,"trials":18,"accuracy":0.94440000000000001723066134218242950737476348876953125,"accuracy_display":94.400000000000005684341886080801486968994140625,"seconds_median":14.0999999999999996447286321199499070644378662109375,"seconds_min":13.9000000000000003552713678800500929355621337890625,"seconds_max":26.199999999999999289457264239899814128875732421875,"consistency":0.888900000000000023447910280083306133747100830078125,"consistency_display":88.900000000000005684341886080801486968994140625,"source_alive":null,"source_alive_display":null,"instruction_follow":0.94440000000000001723066134218242950737476348876953125,"instruction_follow_display":94.400000000000005684341886080801486968994140625,"failures":{"refused":0,"timeout":0,"limit":0,"our_error":0,"human_check":0}}],"tasks":[{"task_id":"t1","level":"易","prompt":"La siguiente tabla está pegada desde la celda A1 de la hoja de cálculo (la fila 1 es el encabezado y las filas 2 a 13 son los datos).\nEscribe una sola fórmula que calcule el total anual del producto A (columna B).\n\nReglas\n- La respuesta debe ocupar exactamente una línea. Escribe solo la fórmula, que debe empezar con =\n- No escribas explicaciones ni el resultado del cálculo\n\n---- tabla desde aquí ----\nMes,Producto A (vaso térmico),Producto B (bolsa ecológica),Producto C (toalla refrescante),Producto D (lonchera),Producto E (botella térmica),Total\n2025-01,9400,13600,10200,14100,5200,52500\n2025-02,9400,12800,11100,14400,5200,52900\n2025-03,10300,10200,12600,14600,7900,55600\n2025-04,9400,7600,10700,14800,11800,54300\n2025-05,9400,6000,10500,15100,17000,58000\n2025-06,9400,4200,10000,15300,23600,62500\n2025-07,9400,3400,9800,15600,31400,69600\n2025-08,9400,3400,9100,15800,34100,71800\n2025-09,9400,5100,10200,16000,22300,63000\n2025-10,9400,8500,9000,16300,10500,53700\n2025-11,9400,11900,8200,16500,6600,52600\n2025-12,10300,14400,9700,16700,5200,56300\n---- tabla hasta aquí ----","scorer":"formula_run","answer_key":"(Corrección automática formula_run) Se calcula realmente la fórmula obtenida y se comprueba si coincide con el total anual del producto A = 114600","materials":["/data/research/bench/suushiki-2026-10-08/materials/uriage.csv"],"per_ai":[{"ai":"ChatGPT","trials":[{"n":1,"ok":true,"outcome":"scored","seconds":14.199999999999999289457264239899814128875732421875,"chars":12,"why":"Fórmula ejecutada =SUM(B2:B13): total anual del producto A correcto (resultado de la fórmula 114600.0, respuesta correcta 114600.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t1_chatgpt_1.txt","shot":"/data/research/bench/suushiki-2026-10-08/shots/chatgpt_01_t1.png"},{"n":2,"ok":true,"outcome":"scored","seconds":14.300000000000000710542735760100185871124267578125,"chars":12,"why":"Fórmula ejecutada =SUM(B2:B13): total anual del producto A correcto (resultado de la fórmula 114600.0, respuesta correcta 114600.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t1_chatgpt_2.txt","shot":null},{"n":3,"ok":true,"outcome":"scored","seconds":14.0999999999999996447286321199499070644378662109375,"chars":12,"why":"Fórmula ejecutada =SUM(B2:B13): total anual del producto A correcto (resultado de la fórmula 114600.0, respuesta correcta 114600.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t1_chatgpt_3.txt","shot":null}]},{"ai":"Gemini","trials":[{"n":1,"ok":true,"outcome":"scored","seconds":19.10000000000000142108547152020037174224853515625,"chars":12,"why":"Fórmula ejecutada =SUM(B2:B13): total anual del producto A correcto (resultado de la fórmula 114600.0, respuesta correcta 114600.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t1_gemini_1.txt","shot":"/data/research/bench/suushiki-2026-10-08/shots/gemini_01_t1.png"},{"n":2,"ok":true,"outcome":"scored","seconds":19.60000000000000142108547152020037174224853515625,"chars":12,"why":"Fórmula ejecutada =SUM(B2:B13): total anual del producto A correcto (resultado de la fórmula 114600.0, respuesta correcta 114600.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t1_gemini_2.txt","shot":null},{"n":3,"ok":true,"outcome":"scored","seconds":19,"chars":12,"why":"Fórmula ejecutada =SUM(B2:B13): total anual del producto A correcto (resultado de la fórmula 114600.0, respuesta correcta 114600.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t1_gemini_3.txt","shot":null}]},{"ai":"Claude","trials":[{"n":1,"ok":true,"outcome":"scored","seconds":13.800000000000000710542735760100185871124267578125,"chars":54,"why":"Fórmula ejecutada =SUM(B2:B13): total anual del producto A correcto (resultado de la fórmula 114600.0, respuesta correcta 114600.0)","instruction_follow":false,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t1_claude_1.txt","shot":"/data/research/bench/suushiki-2026-10-08/shots/claude_01_t1.png"},{"n":2,"ok":true,"outcome":"scored","seconds":13.800000000000000710542735760100185871124267578125,"chars":54,"why":"Fórmula ejecutada =SUM(B2:B13): total anual del producto A correcto (resultado de la fórmula 114600.0, respuesta correcta 114600.0)","instruction_follow":false,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t1_claude_2.txt","shot":null},{"n":3,"ok":true,"outcome":"scored","seconds":14,"chars":54,"why":"Fórmula ejecutada =SUM(B2:B13): total anual del producto A correcto (resultado de la fórmula 114600.0, respuesta correcta 114600.0)","instruction_follow":false,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t1_claude_3.txt","shot":null}]},{"ai":"Copilot","trials":[{"n":1,"ok":true,"outcome":"scored","seconds":17.10000000000000142108547152020037174224853515625,"chars":12,"why":"Fórmula ejecutada =SUM(B2:B13): total anual del producto A correcto (resultado de la fórmula 114600.0, respuesta correcta 114600.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t1_copilot_1.txt","shot":null},{"n":2,"ok":true,"outcome":"scored","seconds":13.9000000000000003552713678800500929355621337890625,"chars":12,"why":"Fórmula ejecutada =SUM(B2:B13): total anual del producto A correcto (resultado de la fórmula 114600.0, respuesta correcta 114600.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t1_copilot_2.txt","shot":null},{"n":3,"ok":true,"outcome":"scored","seconds":17,"chars":12,"why":"Fórmula ejecutada =SUM(B2:B13): total anual del producto A correcto (resultado de la fórmula 114600.0, respuesta correcta 114600.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t1_copilot_3.txt","shot":null}]}]},{"task_id":"t2","level":"易","prompt":"La siguiente tabla está pegada desde la celda A1 de la hoja de cálculo (la fila 1 es el encabezado, las filas 2 a 13 son los datos y la columna G es el total mensual).\nEscribe una sola fórmula que calcule el total general de ventas de todo el año.\n\nReglas\n- La respuesta debe ocupar exactamente una línea. Escribe solo la fórmula, que debe empezar con =\n- No escribas explicaciones ni el resultado del cálculo\n\n---- tabla desde aquí ----\nMes,Producto A (vaso térmico),Producto B (bolsa ecológica),Producto C (toalla refrescante),Producto D (lonchera),Producto E (botella térmica),Total\n2025-01,9400,13600,10200,14100,5200,52500\n2025-02,9400,12800,11100,14400,5200,52900\n2025-03,10300,10200,12600,14600,7900,55600\n2025-04,9400,7600,10700,14800,11800,54300\n2025-05,9400,6000,10500,15100,17000,58000\n2025-06,9400,4200,10000,15300,23600,62500\n2025-07,9400,3400,9800,15600,31400,69600\n2025-08,9400,3400,9100,15800,34100,71800\n2025-09,9400,5100,10200,16000,22300,63000\n2025-10,9400,8500,9000,16300,10500,53700\n2025-11,9400,11900,8200,16500,6600,52600\n2025-12,10300,14400,9700,16700,5200,56300\n---- tabla hasta aquí ----","scorer":"formula_run","answer_key":"(Corrección automática formula_run) Se calcula realmente la fórmula obtenida y se comprueba si coincide con el total anual = 702800","materials":["/data/research/bench/suushiki-2026-10-08/materials/uriage.csv"],"per_ai":[{"ai":"ChatGPT","trials":[{"n":1,"ok":true,"outcome":"scored","seconds":14.699999999999999289457264239899814128875732421875,"chars":12,"why":"Fórmula ejecutada =SUM(G2:G13): total anual correcto (resultado de la fórmula 702800.0, respuesta correcta 702800.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t2_chatgpt_1.txt","shot":"/data/research/bench/suushiki-2026-10-08/shots/chatgpt_02_t2.png"},{"n":2,"ok":true,"outcome":"scored","seconds":14.199999999999999289457264239899814128875732421875,"chars":12,"why":"Fórmula ejecutada =SUM(G2:G13): total anual correcto (resultado de la fórmula 702800.0, respuesta correcta 702800.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t2_chatgpt_2.txt","shot":null},{"n":3,"ok":true,"outcome":"scored","seconds":14.199999999999999289457264239899814128875732421875,"chars":12,"why":"Fórmula ejecutada =SUM(G2:G13): total anual correcto (resultado de la fórmula 702800.0, respuesta correcta 702800.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t2_chatgpt_3.txt","shot":null}]},{"ai":"Gemini","trials":[{"n":1,"ok":true,"outcome":"scored","seconds":19.300000000000000710542735760100185871124267578125,"chars":12,"why":"Fórmula ejecutada =SUM(G2:G13): total anual correcto (resultado de la fórmula 702800.0, respuesta correcta 702800.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t2_gemini_1.txt","shot":"/data/research/bench/suushiki-2026-10-08/shots/gemini_02_t2.png"},{"n":2,"ok":true,"outcome":"scored","seconds":19.10000000000000142108547152020037174224853515625,"chars":12,"why":"Fórmula ejecutada =SUM(G2:G13): total anual correcto (resultado de la fórmula 702800.0, respuesta correcta 702800.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t2_gemini_2.txt","shot":null},{"n":3,"ok":true,"outcome":"scored","seconds":19,"chars":12,"why":"Fórmula ejecutada =SUM(G2:G13): total anual correcto (resultado de la fórmula 702800.0, respuesta correcta 702800.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t2_gemini_3.txt","shot":null}]},{"ai":"Claude","trials":[{"n":1,"ok":true,"outcome":"scored","seconds":14,"chars":54,"why":"Fórmula ejecutada =SUM(G2:G13): total anual correcto (resultado de la fórmula 702800.0, respuesta correcta 702800.0)","instruction_follow":false,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t2_claude_1.txt","shot":"/data/research/bench/suushiki-2026-10-08/shots/claude_02_t2.png"},{"n":2,"ok":true,"outcome":"scored","seconds":13.800000000000000710542735760100185871124267578125,"chars":54,"why":"Fórmula ejecutada =SUM(G2:G13): total anual correcto (resultado de la fórmula 702800.0, respuesta correcta 702800.0)","instruction_follow":false,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t2_claude_2.txt","shot":null},{"n":3,"ok":true,"outcome":"scored","seconds":13.9000000000000003552713678800500929355621337890625,"chars":54,"why":"Fórmula ejecutada =SUM(G2:G13): total anual correcto (resultado de la fórmula 702800.0, respuesta correcta 702800.0)","instruction_follow":false,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t2_claude_3.txt","shot":null}]},{"ai":"Copilot","trials":[{"n":1,"ok":true,"outcome":"scored","seconds":14.0999999999999996447286321199499070644378662109375,"chars":12,"why":"Fórmula ejecutada =SUM(G2:G13): total anual correcto (resultado de la fórmula 702800.0, respuesta correcta 702800.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t2_copilot_1.txt","shot":"/data/research/bench/suushiki-2026-10-08/shots/copilot_02_t2.png"},{"n":2,"ok":true,"outcome":"scored","seconds":14.0999999999999996447286321199499070644378662109375,"chars":12,"why":"Fórmula ejecutada =SUM(G2:G13): total anual correcto (resultado de la fórmula 702800.0, respuesta correcta 702800.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t2_copilot_2.txt","shot":null},{"n":3,"ok":true,"outcome":"scored","seconds":26.199999999999999289457264239899814128875732421875,"chars":12,"why":"Fórmula ejecutada =SUM(G2:G13): total anual correcto (resultado de la fórmula 702800.0, respuesta correcta 702800.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t2_copilot_3.txt","shot":null}]}]},{"task_id":"t3","level":"中","prompt":"La siguiente tabla está pegada desde la celda A1 de la hoja de cálculo (la columna G es el total mensual).\nEscribe una sola fórmula que calcule el promedio de los totales mensuales (de los 12 meses).\n\nReglas\n- La respuesta debe ocupar exactamente una línea. Escribe solo la fórmula, que debe empezar con =\n- No escribas explicaciones ni el resultado del cálculo\n\n---- tabla desde aquí ----\nMes,Producto A (vaso térmico),Producto B (bolsa ecológica),Producto C (toalla refrescante),Producto D (lonchera),Producto E (botella térmica),Total\n2025-01,9400,13600,10200,14100,5200,52500\n2025-02,9400,12800,11100,14400,5200,52900\n2025-03,10300,10200,12600,14600,7900,55600\n2025-04,9400,7600,10700,14800,11800,54300\n2025-05,9400,6000,10500,15100,17000,58000\n2025-06,9400,4200,10000,15300,23600,62500\n2025-07,9400,3400,9800,15600,31400,69600\n2025-08,9400,3400,9100,15800,34100,71800\n2025-09,9400,5100,10200,16000,22300,63000\n2025-10,9400,8500,9000,16300,10500,53700\n2025-11,9400,11900,8200,16500,6600,52600\n2025-12,10300,14400,9700,16700,5200,56300\n---- tabla hasta aquí ----","scorer":"formula_run","answer_key":"(Corrección automática formula_run) Se calcula realmente la fórmula obtenida y se comprueba si coincide con el promedio de los totales mensuales = 58566.7","materials":["/data/research/bench/suushiki-2026-10-08/materials/uriage.csv"],"per_ai":[{"ai":"ChatGPT","trials":[{"n":1,"ok":true,"outcome":"scored","seconds":20.39999999999999857891452847979962825775146484375,"chars":16,"why":"Fórmula ejecutada =AVERAGE(G2:G13): promedio de los totales mensuales correcto (resultado de la fórmula 58566.666666666664, respuesta correcta 58566.7)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t3_chatgpt_1.txt","shot":"/data/research/bench/suushiki-2026-10-08/shots/chatgpt_03_t3.png"},{"n":2,"ok":true,"outcome":"scored","seconds":14.4000000000000003552713678800500929355621337890625,"chars":16,"why":"Fórmula ejecutada =AVERAGE(G2:G13): promedio de los totales mensuales correcto (resultado de la fórmula 58566.666666666664, respuesta correcta 58566.7)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t3_chatgpt_2.txt","shot":null},{"n":3,"ok":true,"outcome":"scored","seconds":14,"chars":16,"why":"Fórmula ejecutada =AVERAGE(G2:G13): promedio de los totales mensuales correcto (resultado de la fórmula 58566.666666666664, respuesta correcta 58566.7)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t3_chatgpt_3.txt","shot":null}]},{"ai":"Gemini","trials":[{"n":1,"ok":true,"outcome":"scored","seconds":19,"chars":16,"why":"Fórmula ejecutada =AVERAGE(G2:G13): promedio de los totales mensuales correcto (resultado de la fórmula 58566.666666666664, respuesta correcta 58566.7)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t3_gemini_1.txt","shot":"/data/research/bench/suushiki-2026-10-08/shots/gemini_03_t3.png"},{"n":2,"ok":true,"outcome":"scored","seconds":19.199999999999999289457264239899814128875732421875,"chars":16,"why":"Fórmula ejecutada =AVERAGE(G2:G13): promedio de los totales mensuales correcto (resultado de la fórmula 58566.666666666664, respuesta correcta 58566.7)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t3_gemini_2.txt","shot":null},{"n":3,"ok":true,"outcome":"scored","seconds":19,"chars":16,"why":"Fórmula ejecutada =AVERAGE(G2:G13): promedio de los totales mensuales correcto (resultado de la fórmula 58566.666666666664, respuesta correcta 58566.7)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t3_gemini_3.txt","shot":null}]},{"ai":"Claude","trials":[{"n":1,"ok":true,"outcome":"scored","seconds":14.0999999999999996447286321199499070644378662109375,"chars":62,"why":"Fórmula ejecutada =AVERAGE(G2:G13): promedio de los totales mensuales correcto (resultado de la fórmula 58566.666666666664, respuesta correcta 58566.7)","instruction_follow":false,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t3_claude_1.txt","shot":"/data/research/bench/suushiki-2026-10-08/shots/claude_03_t3.png"},{"n":2,"ok":true,"outcome":"scored","seconds":13.9000000000000003552713678800500929355621337890625,"chars":62,"why":"Fórmula ejecutada =AVERAGE(G2:G13): promedio de los totales mensuales correcto (resultado de la fórmula 58566.666666666664, respuesta correcta 58566.7)","instruction_follow":false,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t3_claude_2.txt","shot":null},{"n":3,"ok":true,"outcome":"scored","seconds":13.9000000000000003552713678800500929355621337890625,"chars":62,"why":"Fórmula ejecutada =AVERAGE(G2:G13): promedio de los totales mensuales correcto (resultado de la fórmula 58566.666666666664, respuesta correcta 58566.7)","instruction_follow":false,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t3_claude_3.txt","shot":null}]},{"ai":"Copilot","trials":[{"n":1,"ok":true,"outcome":"scored","seconds":14,"chars":16,"why":"Fórmula ejecutada =AVERAGE(G2:G13): promedio de los totales mensuales correcto (resultado de la fórmula 58566.666666666664, respuesta correcta 58566.7)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t3_copilot_1.txt","shot":null},{"n":2,"ok":true,"outcome":"scored","seconds":14,"chars":16,"why":"Fórmula ejecutada =AVERAGE(G2:G13): promedio de los totales mensuales correcto (resultado de la fórmula 58566.666666666664, respuesta correcta 58566.7)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t3_copilot_2.txt","shot":null},{"n":3,"ok":true,"outcome":"scored","seconds":13.9000000000000003552713678800500929355621337890625,"chars":16,"why":"Fórmula ejecutada =AVERAGE(G2:G13): promedio de los totales mensuales correcto (resultado de la fórmula 58566.666666666664, respuesta correcta 58566.7)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t3_copilot_3.txt","shot":null}]}]},{"task_id":"t4","level":"中","prompt":"La siguiente tabla está pegada desde la celda A1 de la hoja de cálculo (la columna G es el total mensual).\nEscribe una sola fórmula que calcule el valor más alto entre los totales mensuales.\n\nReglas\n- La respuesta debe ocupar exactamente una línea. Escribe solo la fórmula, que debe empezar con =\n- No escribas explicaciones ni el resultado del cálculo\n\n---- tabla desde aquí ----\nMes,Producto A (vaso térmico),Producto B (bolsa ecológica),Producto C (toalla refrescante),Producto D (lonchera),Producto E (botella térmica),Total\n2025-01,9400,13600,10200,14100,5200,52500\n2025-02,9400,12800,11100,14400,5200,52900\n2025-03,10300,10200,12600,14600,7900,55600\n2025-04,9400,7600,10700,14800,11800,54300\n2025-05,9400,6000,10500,15100,17000,58000\n2025-06,9400,4200,10000,15300,23600,62500\n2025-07,9400,3400,9800,15600,31400,69600\n2025-08,9400,3400,9100,15800,34100,71800\n2025-09,9400,5100,10200,16000,22300,63000\n2025-10,9400,8500,9000,16300,10500,53700\n2025-11,9400,11900,8200,16500,6600,52600\n2025-12,10300,14400,9700,16700,5200,56300\n---- tabla hasta aquí ----","scorer":"formula_run","answer_key":"(Corrección automática formula_run) Se calcula realmente la fórmula obtenida y se comprueba si coincide con el total mensual más alto = 71800","materials":["/data/research/bench/suushiki-2026-10-08/materials/uriage.csv"],"per_ai":[{"ai":"ChatGPT","trials":[{"n":1,"ok":true,"outcome":"scored","seconds":17.199999999999999289457264239899814128875732421875,"chars":12,"why":"Fórmula ejecutada =MAX(G2:G13): total mensual más alto correcto (resultado de la fórmula 71800.0, respuesta correcta 71800.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t4_chatgpt_1.txt","shot":"/data/research/bench/suushiki-2026-10-08/shots/chatgpt_04_t4.png"},{"n":2,"ok":true,"outcome":"scored","seconds":14.199999999999999289457264239899814128875732421875,"chars":12,"why":"Fórmula ejecutada =MAX(G2:G13): total mensual más alto correcto (resultado de la fórmula 71800.0, respuesta correcta 71800.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t4_chatgpt_2.txt","shot":null},{"n":3,"ok":true,"outcome":"scored","seconds":14.0999999999999996447286321199499070644378662109375,"chars":12,"why":"Fórmula ejecutada =MAX(G2:G13): total mensual más alto correcto (resultado de la fórmula 71800.0, respuesta correcta 71800.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t4_chatgpt_3.txt","shot":null}]},{"ai":"Gemini","trials":[{"n":1,"ok":true,"outcome":"scored","seconds":19.10000000000000142108547152020037174224853515625,"chars":12,"why":"Fórmula ejecutada =MAX(G2:G13): total mensual más alto correcto (resultado de la fórmula 71800.0, respuesta correcta 71800.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t4_gemini_1.txt","shot":"/data/research/bench/suushiki-2026-10-08/shots/gemini_04_t4.png"},{"n":2,"ok":true,"outcome":"scored","seconds":19,"chars":12,"why":"Fórmula ejecutada =MAX(G2:G13): total mensual más alto correcto (resultado de la fórmula 71800.0, respuesta correcta 71800.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t4_gemini_2.txt","shot":null},{"n":3,"ok":true,"outcome":"scored","seconds":19,"chars":12,"why":"Fórmula ejecutada =MAX(G2:G13): total mensual más alto correcto (resultado de la fórmula 71800.0, respuesta correcta 71800.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t4_gemini_3.txt","shot":null}]},{"ai":"Claude","trials":[{"n":1,"ok":true,"outcome":"scored","seconds":14.199999999999999289457264239899814128875732421875,"chars":54,"why":"Fórmula ejecutada =MAX(G2:G13): total mensual más alto correcto (resultado de la fórmula 71800.0, respuesta correcta 71800.0)","instruction_follow":false,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t4_claude_1.txt","shot":"/data/research/bench/suushiki-2026-10-08/shots/claude_04_t4.png"},{"n":2,"ok":true,"outcome":"scored","seconds":13.9000000000000003552713678800500929355621337890625,"chars":54,"why":"Fórmula ejecutada =MAX(G2:G13): total mensual más alto correcto (resultado de la fórmula 71800.0, respuesta correcta 71800.0)","instruction_follow":false,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t4_claude_2.txt","shot":null},{"n":3,"ok":true,"outcome":"scored","seconds":13.9000000000000003552713678800500929355621337890625,"chars":54,"why":"Fórmula ejecutada =MAX(G2:G13): total mensual más alto correcto (resultado de la fórmula 71800.0, respuesta correcta 71800.0)","instruction_follow":false,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t4_claude_3.txt","shot":null}]},{"ai":"Copilot","trials":[{"n":1,"ok":true,"outcome":"scored","seconds":13.9000000000000003552713678800500929355621337890625,"chars":12,"why":"Fórmula ejecutada =MAX(G2:G13): total mensual más alto correcto (resultado de la fórmula 71800.0, respuesta correcta 71800.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t4_copilot_1.txt","shot":null},{"n":2,"ok":true,"outcome":"scored","seconds":14.0999999999999996447286321199499070644378662109375,"chars":12,"why":"Fórmula ejecutada =MAX(G2:G13): total mensual más alto correcto (resultado de la fórmula 71800.0, respuesta correcta 71800.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t4_copilot_2.txt","shot":null},{"n":3,"ok":true,"outcome":"scored","seconds":13.9000000000000003552713678800500929355621337890625,"chars":12,"why":"Fórmula ejecutada =MAX(G2:G13): total mensual más alto correcto (resultado de la fórmula 71800.0, respuesta correcta 71800.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t4_copilot_3.txt","shot":null}]}]},{"task_id":"t5","level":"難","prompt":"La siguiente tabla está pegada desde la celda A1 de la hoja de cálculo (la fila 2 es enero, la fila 13 es diciembre y la columna G es el total mensual).\nEscribe una sola fórmula que calcule el total del primer semestre (de enero a junio).\n\nReglas\n- La respuesta debe ocupar exactamente una línea. Escribe solo la fórmula, que debe empezar con =\n- No escribas explicaciones ni el resultado del cálculo\n\n---- tabla desde aquí ----\nMes,Producto A (vaso térmico),Producto B (bolsa ecológica),Producto C (toalla refrescante),Producto D (caja de almuerzo),Producto E (botella térmica),Total\n2025-01,9400,13600,10200,14100,5200,52500\n2025-02,9400,12800,11100,14400,5200,52900\n2025-03,10300,10200,12600,14600,7900,55600\n2025-04,9400,7600,10700,14800,11800,54300\n2025-05,9400,6000,10500,15100,17000,58000\n2025-06,9400,4200,10000,15300,23600,62500\n2025-07,9400,3400,9800,15600,31400,69600\n2025-08,9400,3400,9100,15800,34100,71800\n2025-09,9400,5100,10200,16000,22300,63000\n2025-10,9400,8500,9000,16300,10500,53700\n2025-11,9400,11900,8200,16500,6600,52600\n2025-12,10300,14400,9700,16700,5200,56300\n---- tabla hasta aquí ----","scorer":"formula_run","answer_key":"(Corrección automática, formula_run) Se calcula realmente la fórmula obtenida y se comprueba si coincide con el total del primer semestre = 335800","materials":["/data/research/bench/suushiki-2026-10-08/materials/uriage.csv"],"per_ai":[{"ai":"ChatGPT","trials":[{"n":1,"ok":true,"outcome":"scored","seconds":14.0999999999999996447286321199499070644378662109375,"chars":11,"why":"Se ejecuta la fórmula =SUM(G2:G7): total del primer semestre correcto (resultado de la fórmula 335800.0, respuesta correcta 335800.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t5_chatgpt_1.txt","shot":"/data/research/bench/suushiki-2026-10-08/shots/chatgpt_05_t5.png"},{"n":2,"ok":true,"outcome":"scored","seconds":17.39999999999999857891452847979962825775146484375,"chars":11,"why":"Se ejecuta la fórmula =SUM(G2:G7): total del primer semestre correcto (resultado de la fórmula 335800.0, respuesta correcta 335800.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t5_chatgpt_2.txt","shot":null},{"n":3,"ok":true,"outcome":"scored","seconds":14.199999999999999289457264239899814128875732421875,"chars":11,"why":"Se ejecuta la fórmula =SUM(G2:G7): total del primer semestre correcto (resultado de la fórmula 335800.0, respuesta correcta 335800.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t5_chatgpt_3.txt","shot":null}]},{"ai":"Gemini","trials":[{"n":1,"ok":true,"outcome":"scored","seconds":19.39999999999999857891452847979962825775146484375,"chars":11,"why":"Se ejecuta la fórmula =SUM(G2:G7): total del primer semestre correcto (resultado de la fórmula 335800.0, respuesta correcta 335800.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t5_gemini_1.txt","shot":"/data/research/bench/suushiki-2026-10-08/shots/gemini_05_t5.png"},{"n":2,"ok":true,"outcome":"scored","seconds":19,"chars":11,"why":"Se ejecuta la fórmula =SUM(G2:G7): total del primer semestre correcto (resultado de la fórmula 335800.0, respuesta correcta 335800.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t5_gemini_2.txt","shot":null},{"n":3,"ok":true,"outcome":"scored","seconds":19,"chars":11,"why":"Se ejecuta la fórmula =SUM(G2:G7): total del primer semestre correcto (resultado de la fórmula 335800.0, respuesta correcta 335800.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t5_gemini_3.txt","shot":null}]},{"ai":"Claude","trials":[{"n":1,"ok":true,"outcome":"scored","seconds":13.800000000000000710542735760100185871124267578125,"chars":52,"why":"Se ejecuta la fórmula =SUM(G2:G7): total del primer semestre correcto (resultado de la fórmula 335800.0, respuesta correcta 335800.0)","instruction_follow":false,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t5_claude_1.txt","shot":"/data/research/bench/suushiki-2026-10-08/shots/claude_05_t5.png"},{"n":2,"ok":true,"outcome":"scored","seconds":14,"chars":84,"why":"Se ejecuta la fórmula =SUM(G2:G7): total del primer semestre correcto (resultado de la fórmula 335800.0, respuesta correcta 335800.0)","instruction_follow":false,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t5_claude_2.txt","shot":null},{"n":3,"ok":true,"outcome":"scored","seconds":13.9000000000000003552713678800500929355621337890625,"chars":52,"why":"Se ejecuta la fórmula =SUM(G2:G7): total del primer semestre correcto (resultado de la fórmula 335800.0, respuesta correcta 335800.0)","instruction_follow":false,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t5_claude_3.txt","shot":null}]},{"ai":"Copilot","trials":[{"n":1,"ok":false,"outcome":"scored","seconds":17.10000000000000142108547152020037174224853515625,"chars":241,"why":"No hay ninguna fórmula (que empiece con =) en la respuesta","instruction_follow":false,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t5_copilot_1.txt","shot":null},{"n":2,"ok":true,"outcome":"scored","seconds":13.9000000000000003552713678800500929355621337890625,"chars":11,"why":"Se ejecuta la fórmula =SUM(G2:G7): total del primer semestre correcto (resultado de la fórmula 335800.0, respuesta correcta 335800.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t5_copilot_2.txt","shot":null},{"n":3,"ok":true,"outcome":"scored","seconds":13.9000000000000003552713678800500929355621337890625,"chars":11,"why":"Se ejecuta la fórmula =SUM(G2:G7): total del primer semestre correcto (resultado de la fórmula 335800.0, respuesta correcta 335800.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t5_copilot_3.txt","shot":null}]}]},{"task_id":"t6","level":"難","prompt":"La siguiente tabla está pegada desde la celda A1 de la hoja de cálculo (la fila 2 es enero, la fila 13 es diciembre, la columna D es el producto C).\nEscribe una sola fórmula que calcule el total del producto C en el primer semestre (de enero a junio).\n\nReglas\n- La respuesta debe ser exactamente una línea. Escribe solo la fórmula, que debe empezar con =\n- No escribas explicaciones ni el resultado del cálculo\n\n---- Tabla, inicio ----\nMes,Producto A (vaso térmico),Producto B (bolsa ecológica),Producto C (toalla refrescante),Producto D (caja de almuerzo),Producto E (botella térmica),Total\n2025-01,9400,13600,10200,14100,5200,52500\n2025-02,9400,12800,11100,14400,5200,52900\n2025-03,10300,10200,12600,14600,7900,55600\n2025-04,9400,7600,10700,14800,11800,54300\n2025-05,9400,6000,10500,15100,17000,58000\n2025-06,9400,4200,10000,15300,23600,62500\n2025-07,9400,3400,9800,15600,31400,69600\n2025-08,9400,3400,9100,15800,34100,71800\n2025-09,9400,5100,10200,16000,22300,63000\n2025-10,9400,8500,9000,16300,10500,53700\n2025-11,9400,11900,8200,16500,6600,52600\n2025-12,10300,14400,9700,16700,5200,56300\n---- Tabla, fin ----","scorer":"formula_run","answer_key":"(Corrección automática, formula_run) Se calcula realmente la fórmula obtenida y se comprueba si coincide con el total del producto C en el primer semestre = 65100","materials":["/data/research/bench/suushiki-2026-10-08/materials/uriage.csv"],"per_ai":[{"ai":"ChatGPT","trials":[{"n":1,"ok":true,"outcome":"scored","seconds":16.39999999999999857891452847979962825775146484375,"chars":11,"why":"Se ejecuta la fórmula =SUM(D2:D7): total del producto C en el primer semestre correcto (resultado de la fórmula 65100.0, respuesta correcta 65100.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t6_chatgpt_1.txt","shot":"/data/research/bench/suushiki-2026-10-08/shots/chatgpt_06_t6.png"},{"n":2,"ok":true,"outcome":"scored","seconds":14.0999999999999996447286321199499070644378662109375,"chars":11,"why":"Se ejecuta la fórmula =SUM(D2:D7): total del producto C en el primer semestre correcto (resultado de la fórmula 65100.0, respuesta correcta 65100.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t6_chatgpt_2.txt","shot":null},{"n":3,"ok":true,"outcome":"scored","seconds":14,"chars":11,"why":"Se ejecuta la fórmula =SUM(D2:D7): total del producto C en el primer semestre correcto (resultado de la fórmula 65100.0, respuesta correcta 65100.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t6_chatgpt_3.txt","shot":null}]},{"ai":"Gemini","trials":[{"n":1,"ok":true,"outcome":"scored","seconds":19.39999999999999857891452847979962825775146484375,"chars":11,"why":"Se ejecuta la fórmula =SUM(D2:D7): total del producto C en el primer semestre correcto (resultado de la fórmula 65100.0, respuesta correcta 65100.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t6_gemini_1.txt","shot":"/data/research/bench/suushiki-2026-10-08/shots/gemini_06_t6.png"},{"n":2,"ok":true,"outcome":"scored","seconds":19,"chars":11,"why":"Se ejecuta la fórmula =SUM(D2:D7): total del producto C en el primer semestre correcto (resultado de la fórmula 65100.0, respuesta correcta 65100.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t6_gemini_2.txt","shot":null},{"n":3,"ok":true,"outcome":"scored","seconds":19.10000000000000142108547152020037174224853515625,"chars":11,"why":"Se ejecuta la fórmula =SUM(D2:D7): total del producto C en el primer semestre correcto (resultado de la fórmula 65100.0, respuesta correcta 65100.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t6_gemini_3.txt","shot":null}]},{"ai":"Claude","trials":[{"n":1,"ok":true,"outcome":"scored","seconds":16.5,"chars":52,"why":"Se ejecuta la fórmula =SUM(D2:D7): total del producto C en el primer semestre correcto (resultado de la fórmula 65100.0, respuesta correcta 65100.0)","instruction_follow":false,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t6_claude_1.txt","shot":"/data/research/bench/suushiki-2026-10-08/shots/claude_06_t6.png"},{"n":2,"ok":true,"outcome":"scored","seconds":13.800000000000000710542735760100185871124267578125,"chars":52,"why":"Se ejecuta la fórmula =SUM(D2:D7): total del producto C en el primer semestre correcto (resultado de la fórmula 65100.0, respuesta correcta 65100.0)","instruction_follow":false,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t6_claude_2.txt","shot":null},{"n":3,"ok":true,"outcome":"scored","seconds":13.9000000000000003552713678800500929355621337890625,"chars":52,"why":"Se ejecuta la fórmula =SUM(D2:D7): total del producto C en el primer semestre correcto (resultado de la fórmula 65100.0, respuesta correcta 65100.0)","instruction_follow":false,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t6_claude_3.txt","shot":null}]},{"ai":"Copilot","trials":[{"n":1,"ok":true,"outcome":"scored","seconds":20.60000000000000142108547152020037174224853515625,"chars":11,"why":"Se ejecuta la fórmula =SUM(D2:D7): total del producto C en el primer semestre correcto (resultado de la fórmula 65100.0, respuesta correcta 65100.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t6_copilot_1.txt","shot":null},{"n":2,"ok":true,"outcome":"scored","seconds":14,"chars":11,"why":"Se ejecuta la fórmula =SUM(D2:D7): total del producto C en el primer semestre correcto (resultado de la fórmula 65100.0, respuesta correcta 65100.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t6_copilot_2.txt","shot":null},{"n":3,"ok":true,"outcome":"scored","seconds":16.89999999999999857891452847979962825775146484375,"chars":11,"why":"Se ejecuta la fórmula =SUM(D2:D7): total del producto C en el primer semestre correcto (resultado de la fórmula 65100.0, respuesta correcta 65100.0)","instruction_follow":true,"answer_url":"/data/research/bench/suushiki-2026-10-08/answers/t6_copilot_3.txt","shot":null}]}]}],"limits":["Se trata de una medición realizada una vez al día. El orden puede cambiar según el día o la tarea","El plan corresponde a la versión de pago de cada IA (ChatGPT Pro, Google AI Pro, Claude Max, Microsoft 365 Personal). No son resultados de la versión gratuita","La medición se realizó solo con el modelo y el modo predeterminados (no se usaron funciones como Deep Research)","Las tareas usan datos creados por nosotros para la empresa ficticia Sample Shoji Co., Ltd. No son resultados con datos de una empresa real","Solo se incluyen tareas que se pueden calificar de forma automática. No se mide la calidad ni la legibilidad del texto","La medición se realizó desde la misma pantalla del navegador que usan las personas. No son resultados de la API","En las rondas en las que una IA no permite leer el nombre del modelo que aparece en la pantalla, ese campo se deja vacío (null). En las rondas en las que sí se pudo leer, se muestra tal cual"],"license":"CC BY 4.0","attribution":"Como fuente, escribe AInformation junto con la URL de la página utilizada y la fecha de medición.","page_url":"https://ainformation.jp/research/bench/suushiki-2026-10-08"}