]> mj.ucw.cz Git - eval.git/blob - TODO
Added TODO items after brain-storming with Gavento.
[eval.git] / TODO
1 Evaluator
2 ~~~~~~~~~
3 score: better formatting of the score table
4 interactive tasks: solve deadlocks?
5 interactive tasks: logging of messages
6 terminology: problem -> task ?
7 writing of verdicts to stdout (include timing and check on interactive tasks, including judge errors)
8 box: memory usage statistics (need to search for VMPeak in /proc/$PID/status, but it disappears too early)
9
10 Judges
11 ~~~~~~
12 integrate to the top-level makefile
13 clean up exit codes
14 test cases for judge-shuff
15
16 Environment
17 ~~~~~~~~~~~
18 fpc: add switch -gl (runtime errors write line#), but avoid that when inside the sandbox
19
20 Installer:
21 - mo-install: reduce what gets copied to mo-eval home
22 - update group permissions
23 - quotas
24
25 New submitter:
26 - contest: task status cache
27
28 Various ideas:
29 scores dependent on time (like PL olympiad)
30 box: configurable access to timers and /proc/self/{stat,fd}
31 box: limit the total amount of data written to files, so that quotas don't have to be set up
32
33 TomGav:
34 - hook for translation of exit codes
35 - substitute $VAR without using eval
36 - stderr parsers
37 - {pre,post}{comp,run} hooks
38 - document which hook can be overridden by problem's config
39 - box: add redirection of stderr
40 - VMMax -> getrusage()
41 - clean up names of temporary files
42 - machine-readable log file
43 - split bin
44 - configurable names of in/out files
45 - multiple in files (stored as an archive or directory)
46 - locate-source: arbitrary input file name