I am running ERG parse ranking experiments using the logon framework.&nbsp; I am following the instructions on the LogonModeling wiki page: <a href="http://wiki.delph-in.net/moin/LogonModeling">http://wiki.delph-in.net/moin/LogonModeling</a>.&nbsp; I have been able to run the steps outlined in the &quot;Automating Experiments&quot; section of that page, but I have a few questions that I hope someone with experience with this system can answer.<br>
<ol><li>Can the grid search be run in parallel?&nbsp; I understand that the feature cachine and training steps have to be run in a single process, but it seems like the grid search (the step performed by the grid.lisp) could be run in parallel, with one grid point per computer.&nbsp; I have the parallel computing resources to do this, so if parallelization works in this framework it would be a huge time saver.</li>
<li>Are there scripts to perform scoring?&nbsp; After grid.lisp has completed, it&#39;s not clear to me how to collect accuracy scores or other statistics.&nbsp; Of course I could write code to do this myself by groveling the score and preference files, but it seems like someone would have already written this.</li>
<li>What is the state of the art for ERG parse ranking?&nbsp; What are the learning method, features, the data sets, and the accuracy?&nbsp; Is this documented anywhere on the logon tree?&nbsp; Is there a paper that outlines it?</li></ol>
Thanks.<br><br>-- <br>Bill McNeill<br><a href="http://staff.washington.edu/billmcn/index.shtml">http://staff.washington.edu/billmcn/index.shtml</a><br>