<div dir="ltr"><h3 style="margin-bottom:3px;font-family:Tahoma,Verdana,Arial,Helvetica,sans-serif;font-size:14px;line-height:18px;color:rgb(94,94,94)"><a name="ss05" style="color:rgb(102,153,204)">AAAI Spring Symposium Series - Palo Alto, CA</a></h3><h3 style="margin-bottom:3px;font-family:Tahoma,Verdana,Arial,Helvetica,sans-serif;font-size:14px;line-height:18px;color:rgb(94,94,94)"><a name="ss05" style="color:rgb(102,153,204)">Evaluation and Design of Generalist Systems (EDGeS): Challenges and methods for assessing the new generation of AI </a></h3><p style="margin-top:3px;margin-bottom:1em;text-align:justify;font-family:Tahoma,Verdana,Arial,Helvetica,sans-serif;font-size:12px;line-height:19px;color:rgb(94,94,94)">With the advent of large domain-universal models, we are witnessing a trend towards generalist AI systems, no longer restricted to narrow tasks. Alongside this trend has been a resurgence of research in symbolic AI, to support common sense reasoning, explanation, and learning with limited training data. There are few extant strategies for assessing modern generalist AI systems, symbolic AI systems, or combinations thereof; assessing the next generation of AI will require novel tools, methods, and benchmarks that address both reasoning and generalist systems, individually and combined holistically.</p><h4 style="margin-bottom:3px;font-family:Tahoma,Verdana,Arial,Helvetica,sans-serif;font-size:13px;line-height:18px;color:rgb(94,94,94)">Topics</h4><p style="margin-top:3px;margin-bottom:1em;text-align:justify;font-family:Tahoma,Verdana,Arial,Helvetica,sans-serif;font-size:12px;line-height:19px;color:rgb(94,94,94)">In the interest of fostering discussion of methodologies for understanding and assessing AI in the domains of reasoning and generativity, we are accepting submissions on topics including (<b>not exhaustive)</b>:</p><ul style="margin-top:0px;margin-bottom:1em;text-align:justify;font-family:Tahoma,Verdana,Arial,Helvetica,sans-serif;font-size:12px;line-height:18px;color:rgb(94,94,94)"><li>Novel training protocols for achieving generalist performance in reasoning and generative tasks</li><li>Limitations of current approaches in AI/Machine learning</li><li>Novel methodologies to assess progress on increasingly general AI</li><li>Methods and tools for identification of vulnerabilities in modern reasoning systems</li><li>Quantifiable approaches to assessing ethical robustness of generalist AI systems</li><li>Relevant architectures involving neuro-symbolics, neural network-based foundation models, generative AI, common sense reasoning, statistical and relational AI</li><li>Architecture for systems capable of reasoned self-verification and ethical robustness</li><li>Description of novel systems that combine reasoning with generativity</li></ul><h4 style="margin-bottom:3px;font-family:Tahoma,Verdana,Arial,Helvetica,sans-serif;font-size:13px;line-height:18px;color:rgb(94,94,94)">Format</h4><p style="margin-top:3px;margin-bottom:1em;text-align:justify;font-family:Tahoma,Verdana,Arial,Helvetica,sans-serif;font-size:12px;line-height:19px;color:rgb(94,94,94)">This format of the symposium will include invited talks and contributed paper presentations by leading researchers and technical experts, as well as panel discussions and group breakout sessions focusing on the implementation of competency assessment in real autonomous systems.</p><h4 style="margin-bottom:3px;font-family:Tahoma,Verdana,Arial,Helvetica,sans-serif;font-size:13px;line-height:18px;color:rgb(94,94,94)">Submissions</h4><p style="margin-top:3px;margin-bottom:1em;text-align:justify;font-family:Tahoma,Verdana,Arial,Helvetica,sans-serif;font-size:12px;line-height:19px;color:rgb(94,94,94)">Participants will be invited to submit:</p><ul style="margin-top:0px;margin-bottom:1em;text-align:justify;font-family:Tahoma,Verdana,Arial,Helvetica,sans-serif;font-size:12px;line-height:18px;color:rgb(94,94,94)"><li>Full technical papers (6-8 pages)</li><li>Technical presentation (including abstract < 2 pages and biography of main speaker)</li><li>Position papers (4-6 pages)</li></ul><p style="margin-top:3px;margin-bottom:1em;text-align:justify;font-family:Tahoma,Verdana,Arial,Helvetica,sans-serif;font-size:12px;line-height:19px;color:rgb(94,94,94)">Manuscripts must be submitted as PDFs via EasyChair: <a href="https://easychair.org/conferences/?conf=sss23" style="color:rgb(102,153,204);text-decoration-line:none">https://easychair.org/conferences/?conf=sss23.</a><br>Please align with AAAI format: <a href="https://www.aaai.org/Publications/Templates/AuthorKit22.zip" style="color:rgb(102,153,204);text-decoration-line:none">https://www.aaai.org/Publications/Templates/AuthorKit22.zip.</a></p><h4 style="margin-bottom:3px;font-family:Tahoma,Verdana,Arial,Helvetica,sans-serif;font-size:13px;line-height:18px;color:rgb(94,94,94)">Important dates</h4><ul style="margin-top:0px;margin-bottom:1em;text-align:justify;font-family:Tahoma,Verdana,Arial,Helvetica,sans-serif;font-size:12px;line-height:18px;color:rgb(94,94,94)"><li>Abstract submission: 16th of January 2023</li><li>Notification: 6th of February 2023</li><li>Registration: 27th of February 2023</li><li>Camera-ready submission: 3rd of March 2023</li></ul><h4 style="margin-bottom:3px;font-family:Tahoma,Verdana,Arial,Helvetica,sans-serif;font-size:13px;line-height:18px;color:rgb(94,94,94)">Organizing Committee</h4><ul style="margin-top:0px;margin-bottom:1em;text-align:justify;font-family:Tahoma,Verdana,Arial,Helvetica,sans-serif;font-size:12px;line-height:18px;color:rgb(94,94,94)"><li><b>Joscha Bach, Intel Labs, Committee Co-Chair</b></li><li><b>Amanda Hicks,</b> <b> Johns Hopkins University, Committee Co-Chair</b><br></li><li><b>Tetiana Grinberg,</b> Intel Labs</li><li><b>John Beverley,</b> University at Buffalo</li><li><b>Steven Rogers,</b> Air Force Research Laboratory</li><li><b>Grant Passmore,</b> Imandra</li><li><b>Ramin Hasani,</b> MIT CSAIL</li><li><b>Casey Richardson,</b> S&P Global</li><li><b>Richard Granger,</b> Dartmouth College</li><li><b>Jascha Achterberg,</b> University of Cambridge</li><li><b>Kristinn R. Thórisson,</b> Reykjavik University, IIIM</li><li><b>Luc Steels,</b> Barcelona Supercomputing Center</li><li><b>Yulia Sandamirskaya,</b> Neuromorphic Computing lead, Intel Labs</li></ul><p style="margin-top:3px;margin-bottom:1em;text-align:justify;font-family:Tahoma,Verdana,Arial,Helvetica,sans-serif;font-size:12px;line-height:19px;color:rgb(94,94,94)">For more information: <a href="https://www.cognitive-ai.org/edges-23" style="color:rgb(102,153,204);text-decoration-line:none">https://www.cognitive-ai.org/edges-23</a></p><div><br></div>-- <br><div dir="ltr" class="gmail_signature" data-smartmail="gmail_signature"><div dir="ltr"><div><div dir="ltr"><div dir="ltr"><div dir="ltr">Amanda Hicks, PhD<br>
<span>
<div>Applied Ontologist</div><div>Johns Hopkins University Applied Physics Laboratory</div></span><div dir="ltr"><br></div></div></div></div></div></div></div></div>