<div dir="ltr"><div><div><p class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_9103776001042077600gmail-p1" style="font-variant-numeric:normal;font-variant-east-asian:normal;font-stretch:normal;line-height:normal;margin:0px"><font face="arial, helvetica, sans-serif"><b>When:    </b>  Monday, December 17th at 11:00 am<br></font></p><p class="MsoNormal" style="margin:0in 0in 0.0001pt;line-height:normal;background-image:initial;background-position:initial;background-size:initial;background-repeat:initial;background-origin:initial;background-clip:initial"><font face="arial, helvetica, sans-serif"> </font></p><p class="MsoNormal" style="margin:0in 0in 0.0001pt;line-height:normal;background-image:initial;background-position:initial;background-size:initial;background-repeat:initial;background-origin:initial;background-clip:initial"><font face="arial, helvetica, sans-serif"><b>Where:     </b>TTIC, 6045 S. Kenwood Avenue, 5th Floor, Room 526</font></p><p class="MsoNormal" style="margin:0in 0in 0.0001pt;line-height:normal;background-image:initial;background-position:initial;background-size:initial;background-repeat:initial;background-origin:initial;background-clip:initial"><font face="arial, helvetica, sans-serif"> </font></p><p class="MsoNormal" style="margin:0in 0in 0.0001pt;line-height:normal;background-image:initial;background-position:initial;background-size:initial;background-repeat:initial;background-origin:initial;background-clip:initial"><font face="arial, helvetica, sans-serif"><b>Who:       </b> </font><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-il">Jordan</span> <span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-il">Boyd</span>-Graber, University of Maryland</p></div><div><br></div><div><br></div><b>Title:</b>         Cooperative and Competitive Machine Learning through Question Answering    <br><br></div><div><div><b>Abstract:</b> My research goal is to create machine learning algorithms that are interpretable to humans, that can understand human strengths and weaknesses, and can help humans improve themselves.  In this talk, I'll discuss how we accomplish this through a trivia game called quiz bowl. These questions are written so that they can be interrupted by someone who knows more about the answer (unlike, say, Jeopardy!); that is, harder clues are at the start of the question and easier clues are at the end of the question: a player must decide when it has enough information to "buzz in". Our system determines the right answer, uses deep reinforcement to determine when to buzz, and can beat the best humans at the game.</div><div><br></div><div>More importantly, this setting also helps us build systems to adapt in cooperation and competition with humans.  If we give humans access to the predictions<span style="white-space:pre-wrap"> </span>of our question<span style="white-space:pre-wrap"> </span>answering system, we can craft adversarial that remain natural for humans to answer but very</div><div>challenging for computer.  The game of quiz bowl also allows opportunities to better understand interpretability in deep learning models to *help* human players perform better with machine cooperation.  This cooperation helps us with a related task, simultaneous machine translation.</div><div><br></div><div>Finally, I'll discuss opportunities for broader participation through open human-computer competitions: <a href="http://qanta.org/" target="_blank">http://qanta.org/</a></div><div><br></div><div><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-il"><b>Bio: </b>Jordan</span> <span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-il">Boyd</span>-Graber is an associate professor in the University of Maryland's Computer Science Department, iSchool, UMIACS, and Language Science Center. <span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-il">Jordan</span>'s research focus is in applying machine learning and Bayesian probabilistic models to problems that help us better understand social interaction or the human cognitive process. He and his students have won "best of" awards at UAI (2018), NIPS (2009, 2015), NAACL (2016), and CoNLL (2015), and <span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-il">Jordan</span> won the British Computing Society's 2015 Karen Spärk Jones Award and a 2017 NSF CAREER award. His research has been funded by DARPA, IARPA, NSF, NCSES, ARL, NIH, and Lockheed Martin and has been featured by CNN, Huffington Post, New York Magazine, and the Wall Street Journal.</div></div><div><br></div><div><br></div><div><div><p class="MsoNormal" style="margin-right:0in;margin-left:0in"><font face="arial, helvetica, sans-serif"><b>Host:</b><u style="font-weight:bold"> </u><a href="mailto:kgimpel@ttic.edu" target="_blank">Kevin Gimpel</a></font></p><p class="MsoNormal" style="margin-right:0in;margin-left:0in"><font face="arial, helvetica, sans-serif"><br></font></p><p class="MsoNormal" style="margin-right:0in;margin-left:0in"><font face="arial, helvetica, sans-serif"><span style="font-kerning:none"><br class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-Apple-interchange-newline">For more information on the <span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-m_767208242022040581gmail-m_5118066322451693210gmail-m_3292142122556441362m_4179300188985034065m_8112548636363365103gmail-m_-5864378453105999086gmail-m_-1690647303496242289m_1430452980776983890gmail-m_1031910664862358996gmail-m_8778633083237298896gmail-m_-8347358208690191418gmail-m_6958947101002467454gmail-m_4240741644540508174gmail-m_-7649362550103587767gmail-m_37711595404184628gmail-m_-8366621373355229216gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-m_767208242022040581gmail-m_5118066322451693210gmail-m_3292142122556441362m_4179300188985034065m_8112548636363365103gmail-m_-5864378453105999086gmail-m_-1690647303496242289m_1430452980776983890gmail-m_1031910664862358996gmail-m_8778633083237298896gmail-m_-8347358208690191418gmail-m_6958947101002467454gmail-m_4240741644540508174gmail-m_-7649362550103587767gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-m_767208242022040581gmail-m_5118066322451693210gmail-m_3292142122556441362m_4179300188985034065m_8112548636363365103gmail-m_-5864378453105999086gmail-m_-1690647303496242289m_1430452980776983890gmail-m_1031910664862358996gmail-m_8778633083237298896gmail-m_-8347358208690191418gmail-m_6958947101002467454gmail-m_4240741644540508174gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-m_767208242022040581gmail-m_5118066322451693210gmail-m_3292142122556441362m_4179300188985034065m_8112548636363365103gmail-m_-5864378453105999086gmail-m_-1690647303496242289m_1430452980776983890gmail-m_1031910664862358996gmail-m_8778633083237298896gmail-m_-8347358208690191418gmail-m_6958947101002467454gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-m_767208242022040581gmail-m_5118066322451693210gmail-m_3292142122556441362m_4179300188985034065m_8112548636363365103gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-il">colloquium</span></span></span></span></span></span></span> series or to subscribe to the mailing list,please </span>see <a href="http://www.ttic.edu/colloquium.php" target="_blank">http://www.ttic.edu/<span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-m_767208242022040581gmail-m_5118066322451693210gmail-m_3292142122556441362m_4179300188985034065m_8112548636363365103gmail-m_-5864378453105999086gmail-m_-1690647303496242289m_1430452980776983890gmail-m_1031910664862358996gmail-m_8778633083237298896gmail-m_-8347358208690191418gmail-m_6958947101002467454gmail-m_4240741644540508174gmail-m_-7649362550103587767gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-m_767208242022040581gmail-m_5118066322451693210gmail-m_3292142122556441362m_4179300188985034065m_8112548636363365103gmail-m_-5864378453105999086gmail-m_-1690647303496242289m_1430452980776983890gmail-m_1031910664862358996gmail-m_8778633083237298896gmail-m_-8347358208690191418gmail-m_6958947101002467454gmail-m_4240741644540508174gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-m_767208242022040581gmail-m_5118066322451693210gmail-m_3292142122556441362m_4179300188985034065m_8112548636363365103gmail-m_-5864378453105999086gmail-m_-1690647303496242289m_1430452980776983890gmail-m_1031910664862358996gmail-m_8778633083237298896gmail-m_-8347358208690191418gmail-m_6958947101002467454gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-m_767208242022040581gmail-m_5118066322451693210gmail-m_3292142122556441362m_4179300188985034065m_8112548636363365103gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-il">colloquium</span></span></span></span></span></span>.php</a>  </font></p><br class="gmail-Apple-interchange-newline"></div></div><div><br></div><div><br></div><div><div dir="ltr" class="gmail_signature" data-smartmail="gmail_signature"><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr"><font face="arial, helvetica, sans-serif">Mary C. Marre</font><div><font face="arial, helvetica, sans-serif">Administrative Assistant</font></div><div><i><font face="arial, helvetica, sans-serif" color="#3d85c6"><b>Toyota Technological Institute</b></font></i></div><div><i><font face="arial, helvetica, sans-serif" color="#3d85c6">6045 S. Kenwood Avenue</font></i></div><div><i><font face="arial, helvetica, sans-serif" color="#3d85c6">Room 517</font></i></div><div><i><font face="arial, helvetica, sans-serif" color="#3d85c6">Chicago, IL  60637</font></i></div><div><i><font face="arial, helvetica, sans-serif">p:(773) 834-1757</font></i></div><div><i><font face="arial, helvetica, sans-serif">f: (773) 357-6970</font></i></div><div><b><i><a href="mailto:mmarre@ttic.edu" target="_blank"><font face="arial, helvetica, sans-serif">mmarre@ttic.edu</font></a></i></b></div></div></div></div></div></div></div></div></div></div></div></div></div></div><br><br><div class="gmail_quote"><div dir="ltr">On Sun, Dec 16, 2018 at 6:03 PM Mary Marre <<a href="mailto:mmarre@ttic.edu">mmarre@ttic.edu</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div dir="ltr"><div><div><p class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_9103776001042077600gmail-p1" style="font-variant-numeric:normal;font-variant-east-asian:normal;font-stretch:normal;line-height:normal;margin:0px"><font face="arial, helvetica, sans-serif"><b>When:    </b>  Monday, December 17th at 11:00 am<br></font></p><p class="MsoNormal" style="margin:0in 0in 0.0001pt;line-height:normal;background-image:initial;background-position:initial;background-size:initial;background-repeat:initial;background-origin:initial;background-clip:initial"><font face="arial, helvetica, sans-serif"> </font></p><p class="MsoNormal" style="margin:0in 0in 0.0001pt;line-height:normal;background-image:initial;background-position:initial;background-size:initial;background-repeat:initial;background-origin:initial;background-clip:initial"><font face="arial, helvetica, sans-serif"><b>Where:     </b>TTIC, 6045 S. Kenwood Avenue, 5th Floor, Room 526</font></p><p class="MsoNormal" style="margin:0in 0in 0.0001pt;line-height:normal;background-image:initial;background-position:initial;background-size:initial;background-repeat:initial;background-origin:initial;background-clip:initial"><font face="arial, helvetica, sans-serif"> </font></p><p class="MsoNormal" style="margin:0in 0in 0.0001pt;line-height:normal;background-image:initial;background-position:initial;background-size:initial;background-repeat:initial;background-origin:initial;background-clip:initial"><font face="arial, helvetica, sans-serif"><b>Who:       </b> </font><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-il">Jordan</span> <span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-il">Boyd</span>-Graber, University of Maryland</p></div><div><br></div><div><br></div><b>Title:</b>         Cooperative and Competitive Machine Learning through Question Answering    <br><br></div><div><div><b>Abstract:</b> My research goal is to create machine learning algorithms that are interpretable to humans, that can understand human strengths and weaknesses, and can help humans improve themselves.  In this talk, I'll discuss how we accomplish this through a trivia game called quiz bowl. These questions are written so that they can be interrupted by someone who knows more about the answer (unlike, say, Jeopardy!); that is, harder clues are at the start of the question and easier clues are at the end of the question: a player must decide when it has enough information to "buzz in". Our system determines the right answer, uses deep reinforcement to determine when to buzz, and can beat the best humans at the game.</div><div><br></div><div>More importantly, this setting also helps us build systems to adapt in cooperation and competition with humans.  If we give humans access to the predictions<span style="white-space:pre-wrap"> </span>of our question<span style="white-space:pre-wrap"> </span>answering system, we can craft adversarial that remain natural for humans to answer but very</div><div>challenging for computer.  The game of quiz bowl also allows opportunities to better understand interpretability in deep learning models to *help* human players perform better with machine cooperation.  This cooperation helps us with a related task, simultaneous machine translation.</div><div><br></div><div>Finally, I'll discuss opportunities for broader participation through open human-computer competitions: <a href="http://qanta.org/" target="_blank">http://qanta.org/</a></div><div><br></div><div><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-il"><b>Bio: </b>Jordan</span> <span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-il">Boyd</span>-Graber is an associate professor in the University of Maryland's Computer Science Department, iSchool, UMIACS, and Language Science Center. <span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-il">Jordan</span>'s research focus is in applying machine learning and Bayesian probabilistic models to problems that help us better understand social interaction or the human cognitive process. He and his students have won "best of" awards at UAI (2018), NIPS (2009, 2015), NAACL (2016), and CoNLL (2015), and <span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-il">Jordan</span> won the British Computing Society's 2015 Karen Spärk Jones Award and a 2017 NSF CAREER award. His research has been funded by DARPA, IARPA, NSF, NCSES, ARL, NIH, and Lockheed Martin and has been featured by CNN, Huffington Post, New York Magazine, and the Wall Street Journal.</div></div><div><br></div><div><br></div><div><div><p class="MsoNormal" style="margin-right:0in;margin-left:0in"><font face="arial, helvetica, sans-serif"><b>Host:</b><u style="font-weight:bold"> </u><a href="mailto:kgimpel@ttic.edu" target="_blank">Kevin Gimpel</a></font></p><p class="MsoNormal" style="margin-right:0in;margin-left:0in"><font face="arial, helvetica, sans-serif"><br></font></p><p class="MsoNormal" style="margin-right:0in;margin-left:0in"><font face="arial, helvetica, sans-serif"><span style="font-kerning:none"><br class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-Apple-interchange-newline">For more information on the <span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-m_767208242022040581gmail-m_5118066322451693210gmail-m_3292142122556441362m_4179300188985034065m_8112548636363365103gmail-m_-5864378453105999086gmail-m_-1690647303496242289m_1430452980776983890gmail-m_1031910664862358996gmail-m_8778633083237298896gmail-m_-8347358208690191418gmail-m_6958947101002467454gmail-m_4240741644540508174gmail-m_-7649362550103587767gmail-m_37711595404184628gmail-m_-8366621373355229216gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-m_767208242022040581gmail-m_5118066322451693210gmail-m_3292142122556441362m_4179300188985034065m_8112548636363365103gmail-m_-5864378453105999086gmail-m_-1690647303496242289m_1430452980776983890gmail-m_1031910664862358996gmail-m_8778633083237298896gmail-m_-8347358208690191418gmail-m_6958947101002467454gmail-m_4240741644540508174gmail-m_-7649362550103587767gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-m_767208242022040581gmail-m_5118066322451693210gmail-m_3292142122556441362m_4179300188985034065m_8112548636363365103gmail-m_-5864378453105999086gmail-m_-1690647303496242289m_1430452980776983890gmail-m_1031910664862358996gmail-m_8778633083237298896gmail-m_-8347358208690191418gmail-m_6958947101002467454gmail-m_4240741644540508174gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-m_767208242022040581gmail-m_5118066322451693210gmail-m_3292142122556441362m_4179300188985034065m_8112548636363365103gmail-m_-5864378453105999086gmail-m_-1690647303496242289m_1430452980776983890gmail-m_1031910664862358996gmail-m_8778633083237298896gmail-m_-8347358208690191418gmail-m_6958947101002467454gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-m_767208242022040581gmail-m_5118066322451693210gmail-m_3292142122556441362m_4179300188985034065m_8112548636363365103gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-il">colloquium</span></span></span></span></span></span></span> series or to subscribe to the mailing list,please </span>see <a href="http://www.ttic.edu/colloquium.php" target="_blank">http://www.ttic.edu/<span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-m_767208242022040581gmail-m_5118066322451693210gmail-m_3292142122556441362m_4179300188985034065m_8112548636363365103gmail-m_-5864378453105999086gmail-m_-1690647303496242289m_1430452980776983890gmail-m_1031910664862358996gmail-m_8778633083237298896gmail-m_-8347358208690191418gmail-m_6958947101002467454gmail-m_4240741644540508174gmail-m_-7649362550103587767gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-m_767208242022040581gmail-m_5118066322451693210gmail-m_3292142122556441362m_4179300188985034065m_8112548636363365103gmail-m_-5864378453105999086gmail-m_-1690647303496242289m_1430452980776983890gmail-m_1031910664862358996gmail-m_8778633083237298896gmail-m_-8347358208690191418gmail-m_6958947101002467454gmail-m_4240741644540508174gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-m_767208242022040581gmail-m_5118066322451693210gmail-m_3292142122556441362m_4179300188985034065m_8112548636363365103gmail-m_-5864378453105999086gmail-m_-1690647303496242289m_1430452980776983890gmail-m_1031910664862358996gmail-m_8778633083237298896gmail-m_-8347358208690191418gmail-m_6958947101002467454gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-m_767208242022040581gmail-m_5118066322451693210gmail-m_3292142122556441362m_4179300188985034065m_8112548636363365103gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-il">colloquium</span></span></span></span></span></span>.php</a>  </font></p><p class="MsoNormal" style="margin-right:0in;margin-left:0in"><font face="arial, helvetica, sans-serif"><br></font></p><p class="MsoNormal" style="margin-right:0in;margin-left:0in"><font face="arial, helvetica, sans-serif"><br></font></p></div></div><br class="gmail-m_-3337101727570431487gmail-Apple-interchange-newline"><div><div dir="ltr" class="gmail-m_-3337101727570431487gmail_signature"><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr"><font face="arial, helvetica, sans-serif">Mary C. Marre</font><div><font face="arial, helvetica, sans-serif">Administrative Assistant</font></div><div><i><font face="arial, helvetica, sans-serif" color="#3d85c6"><b>Toyota Technological Institute</b></font></i></div><div><i><font face="arial, helvetica, sans-serif" color="#3d85c6">6045 S. Kenwood Avenue</font></i></div><div><i><font face="arial, helvetica, sans-serif" color="#3d85c6">Room 517</font></i></div><div><i><font face="arial, helvetica, sans-serif" color="#3d85c6">Chicago, IL  60637</font></i></div><div><i><font face="arial, helvetica, sans-serif">p:(773) 834-1757</font></i></div><div><i><font face="arial, helvetica, sans-serif">f: (773) 357-6970</font></i></div><div><b><i><a href="mailto:mmarre@ttic.edu" target="_blank"><font face="arial, helvetica, sans-serif">mmarre@ttic.edu</font></a></i></b></div></div></div></div></div></div></div></div></div></div></div></div></div></div><br></div><br><div class="gmail_quote"><div dir="ltr">On Mon, Dec 10, 2018 at 5:24 PM Mary Marre <<a href="mailto:mmarre@ttic.edu" target="_blank">mmarre@ttic.edu</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div dir="ltr"><div><div><p class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_9103776001042077600gmail-p1" style="font-variant-numeric:normal;font-variant-east-asian:normal;font-stretch:normal;line-height:normal;margin:0px"><font face="arial, helvetica, sans-serif"><b>When:    </b>  Monday, December 17th at 11:00 am<br></font></p><p class="MsoNormal" style="margin:0in 0in 0.0001pt;line-height:normal;background-image:initial;background-position:initial;background-size:initial;background-repeat:initial;background-origin:initial;background-clip:initial"><font face="arial, helvetica, sans-serif"> </font></p><p class="MsoNormal" style="margin:0in 0in 0.0001pt;line-height:normal;background-image:initial;background-position:initial;background-size:initial;background-repeat:initial;background-origin:initial;background-clip:initial"><font face="arial, helvetica, sans-serif"><b>Where:     </b>TTIC, 6045 S. Kenwood Avenue, 5th Floor, Room 526</font></p><p class="MsoNormal" style="margin:0in 0in 0.0001pt;line-height:normal;background-image:initial;background-position:initial;background-size:initial;background-repeat:initial;background-origin:initial;background-clip:initial"><font face="arial, helvetica, sans-serif"> </font></p><p class="MsoNormal" style="margin:0in 0in 0.0001pt;line-height:normal;background-image:initial;background-position:initial;background-size:initial;background-repeat:initial;background-origin:initial;background-clip:initial"><font face="arial, helvetica, sans-serif"><b>Who:       </b> </font><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-il">Jordan</span> <span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-il">Boyd</span>-Graber, University of Maryland</p></div><div><br></div><div><br></div><b>Title:</b>        

Cooperative and Competitive Machine Learning through Question Answering    <br><br></div><div><div><b>Abstract:</b> My research goal is to create machine learning algorithms that are interpretable to humans, that can understand human strengths and weaknesses, and can help humans improve themselves.  In this talk, I'll discuss how we accomplish this through a trivia game called quiz bowl. These questions are written so that they can be interrupted by someone who knows more about the answer (unlike, say, Jeopardy!); that is, harder clues are at the start of the question and easier clues are at the end of the question: a player must decide when it has enough information to "buzz in". Our system determines the right answer, uses deep reinforcement to determine when to buzz, and can beat the best humans at the game.</div><div><br></div><div>More importantly, this setting also helps us build systems to adapt in cooperation and competition with humans.  If we give humans access to the predictions<span style="white-space:pre-wrap"> </span>of our question<span style="white-space:pre-wrap"> </span>answering system, we can craft adversarial that remain natural for humans to answer but very</div><div>challenging for computer.  The game of quiz bowl also allows opportunities to better understand interpretability in deep learning models to *help* human players perform better with machine cooperation.  This cooperation helps us with a related task, simultaneous machine translation.</div><div><br></div><div>Finally, I'll discuss opportunities for broader participation through open human-computer competitions: <a href="http://qanta.org/" target="_blank">http://qanta.org/</a></div><div><br></div><div><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-il"><b>Bio: </b>Jordan</span> <span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-il">Boyd</span>-Graber is an associate professor in the University of Maryland's Computer Science Department, iSchool, UMIACS, and Language Science Center. <span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-il">Jordan</span>'s research focus is in applying machine learning and Bayesian probabilistic models to problems that help us better understand social interaction or the human cognitive process. He and his students have won "best of" awards at UAI (2018), NIPS (2009, 2015), NAACL (2016), and CoNLL (2015), and <span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-il">Jordan</span> won the British Computing Society's 2015 Karen Spärk Jones Award and a 2017 NSF CAREER award. His research has been funded by DARPA, IARPA, NSF, NCSES, ARL, NIH, and Lockheed Martin and has been featured by CNN, Huffington Post, New York Magazine, and the Wall Street Journal.</div></div><div><br></div><div><br></div><div><div><p class="MsoNormal" style="margin-right:0in;margin-left:0in"><font face="arial, helvetica, sans-serif"><b>Host:</b><u style="font-weight:bold"> </u><a href="mailto:kgimpel@ttic.edu" target="_blank">Kevin Gimpel</a></font></p><p class="MsoNormal" style="margin-right:0in;margin-left:0in"><font face="arial, helvetica, sans-serif"><br></font></p><p class="MsoNormal" style="margin-right:0in;margin-left:0in"><font face="arial, helvetica, sans-serif"><span style="font-kerning:none"><br class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-Apple-interchange-newline">For more information on the <span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-m_767208242022040581gmail-m_5118066322451693210gmail-m_3292142122556441362m_4179300188985034065m_8112548636363365103gmail-m_-5864378453105999086gmail-m_-1690647303496242289m_1430452980776983890gmail-m_1031910664862358996gmail-m_8778633083237298896gmail-m_-8347358208690191418gmail-m_6958947101002467454gmail-m_4240741644540508174gmail-m_-7649362550103587767gmail-m_37711595404184628gmail-m_-8366621373355229216gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-m_767208242022040581gmail-m_5118066322451693210gmail-m_3292142122556441362m_4179300188985034065m_8112548636363365103gmail-m_-5864378453105999086gmail-m_-1690647303496242289m_1430452980776983890gmail-m_1031910664862358996gmail-m_8778633083237298896gmail-m_-8347358208690191418gmail-m_6958947101002467454gmail-m_4240741644540508174gmail-m_-7649362550103587767gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-m_767208242022040581gmail-m_5118066322451693210gmail-m_3292142122556441362m_4179300188985034065m_8112548636363365103gmail-m_-5864378453105999086gmail-m_-1690647303496242289m_1430452980776983890gmail-m_1031910664862358996gmail-m_8778633083237298896gmail-m_-8347358208690191418gmail-m_6958947101002467454gmail-m_4240741644540508174gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-m_767208242022040581gmail-m_5118066322451693210gmail-m_3292142122556441362m_4179300188985034065m_8112548636363365103gmail-m_-5864378453105999086gmail-m_-1690647303496242289m_1430452980776983890gmail-m_1031910664862358996gmail-m_8778633083237298896gmail-m_-8347358208690191418gmail-m_6958947101002467454gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-m_767208242022040581gmail-m_5118066322451693210gmail-m_3292142122556441362m_4179300188985034065m_8112548636363365103gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-il">colloquium</span></span></span></span></span></span></span> series or to subscribe to the mailing list,please </span>see <a href="http://www.ttic.edu/colloquium.php" target="_blank">http://www.ttic.edu/<span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-m_767208242022040581gmail-m_5118066322451693210gmail-m_3292142122556441362m_4179300188985034065m_8112548636363365103gmail-m_-5864378453105999086gmail-m_-1690647303496242289m_1430452980776983890gmail-m_1031910664862358996gmail-m_8778633083237298896gmail-m_-8347358208690191418gmail-m_6958947101002467454gmail-m_4240741644540508174gmail-m_-7649362550103587767gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-m_767208242022040581gmail-m_5118066322451693210gmail-m_3292142122556441362m_4179300188985034065m_8112548636363365103gmail-m_-5864378453105999086gmail-m_-1690647303496242289m_1430452980776983890gmail-m_1031910664862358996gmail-m_8778633083237298896gmail-m_-8347358208690191418gmail-m_6958947101002467454gmail-m_4240741644540508174gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-m_767208242022040581gmail-m_5118066322451693210gmail-m_3292142122556441362m_4179300188985034065m_8112548636363365103gmail-m_-5864378453105999086gmail-m_-1690647303496242289m_1430452980776983890gmail-m_1031910664862358996gmail-m_8778633083237298896gmail-m_-8347358208690191418gmail-m_6958947101002467454gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-m_767208242022040581gmail-m_5118066322451693210gmail-m_3292142122556441362m_4179300188985034065m_8112548636363365103gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-m_-2053129909387779305gmail-m_-4421783803009889794gmail-m_1235227957090907765gmail-il"><span class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-m_-4374496420704574181gmail-m_-8232014986225864746gmail-m_2118555233517397122gmail-m_-6347337869693432729gmail-m_6770742588603738482gmail-m_3034006998144763397gmail-m_-2909309711111506553gmail-m_3361278369988668236gmail-m_3239492643088026663gmail-il">colloquium</span></span></span></span></span></span>.php</a>  </font></p><br class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-m_3739772758111120207gmail-Apple-interchange-newline"></div><br class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail-Apple-interchange-newline"></div><div><br></div><br clear="all"><div><div dir="ltr" class="gmail-m_-3337101727570431487gmail-m_5803000941478265060gmail_signature"><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr"><font face="arial, helvetica, sans-serif">Mary C. Marre</font><div><font face="arial, helvetica, sans-serif">Administrative Assistant</font></div><div><i><font face="arial, helvetica, sans-serif" color="#3d85c6"><b>Toyota Technological Institute</b></font></i></div><div><i><font face="arial, helvetica, sans-serif" color="#3d85c6">6045 S. Kenwood Avenue</font></i></div><div><i><font face="arial, helvetica, sans-serif" color="#3d85c6">Room 517</font></i></div><div><i><font face="arial, helvetica, sans-serif" color="#3d85c6">Chicago, IL  60637</font></i></div><div><i><font face="arial, helvetica, sans-serif">p:(773) 834-1757</font></i></div><div><i><font face="arial, helvetica, sans-serif">f: (773) 357-6970</font></i></div><div><b><i><a href="mailto:mmarre@ttic.edu" target="_blank"><font face="arial, helvetica, sans-serif">mmarre@ttic.edu</font></a></i></b></div></div></div></div></div></div></div></div></div></div></div></div></div></div></div></div>
</blockquote></div></div>
</blockquote></div></div>