<div dir="ltr"><br><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">---------- Forwarded message ---------<br>From: <strong class="gmail_sendername" dir="auto">Aditya Singh 5-Yr IDD Mathematics & Computing IIT (BHU) Varanasi</strong> <span dir="auto"><<a href="mailto:aditya.singh.mat17@itbhu.ac.in">aditya.singh.mat17@itbhu.ac.in</a>></span><br>Date: Mon, Mar 23, 2020 at 9:03 AM<br>Subject: Re: GSoC Project #8 JDERobotics<br>To:  <<a href="mailto:edupergar@gmail.com">edupergar@gmail.com</a>><br></div><br><br><div dir="ltr"><div>Hi Eduardo,</div><div><br></div><div>I am Aditya Singh, an Integrated Dual Degree(Masters+Bachelors) student pursuing
 Mathematics and Computing(Hons.) from the Indian Institute of 
Technology(BHU), Varanasi. I’ve developed a passion 
for Reinforcement Learning, and I'm intrigued by its research prospects.
 I'm decidedly interested in pursuing independent research(PhD). I have 
also written a blog(<a style="text-decoration-line:none;color:rgb(66,133,244)" rel="noreferrer" href="https://adityauser.github.io/blog/" target="_blank">link</a>) on my research interest.</div><div><div><br></div><div>I'm
 personally interested in Project #8: Reinforcement Learning for Autonomous Driving with Gazebo and OpenAI gym. I'm very much familiar with OpenAI gym and Gazebo, I have also used CARLA Simulator. The projects aim to do some comparisons among the already implemented algorithms. I have created an execution plan please <a href="https://docs.google.com/document/d/1ajGLBtdtWupTwYiPr5RJqHP26twtR3mqtQKcefR2AnE/edit?usp=sharing" target="_blank">look</a> into it and enrich it with your ideas.  I have written a short <a href="https://docs.google.com/document/d/1MtX2tIvyUW3O-Pzgpu3jI23Xua8_TcgS1QPx_koUZNY/edit?usp=sharing" target="_blank">note</a> which explains why I specifically want to work on Project 8.</div><div><br></div><div><b>Current and previous experience:</b><br></div><div>1.
 Currently, I'm trying to extend Q learning with UCB-Hoeffding bonus to the continuous state space domain. This project part of my stream project, which is under the supervision of <u>Dr. Kailasam Lakshmanan</u>. </div><div><div>2. I have implemented multiple Deep Reinforcement Learning algorithms(including <u>C51, QR-DQN</u>), <a href="https://github.com/adityauser/Quest-RL" target="_blank">here</a> are some of them. <br></div><div>3. This summer, I worked with<u> Prof. Rishi Kamaleswaran, The University of Tennessee</u>,
 on Fever and Sepsis onset prediction, using CNNs and data science techniques. The abstract and poster for Sepsis Onset prediction are published in HIPOCT’ 19 conferences. The fever onset prediction project was under the umbrella of Google Summer of Code' 19(<a href="https://drive.google.com/file/d/154Foh89yvx1N6-NAUMncTykJ9dVVwgxM/view?usp=sharing" target="_blank">Completion Letter</a> by Tony Urso, GSoC Program Manager), you can <a href="https://drive.google.com/file/d/1lIgtJuxtw2dubpIM-NBKEGZld6eMjP2j/view?usp=sharing" target="_blank">look</a> in the feedback provided by my mentor for more detail. <br></div></div><div><br></div><div>I have completed both C++ and Python task:</div><div>C++ task: <a href="https://drive.google.com/drive/folders/1G_w5roFuHONaqW54zY-NqDY6wt7FkPek?usp=sharing" target="_blank">link</a><br></div><div>Python task: <a href="https://drive.google.com/drive/folders/1lNHuJwg_GJIF7hYFAM5NtyRDjxdNvQ63?usp=sharing" target="_blank">link</a><br></div><div><br></div><div><div>You can check my <a href="https://drive.google.com/file/d/1-0xtGAUZZUn1ofmKQle7251GtekP1x5R/view?usp=sharing" target="_blank">CV</a>
 for your reference. Feel free to contact the referred professor in the 
CV. I am genuinely interested in working with you and come up with quality work in our aligned areas of interest.<span><br></span><div><div dir="ltr"><div dir="ltr"><br></div><div dir="ltr">Thank you so much for taking the time to read my note. I appreciate your feedback and feel excited to hear back from you soon!</div><div dir="ltr"><br></div><div>Sincerely,</div></div></div></div></div></div><div><div><div dir="ltr" data-smartmail="gmail_signature"><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr"><div><div dir="ltr"><div>Aditya Singh</div><div>Junior Undergraduate</div><div>Mathematics and Computing</div><div>Indian Institute of Technology (BHU)</div><div>Varanasi</div><div>email: <a href="mailto:aditya.singh.mat17@itbhu.ac.in" target="_blank">aditya.singh.mat17@iitbhu.ac.in</a></div><div>            <a href="mailto:adityauser225@gmail.com" target="_blank">adityauser225@gmail.com</a><br></div></div></div></div></div></div></div></div></div></div></div></div>
</div></div>