asmed

Мой вариант для написания веб-приложений:
1. Фреймворк Spark sparkjava.com
2. Шаблонизатор Apache Velocity, есть в фреймворке Spark.
3. IDE - Intellij IDEA, community edition вполне хватит

Для разбора HTML попробуйте использовать beautiful soup www.crummy.com/software/BeautifulSoup

Charles - www.charlesproxy.com (имеет бесплатную версию с ограничениями)
Burp Suite - https://portswigger.net/burp/ (является не только http-сниффером, но и инструментом для тестирования)