Многие компоненты Swing поддерживают встроенный HTML, но я не могу найти официальную документацию по этому вопросу. (Все на страницах Sun о HTML, кажется, нацелено на JEditorPane)
Итак: Какие HTML-теги поддерживаются в компонентах Swing?
EDIT: Хотя я сказал, что мне не хватает "официальной документации", мне также нужна любая "неофициальная" документация.
Swing поддерживает HTML 3.2 (Wilbur), как сказал Software Monkey. Вы можете найти официальную документацию к этой устаревшей версии (1996) HTML: http://www.w3.org/TR/REC-html32.html
Документация по Java 7 по теме: http://docs.oracle.com/javase/7/docs/api/javax/swing/text/html/package-summary.html
Хотя стоит отметить, что в нем явно не упоминается, что эта информация действительна для других компонентов Swing.
Я считаю это узким подмножеством HTML 3.x, хотя и с моей головы, я не помню, где я это читал.
Я не знаю точно, какие теги поддерживаются, но я бы предложил вам ограничиться полужирным/курсивом (или даже лучше сильным /em при условии, что он поддерживает их) и img-тегами. Все остальное может вызвать головные боли и, вероятно, означает, что вы слишком много накладываете на этот компонент.