IEでは表示されないけど、Firefox、Operaでロケーションバー(アドレスバー)に表示されるRSSアイコンはHTMLのヘッダ部に以下を記述すればOK。
<link rel="alternate" type="application/atom+xml" title="フィードのタイトル" href="フィードのアドレス/パス" />
まあ、実際にRSSアイコンが表示されてるサイトのHTMLソース見ればすぐわかる事だけど。
意外と解説してるサイトとかない感じがしたので、自分の趣味のサイトに設置したついでにメモしておくかと。