LeechCraft

Есть ресурсы которые требуют указания определенных http-заголовков для прямого доступа к текстам. В данном конкретном случае требуется указание в реферере самого сайта.
Поэтому, было бы оче неплохо описывать какие заголовки должны быть переданы в запросе. Наподобие следующего:

<provider name="blabla.com" title="{title}" charset="utf-8" url="http://www.blabla.com/foo/{artist}/{title}.txt">
    <header>
      <item referer="http://www.blabla.com/"/>
    </header>
    <urlFormat replace=" ._@,;&amp;\/'&quot;-" with=""/>
    <exclude>
      <item value="&lt;br&gt;"/>
      <item begin="&lt;!--" end="--!&gt;"/>
    </exclude>
    <invalidIndicator value="File not found, 404"/>
</provider>

ЗЫ. В принципе, можно было бы пойти и напарсить из хтмльки, но там оче сложно