User-Agent: *
Allow: /login.aspx
Allow: /login/
Allow: /feeds/
Allow: /rss/
Allow: /ws/api/
Disallow: /

User-Agent: Mediapartners-Google
Allow: /
Allow: /login.aspx
Allow: /login/