1) роботс должен называть robots.txt. Надо читать что тут написано вверху
# 1) Edit this file to change "/forum/" to the correct relative path from your base URL, for example if your forum was at "domain.com/sites/community", then you'd use "/sites/community/"
# 2) Rename the file to 'robots.txt' and move it to your web root (public_html, www, or htdocs)
# 3) Edit the file to remove this comment (anything above the dashed line, including the dashed line
2) Вот правильный роботс. Текст:
где
Sitemap: __сайт.ру/sitemap.xml
Host: __сайт.ру.ru/
меняй на свои
На счет сайтмапа - mysitemapgenerator.com/start/free.html