User-agent: *
Disallow: /cgi-bin/
Allow: /menu.html
Allow: /*.php
Allow: /*.html
Allow: /*.htm