BetterRobots - 使用robots.txt增强您的SEO。BetterRobots专为提升SEO而设计，尤其适用于从一个应用程序提供多个域名或子域的情况。例如，assets.yoursite.com、beta.yoursite.com等。 SEO和您的robots.txt：随着Domain Sharding（域分片技术）逐渐被弃用，这个gem帮助启用的这类技术现在已被视为桌面和移动浏览器的性能反模式。想了解更多详细信息和测试结果，请参阅相关资料。

在一个Web应用程序中，通常会有多个子域引用同一应用程序。为了加快浏览器页面加载速度，传统做法是为多个资产主机设别名，使浏览器可以同时加载多个资产。然而，在SEO角度来看，这些别名主机会被视为重复内容。为了避免这个问题，建议为每个别名主机使用独立的robots.txt文件。