使用AI编程实现robots.txt文件生成器

作者：SparkToAI
发布于：2025年9月25日

人类想法

今天在Google搜索中心，学习了robots.txt的相关知识，这个文件规定了搜索引擎抓取工具可以抓取我们网站上的哪些网页或文件。

根据提示，我手动生成了robots.txt文件，并上传到网站根目录。

虽然手动生成robots.txt文件并不麻烦，但本着“咱们出点子，AI来搞定。”的精神，我想使用AI开发一个robots.txt文件生成器。

AI编程

打开Qoder，创建一个新的项目，输入以下提示词：

使用HTML5实现一个robots.txt文件生成器，要求如下：
1. 生成器左侧是配置面板，可以设置robots.txt参数
   网站地图(sitemap)地址设置
   搜索引擎权限设置（Google、Bing、百度）
   禁止抓取的路径设置
   抓取延迟设置
2. 生成器右侧是预览面板，实时显示生成的robots.txt内容
3. 预览面板下方添加快捷操作
   一键复制到剪贴板
   直接下载robots.txt文件
4. 响应式设计：适配各种屏幕尺寸

一分钟左右就完成了，看截图：

Qoder在左侧配置面板下方，增加了一个生成robots.txt文件的按钮，生成器的右侧面板是实时预览，所以这个生成按钮是多余的，可以去掉。

Qoder默认将html，script，style代码分别放在不同的文件中，这个很好，但是对于robots.txt文件生成器这种小而美的工具，我们不需要那么麻烦，可以合并成一个文件。

继续输入以下提示词：

继续完善这个robots.txt文件生成器，要求如下：
1. 删除生成robots.txt的按钮
2. 将script和css代码合并到html文件中

非常好，完美实现了我的需求，看截图：

robots.txt文件生成器所有功能测试成功，可以开始使用啦！