ios-simulator-mcp 是一个 MCP 服务器，专为与 iOS 模拟器交互而设计。它允许开发者通过 AI 模型控制模拟器，获取设备信息，执行 UI 交互，并检查 UI 元素。该服务器支持多种操作，包括获取当前启动的模拟器 ID、描述屏幕上的可访问性元素、模拟点击和滑动操作、输入文本，以及截取屏幕截图和录制视频。

此解决方案的核心价值在于其能作为质量保证环节，在功能开发完成后立即进行 UI 一致性和行为正确性的验证。通过简单的提示，开发者可以利用 AI 模型自动执行 UI 元素验证、文本输入确认、点击响应检查和滑动操作验证等任务。

ios-simulator-mcp 基于 Node.js 开发，并依赖于 Facebook IDB 工具。它可以通过 NPX 快速安装，或者通过本地开发方式进行更灵活的配置。此服务器为 AI 模型与 iOS 模拟器之间的无缝集成提供了强大的桥梁，极大地提升了开发效率和质量。

UI元素信息获取

ios-simulator-mcp 允许 AI 模型获取 iOS 模拟器上当前屏幕中所有可访问的 UI 元素信息。该功能通过与模拟器交互，提取屏幕上每个 UI 元素的属性，例如位置、大小、文本内容、标签和类型。这些信息以结构化的格式提供给 AI 模型，使其能够理解屏幕的布局和内容。这对于需要理解用户界面状态并做出相应决策的 AI 代理至关重要。例如，AI 代理可以利用这些信息来验证特定 UI 元素是否存在，或者检查元素的属性是否符合预期。技术上，该功能依赖于 Facebook IDB 工具与 iOS 模拟器进行交互，提取 UI 元素信息，并将其转换为 MCP 兼容的格式。

一个具体的使用场景是，AI 驱动的自动化测试工具可以使用此功能来验证应用程序的 UI 是否正确呈现。例如，它可以检查某个按钮的标签是否正确，或者某个文本字段是否显示了预期的值。

模拟用户交互

该 MCP 允许 AI 模型模拟用户与 iOS 模拟器的交互，包括点击屏幕坐标、输入文本和滑动操作。通过指定屏幕上的坐标，AI 模型可以模拟用户点击特定按钮或链接。此外，AI 模型还可以将文本输入到文本字段中，模拟用户输入。滑动操作允许 AI 模型在屏幕上执行滑动，例如在页面之间切换或滚动列表。这些交互功能使 AI 模型能够自动化各种任务，例如测试应用程序的功能、演示应用程序的使用方法或执行重复性的用户操作。

例如，AI 驱动的应用程序教程可以使用此功能来逐步演示应用程序的使用方法。AI 模型可以点击屏幕上的按钮，输入文本并执行滑动操作，以引导用户完成应用程序的各个步骤。技术上，该功能通过调用 IDB 工具提供的接口来模拟用户交互。

屏幕录制与截图

ios-simulator-mcp 提供了屏幕录制和截图功能，允许 AI 模型捕获 iOS 模拟器的屏幕内容。屏幕录制功能可以录制模拟器屏幕的视频，并将其保存为 MP4 文件。截图功能可以捕获模拟器屏幕的静态图像，并将其保存为 PNG 文件。这些功能对于 AI 模型的调试、测试和文档编制非常有用。例如，AI 模型可以使用屏幕录制功能来记录应用程序的运行过程，以便进行故障排除。屏幕截图可以用于创建应用程序的文档或演示材料。

例如，在自动化测试过程中，AI 模型可以在测试失败时自动截取屏幕截图，以便开发人员能够快速了解问题所在。默认情况下，录制的视频会保存到 ~/Downloads/simulator_recording_$DATE.mp4。

技术实现

ios-simulator-mcp 基于 Node.js 构建，利用 Facebook 的 IDB 工具与 iOS 模拟器进行交互。IDB 提供了与 iOS 模拟器进行底层通信的接口，允许 MCP 服务器执行各种操作，例如获取 UI 元素信息、模拟用户交互和捕获屏幕内容。该 MCP 服务器通过标准输入/输出或 HTTP/SSE 与 AI 模型进行通信，接收来自 AI 模型的指令，并返回执行结果。这种架构使得该 MCP 服务器可以与各种 AI 模型集成，并为它们提供与 iOS 模拟器交互的能力。