flintrock for Mac 版
用于启动 Apache Spark 集群的工具
flintrock 是什么
Flintrock 是一个用来启动 Apache Spark 集群的命令行工具。它的核心功能是让用户在 EC2 上快速创建和管理 Spark 集群,同时支持将常用配置持久化到文件中,以便后续用更简洁的方式重复操作。使用完毕后,用户也可以通过命令销毁集群,避免资源浪费。除了基本的集群启动与销毁,Flintrock 还提供了一些其他命令和功能,具体可以通过帮助命令查看。在数据访问方面,Flintrock 推荐通过 IAM 角色授权,并在 Spark 代码中使用 s3a:// 前缀访问 S3 数据;它默认使用 Hadoop 3.3.6,能满足 s3a:// 的要求,调用 Spark 时配合 hadoop-aws 包即可启用。Flintrock 适合需要在 AWS 上快速搭建 Spark 集群、并希望以命令行方式管理集群生命周期的开发者和数据工程人员。它曾被多场演讲、指南和论文提及,社区中也有不少围绕它展开的实践分享。
如何安装 flintrock
- 打开 终端(按 ⌘ + 空格,输入“终端”)。
- 如果还没安装 Homebrew,先运行下面这条安装命令。
- 运行下面这条命令:
最近 10 个版本记录
最近一次更新为 2023-11-27,当前版本 v2.1.0,共记录最近 10 个版本。
| 版本 | 发布日期 | 类型 | 大小 | macOS | Windows | Linux |
|---|---|---|---|---|---|---|
| v2.1.0 | 2023-11-27 | 稳定版 | — | — | — | — |
| v2.0.0 | 2021-06-13 | 稳定版 | 16.8 MB | 下载 | — | 下载 |
| v1.0.0 | 2020-01-11 | 稳定版 | 14.3 MB | 下载 | — | 下载 |
| v0.11.0 | 2018-12-02 | 稳定版 | 13.3 MB | 下载 | — | 下载 |
| v0.10.0 | 2018-07-15 | 稳定版 | 12.4 MB | 下载 | — | 下载 |
| v0.9.0 | 2017-08-06 | 稳定版 | 11.2 MB | 下载 | — | 下载 |
| v0.8.0 | 2017-02-12 | 稳定版 | 10.7 MB | 下载 | — | 下载 |
| v0.7.0 | 2016-11-15 | 稳定版 | 10.1 MB | 下载 | — | 下载 |
| v0.6.0 | 2016-08-28 | 稳定版 | 9.1 MB | 下载 | — | 下载 |
| v0.5.0 | 2016-07-20 | 稳定版 | 8.9 MB | 下载 | — | 下载 |
数据来自 GitHub Releases,稳定版优先,同类按发布时间排序。
二进制包支持平台
Homebrew 官方提供的预编译包(bottle)覆盖:
- Apple 芯片 · 最新 macOS
- Apple 芯片 · macOS 26 Tahoe
- Apple 芯片 · macOS 15 Sequoia
- Linux · ARM64
- Linux · x86_64
⚠️ 未提供 Intel Mac 的预编译包,Intel 机型需要通过 brew install --build-from-source 从源码编译。
与同类应用对比
只对比公开元数据,不做主观推荐;需要逐项对比时见对比页。
| 应用 | 版本 | 许可证 | 架构 | 近 30 天安装 |
|---|---|---|---|---|
| flintrock | v2.1.0 | Apache-2.0 | 命令行 | 8 |
| ant-contrib | 1.0b3 | Apache-1.1 | 命令行 | 8 |
| iceberg-cli | v0.7.0 | Apache-2.0 | 命令行 | 11 |
| cloudmonkey | 6.6.0 | Apache-2.0 | 命令行 | 7 |
命令行工具中的类似应用
ant-contrib
ant-contrib 是 Apache Ant 构建工具的任务扩展集合,为原本偏基础的 Ant 构建脚本补充了更丰富的逻辑控制与流程处理能力。iceberg-cli
iceberg-cli 是 Apache Iceberg 表规范的 Go 语言实现,面向需要在 Go 项目中读写 Iceberg 表的开发者。cloudmonkey
CloudMonkey 是 Apache CloudStack 的命令行接口工具,既能作为交互式 shell 使用,也能直接以命令行方式调用,帮助用户简化…liqoctl
Liqo 是一个开源项目,用于构建动态、无缝的 Kubernetes 多集群拓扑,支持异构的本地、云和边缘基础设施。apache-polaris
Apache Polaris 是一个面向 Apache Iceberg 的开源全功能目录服务,实现了 Iceberg 的 REST API,让 Doris…openssl@4
OpenSSL 是一套开源、商用级、功能完整的加密工具箱,主要服务于 TLS(早期称 SSL)、DTLS 和 QUIC 协议。所属分类:命令行工具