Day4
白嫖 Kaggle 云端 GPU:命令行一键跑重计算任务
Kaggle 为完成手机验证的账号提供每周约 30 小时 GPU、20 小时 TPU 的免费额度。这些算力不仅能开网页 Notebook,还能通过官方 CLI 以「无头脚本」的方式调用:把任务推到云端排队执行,跑完主动发通知,本地零负载。本文记录整套流程。
一、准备工作
- 注册并登录 Kaggle 账号。
- 在 Account 设置里完成 Phone Verification(手机验证),这是解锁 GPU/TPU 的硬性前提,无需信用卡。
- 在 Account → API → Create New Token 生成一枚 Access Token,格式以
KGAT_开头。注意:Token 有效期只有约 3 小时,用之前现生成,过期就重新生成。
二、安装 CLI 并配置凭证
安装官方命令行工具(顺带把 six 一起装,规避 2.2.5 在某些新版 Python 下缺依赖报错):
pip install six kaggle
把 Token 落地到固定位置并收紧权限:
mkdir -p ~/.kaggle
printf '%s' 'KGAT_你的令牌' > ~/.kaggle/access_token
chmod 600 ~/.kaggle/access_token
验证鉴权是否打通:
kaggle config view
看到 auth_method: ACCESS_TOKEN 并显示用户名即成功。若 kaggle 不在 PATH,统一用 python -m kaggle 调用。
三、写一个 GPU 任务
新建目录,放入两个文件。
1)kernel-metadata.json —— 给云端容器的「点菜单」:
{
"id": "你的用户名/任务名",
"title": "任务名",
"code_file": "main.py",
"language": "python",
"kernel_type": "script",
"is_private": "true",
"enable_gpu": "true",
"enable_tpu": "false",
"enable_internet": "true"
}
关键字段:enable_gpu 置 true 才会分配加速器;enable_internet 置 true 容器才能联网下载素材;is_private 设 true 保持私有。
2)main.py —— 真正的重活。把训练、推理、转写等代码写进来,产物写入 ./output,结尾发一条 Webhook 通知即可。示意:
import os
import requests
WEBHOOK_URL = "换成你自己的机器人 Webhook 地址"
def main():
print("云端 GPU 任务启动")
# ... 这里放你的 CUDA / 训练 / 转写逻辑,产物写入 ./output ...
requests.post(WEBHOOK_URL, json={
"msgtype": "text",
"text": {"content": "任务完成,产物已就绪"}
}, timeout=10)
if __name__ == "__​main__":
main()
注意 Webhook 报文格式要按机器人类型来:企业微信是 {"msgtype":"text","text":{"content":...}},和飞书的格式不同,别混用。
四、一键推送到云端
在任务目录的上一级执行:
kaggle kernels push -p ./任务目录
看到 Kernel version 1 successfully pushed. 就发射成功。查状态:
kaggle kernels status 你的用户名/任务名
状态一般经历 QUEUED(排队)→ RUNNING(运行中)→ COMPLETE(完成)。想取回产物:
kaggle kernels output 你的用户名/任务名
跑完后群里会收到 Webhook 通知,全程不用守着,也不耗本地流量。
五、几个坑
- Token 3 小时过期:公开分享或隔天再用的 Token 基本失效,务必现用现生成。
- GPU 型号不能指定:
enable_gpu只能开/关,具体给 P100 还是 T4×2 由平台分配;TPU 排队常常很久,不一定能起来。 - 额度按账号算:每周免费时长与账号绑定,多开任务会互相挤占。
- 手机验证别忘了:没验证的账号即使推送成功也拿不到加速器。
小结
整套流程就是:生成 Token → 配 CLI → 写元数据 + 脚本 → kernels push → 等 Webhook 报喜。把重计算甩到云端、本地只当调度中枢,对于没有独立显卡但又偶尔需要算力的场景,这套方案相当够用。
- 点赞
- 收藏
- 关注作者
评论(0)