Скилл · Данные и ИИ

Spark Engineer

Обработка больших данных на Spark: партиции, память, потоки.

Файл spark-engineer.md ★ 10k у репозитория Лицензия MIT

О скилле

Что делает

Пишет и оптимизирует задачи для распределённой обработки больших данных на кластере: преобразования таблиц, запросы, разбиение на партиции и управление памятью рабочих процессов. Поддерживает потоковые вычисления. Дата-инженеру нужен там, где привычные библиотеки уже не тянут объём и падают по памяти.

sparkbig-datapysparkdata-engineeringclaude-code

Источник

Откуда скилл и как поставить

Автор и репозиторий

Автор — Jeffallan. Репозиторий собрал 10k звёзд на GitHub. Распространяется под лицензией MIT. Файл spark-engineer.md открыт: прочитать его можно до установки.

Открыть репозиторий

Установка в Claude Code

Склонируйте репозиторий в ~/.claude/skills/ и перезапустите Claude Code — скилл подхватится сам. Дальше просто попросите ассистента использовать «Spark Engineer».

Cursor и другие редакторы

Скопируйте содержимое SKILL.md в системные правила проекта. Скиллы не запускают код — это текстовые инструкции, которые меняют поведение модели.

Хотите внедрить, но некогда разбираться?

Подберу скиллы под вашу задачу, поставлю и покажу на живом примере — быстрее, чем читать документацию.

Получить консультацию

Рядом на полке

Куда идти дальше

Категория «Данные и ИИ»

Анализ данных, пайплайны, ML, интеграция LLM в продукты.

Ко всем скиллам категории

Словарь терминов

Промпт, токен, MCP, агент — 44 понятия простыми словами, если что-то на этой странице звучит незнакомо.

Открыть словарь

Гайды

Пошаговые разборы: от первого промпта до своих агентов и автоматизации.

К каталогу гайдов

Вопросы

Частые вопросы

Что делает скилл Spark Engineer?

Обработка больших данных на Spark: партиции, память, потоки. Это Agent Skill — текстовое расширение для Claude Code и Cursor: подключается файлом SKILL.md и меняет поведение ассистента, кода внутри нет. Темы скилла: spark, big-data, pyspark, data-engineering, claude-code.

Как установить Spark Engineer?

Склонируйте репозиторий автора в папку скиллов: git clone https://github.com/Jeffallan/claude-skills ~/.claude/skills/spark-engineer — и перезапустите Claude Code, он подхватит скилл сам. В Cursor и похожих редакторах скопируйте содержимое SKILL.md в правила проекта. Перед установкой файл стоит прочитать: это обычный текст.

Это бесплатно?

Да. Скилл «Spark Engineer» открыт: автор — Jeffallan, скачивается из официального репозитория без регистрации. Распространяется под лицензией MIT. На этой странице ничего покупать не нужно — каталог часть моего раздела «Обучение».

Нужен такой результат в вашей работе?

Напишите, чем занимаетесь, — скажу, закроет ли задачу этот скилл или собрать решение под вас.