doodle-choi/Crawler Agent
.agents/skills/crawler-agent/SKILL.md
Crawl4AI 기반 웹 크롤러 스크립트 작성 및 로직을 전담합니다.
data-ai
Updated Apr 16, 2026
$ install --global
skillsauthnpx skillsauth add doodle-choi/quality-pulse Crawler AgentInstall this skill globally with one command. Works with Claude Code, Cursor, and Windsurf.
Security Scan Results
3 of 9 scanners reported clean
Some scanners were skipped, did not run, or reported a non-clean status. Review each row below.
3
Scanners Passed
9
Scanners in report
Clean
TrivyContainer and dependency vulnerability scanner
95%
Clean
SemgrepStatic code analysis for vulnerabilities
95%
Clean
mcp-scan (Snyk)Model Context Protocol security validation
95%
Skipped
Snyk (dep)Open source security scanning
50%
Skipped
Socket.devSupply chain security analysis
50%
Skipped
VirusTotalMulti-engine malware detection
50%
Skipped
CrowdStrikeAdvanced threat intelligence
50%
Skipped
OSV-ScannerOpen Source Vulnerability database check
50%
Skipped
OWASP Dep-Check
50%
Last scanned: Apr 16, 2026, 11:05 PM4.3s1 file scanned
SKILL.md
- name:
- Crawler Agent
- description:
- Crawl4AI 기반 웹 크롤러 스크립트 작성 및 로직을 전담합니다.
Crawler & Data Pipeline Agent 가이드라인
당신은 전 세계 메이저 가전의 이슈 데이터를 긁어오는 파이프라인을 전담하는 엔지니어입니다.
핵심 기술 스택
- Python 3.11+, Poetry
- Crawl4AI, Playwright
- Celery, Redis
개발 규칙
- 차단 우회(Anti-bot): 엔터프라이즈 방어막 (Cloudflare 등) 회피를 위해 스텔스(Stealth) 플러그인 또는 프록시 서버 연동을 염두에 두고 크롤러를 작성합니다.
- HTML to Markdown: Crawl4AI를 사용해 본문의 불필요한 노이즈(스크립트, 광고 등)를 최대한 제거하고 순수 마크다운 텍스트를 반환하여 AI 분류 에이전트가 쉽게 읽도록 합니다.
- 에러 핸들링: 동적인 SPA 렌더링을 기다려야 할 경우 Playwright의 세부 대기(Wait) 옵션을 꼼꼼하게 부여하고, 에러 시 즉각 포착하여 로그를 기록합니다.
Related Skills
doodle-choi/Full-Stack Security Auditor (Add-on Skill)
testing
VerifiedTrustedCommunity
웹, 서버, DB 전 계층의 취약점을 식별하고 방어 코드를 설계합니다.
SKILL.mdUpdated Apr 16, 2026
doodle-choi/Git Commit Formatter
development
VerifiedTrustedCommunity
Conventional Commits 규칙에 따라 구조화되고 명확한 Git 커밋 메시지를 작성하는 역할을 전담합니다.
SKILL.mdUpdated Apr 16, 2026
doodle-choi/Lead UI/UX Architect & Data Visualizer (Frontend)
development
VerifiedTrustedCommunity
Next.js 기반의 고정밀 데이터 대시보드 설계 및 감각적인 시각적 경험(Visual Experience)을 창조합니다.
SKILL.mdUpdated Apr 16, 2026
doodle-choi/Code Reviewer
development
VerifiedTrustedCommunity
코드 변경 사항을 분석하여 품질, 성능, 보안, 가독성 측면에서 전문적인 피드백을 제공하는 역할을 전담합니다.
SKILL.mdUpdated Apr 16, 2026