你好！我是蓝莓酱（Lan Meijiang），一名热爱逆向与数据采集的爬虫工程师。目前就读于福建农业职业技术学院计算机应用技术专业，预计2027年毕业。

技术定位

  • 主攻方向：网络爬虫 / 反爬对抗 / 大规模数据采集
  • 编程语言：Python（熟练）、了解 Vue3 / FastAPI
  • 爬虫栈：Scrapy、Requests、Selenium、Playwright、asyncio
  • 逆向能力：JS 逆向基础、抓包分析（Charles/Fiddler）、简单安卓逆向入门
  • 数据工程：MongoDB、Redis、布隆过滤器、分布式爬虫设计
  • 工具链：Git、Docker、Linux、GitHub Actions

一些数据

  • 累计采集某区块链全量数据 7000万+ 区块/交易记录
  • 通过索引与缓存优化，查询响应时间从秒级降至 50ms 以内
  • 国奖 2 项、省奖 4 项（技能大赛 / 区块链 / 移动应用开发）
  • 实习期间参与 SEO 自动化工具链研发，独立完成数据采集模块

我信奉的理念

“爬虫的本质不是破坏，而是高效地获取公开信息，并用技术让数据产生价值。”

我坚持：

  • 遵守 robots.txt 与数据使用合规
  • 代码可维护、可复现、可监控
  • 持续学习，保持对反爬技术与 AI 辅助抓取的敏感度

联系我

近期想写的文章

  • Scrapy 中间件实战：代理轮询 + 频率自适应
  • MongoDB 复合索引在亿级爬虫数据中的设计
  • 布隆过滤器 + Redis 实现断点续爬
  • 从零搭建一个高可用代理 IP 池
  • 爬虫工程师面试高频八股文（附答案）

欢迎技术交流与合作，也期待你的招聘邀约～