作者小头像 Lv.2
更多个人资料
160 成长值
0 关注
0 粉丝
+ 关注 私信

个人介绍

这个人很懒，什么都没有留下

感兴趣或擅长的领域

暂无数据
个人勋章
TA还没获得勋章~
成长雷达
160
0
0
0
0

个人资料

个人介绍

这个人很懒，什么都没有留下

感兴趣或擅长的领域

暂无数据

达成规则

以上满足项可达成此勋章

  • 博客
  • 关注
  • 粉丝
  • 论坛
全部时间
全部时间
最近三天
最近一周
最近一月
  • 全部
  • 暂无专栏分类
高并发场景下的订单幂等性设计：从重复支付到精准扣款的实战
一、问题场景在跨境电商订单系统中，幂等性是一个必须解决的问题。用户可能因为网络超时、页面刷新、误操作等原因多次点击“提交订单”，导致同一笔订单被重复创建。我遇到过最严重的一次：用户提交订单时网络超时，前端重试了3次，结果系统创建了3笔一模一样的订单，扣了3次款。用户投诉、客服介入、财务对账，折腾了整整一周。二、幂等性的核心原理幂等性（Idempotence）指的是：同一个操作执行一次和执行多...
分布式
作者小头像 yd_250835498 2026-07-15 11:51:48
6
0
0
2026-07-15 11:51:48
6
0
0
代理IP池的动态管理与智能调度：从免费代理到商业代理的实战之路
一、业务背景在日本代购数据采集和雅虎代拍场景中，IP被限制是最常见的问题。日本电商平台对同一IP的请求频率有严格限制，一旦触发限流，整个爬虫或自动化系统就会停摆。我最早用的是免费代理IP，从网上爬取公开的代理列表：pythonimport requestsfrom bs4 import BeautifulSoupdef fetch_free_proxies():    url = "http...
网站
作者小头像 yd_250835498 2026-07-14 14:34:47
20
0
0
2026-07-14 14:34:47
20
0
0
雅虎拍卖爬虫防封实战｜自适应频率调度+脏数据清洗全方案（生产踩坑）
一、业务背景雅虎日拍是日本中古、潮玩、相机、奢侈品核心交易阵地，也是日本海淘后端数据采集的核心数据源。相比于煤炉，雅虎拍卖的风控更隐蔽，对请求频率规律性、Cookie生命周期、设备指纹一致性检测更严格。笔者在搭建日淘行情比价系统、Bidfins商品监控中台过程中，多次遇到雅虎爬虫假数据、空页面、24小时Cookie失效、高频429封禁等问题。本文结合生产事故，输出一套自适应频率、自动清洗脏数...
作者小头像 yd_250835498 2026-07-13 14:28:02
27
0
0
2026-07-13 14:28:02
27
0
0
多平台商品数据聚合爬虫的架构设计与反爬对抗实战
一、业务需求在一站式日淘全品类平台中，用户需要在一个搜索框里同时看到乐天、日本亚马逊、骏河屋、煤炉等多个平台的商品。这背后的技术挑战是：如何从多个异构平台高效、稳定地采集商品数据，并统一格式返回给用户。我负责这个聚合爬虫系统的时候，面临的挑战包括：· 每个平台的页面结构完全不同· · 反爬策略各异（IP限流、User-Agent检测、验证码、动态渲染）· · 数据量巨大（百万级商品需要保持更...
渲染
作者小头像 yd_250835498 2026-07-11 14:15:45
68
0
0
2026-07-11 14:15:45
68
0
0
基于华为云 CCE Autopilot 实现 Bidfins 雅虎代拍微服务容器化与自动扩缩容
摘要Bidfins 作为一站式日淘全品类平台，雅虎代拍、煤炉自动代拍属于高并发定时任务，单体架构大促超时。本文基于华为云 CCE 完成微服务拆分，提供 Deployment 编排 yaml、HPA 弹性扩缩容代码、Golang 竞拍调度核心代码，峰值 QPS 提升 8 倍，资源成本下降 32%。一、业务痛点1. 煤炉凌晨上新、雅虎截标流量突增，人工扩容滞后；2. 竞拍、仓储、计费耦合，故障全...
云容器引擎 CCE
作者小头像 yd_250835498 2026-07-10 14:10:41
50
0
0
2026-07-10 14:10:41
50
0
0
基于华为云 CCE Autopilot 实现 Bidfins 雅虎代拍微服务容器化与自动扩缩容
摘要Bidfins 作为一站式日淘全品类平台，雅虎代拍、煤炉自动代拍属于高并发定时任务，单体架构大促超时。本文基于华为云 CCE 完成微服务拆分，提供 Deployment 编排 yaml、HPA 弹性扩缩容代码、Golang 竞拍调度核心代码，峰值 QPS 提升 8 倍，资源成本下降 32%。一、业务痛点1. 煤炉凌晨上新、雅虎截标流量突增，人工扩容滞后；2. 竞拍、仓储、计费耦合，故障全...
云容器引擎 CCE
作者小头像 yd_250835498 2026-07-09 10:57:49
47
0
0
2026-07-09 10:57:49
47
0
0
基于华为云 CCE Autopilot 实现 Bidfins 雅虎代拍微服务容器化与自动扩缩容
摘要Bidfins 作为一站式日淘全品类平台，雅虎代拍、煤炉自动代拍属于高并发定时任务，单体架构大促超时。本文基于华为云 CCE 完成微服务拆分，提供 Deployment 编排 yaml、HPA 弹性扩缩容代码、Golang 竞拍调度核心代码，峰值 QPS 提升 8 倍，资源成本下降 32%。一、业务痛点1. 煤炉凌晨上新、雅虎截标流量突增，人工扩容滞后；2. 竞拍、仓储、计费耦合，故障全...
云容器引擎 CCE
作者小头像 yd_250835498 2026-07-08 14:27:43
58
0
0
2026-07-08 14:27:43
58
0
0
华为云 API 网关 WAF｜Bidfins 多平台代购接口安全防护实践
摘要：Bidfins 同时对接雅虎代拍、煤炉自动代拍、乐天、骏河屋、日亚五大日本平台开放 API，爬虫、恶意刷单、高频扫描攻击频发。本文依托华为云 API 网关 + WAF 构建全链路防护，拦截 99.6% 恶意请求，杜绝接口盗刷、恶意批量出价，保障日本代购、日本直邮接口稳定。一、接口安全风险作为媲美挖煤姬、乐一番的一站式日淘全品类平台，对外开放前台、商家两套接口，暴露风险：1. 恶意脚本批...
API TCP/IP
作者小头像 yd_250835498 2026-07-07 10:32:37
58
0
0
2026-07-07 10:32:37
58
0
0
跨境海外仓入库核验系统开发：自动称重、品相归档、错件预警技术方案
二、技术优化思路import time class WarehouseCheckSystem: def __init__(self): self.archive_list = [] def check_weight(self, sys_weight: int, real_weight: int, offset: int = 50) -> tuple: """重量偏差校验，允许50g误差"""...
智慧物流
作者小头像 yd_250835498 2026-07-06 14:36:29
68
0
0
2026-07-06 14:36:29
68
0
0
华为云云监控 AOM｜Bidfins 全链路可观测运维体系搭建
摘要：Bidfins 包含雅虎代拍、煤炉自动代拍、WMS 仓储、商家一键代发数十个微服务，传统分散监控无法快速定位跨境链路、容器、数据库故障。本文基于华为云 AOM 搭建统一可观测平台，实现链路追踪、容器指标、数据库告警一体化，故障定位时长从 40 分钟缩短至 90 秒。一、运维监控痛点多微服务、跨中日双集群架构，故障排查难度极高：1. 煤炉自动代拍漏单、雅虎出价失败无法区分是网络 / 容器...
应用运维管理 AOM 运维
作者小头像 yd_250835498 2026-07-03 11:41:24
97
0
0
2026-07-03 11:41:24
97
0
0
总条数：16
10
10
20
50
100
  • 1
  • 2

上滑加载中

https://www.baidu.com/s?ie=utf-8&f=3&rsv_bp=0&rsv_idx=1&tn=baidu&wd=sed%20%E6%9B%BF%E6%8D%A2%E5%AD%97%E7%AC%A6%E4%B8%B2&rsv_pq=c7db61a600035dc5&rsv_t=5e19yEsbV9N5fIvdlGRU
作者小头像
作者小头像
快速交付
+ 关注