v0.6:R1–R4 和独立限量发售已实现,消息队列统一为 RabbitMQ。实际范围见当前进度和手动验收;R5 公共测试网、自动 HA 和长时容量验证仍未完成。历史报告里的 Kafka 不作为 RabbitMQ 成绩。
当前基线:模拟 v0.3 保留,独立链模式升级为 v0.5。新增完整历史查询、任务版本保护、已确认事件索引、只读对账和基础告警,见 设计、执行报告。历史报告与证据保留原版本。
日期:2026-10-12。依据用户最新定位:展示Go高并发后端和中间件使用,同时体现Web3理解;智能合约占小部分。本页保留原设计路线;独立v0.4已实现并实际联调三中间件、Anvil与钱包页面。最终状态/差异见v0.4架构,验证见报告。
**推荐选B的受限版本:链下订单簿撮合+钱包签名订单+小型链上原子结算合约。**后端负责接入、订单排序、预留、可靠日志、中间件、交易任务、事件索引、恢复与可观测;合约只负责检查授权/订单约束、防重复成交与资产原子交换。工程投入以约80%后端/20%链交互与合约为规划,非实测比例。
相比先做链上出入金,此选择更直接展示“实际成交受合约验证”;通过不自研金库/充值提现、先限定一个测试网络与两个标准测试ERC-20来控制范围。它细化了可行性分析中的B,不把此前A的推荐当必须先完成的依赖。
1. 第一版目标与取舍#
一个EVM网络(先Anvil,再选一个测试网)、一个MockWETH/MockUSDT市场、钱包签限价单、两单撮合、合约原子结算、部分成交与链上撤单。第一版只支持限价GTC,后续再讨论IOC/保护价;链上模式和现有完整模拟模式独立,不降低模拟版已有能力。
钱包EOA优先,明确第一版支持范围;需要支持合约钱包时再加EIP-1271与测试。代币只允许配置明确且行为标准的测试token,不声称兼容所有ERC-20。订单资产身份包含chainId/地址/decimals,交易资产用包装币,原生ETH只用于交易Gas。
第一版不做全链上订单簿、AMM、跨链、杠杆、金库托管、提现、多市场分区、自动高可用或自研区块链。钱包登录与合约下单授权分开,平台管理员无权凭空生成链上余额。
2. 系统如何分工#
flowchart LR UI[钱包与页面] --> API[Go接入:签名/限流/参数] API --> J[SQLite FULL命令日志] J --> E[单写者:排序/撮合/待结算预留] E --> P[SQL投影与可靠结算意图] P --> R[Redis:行情缓存/共享限流] P --> K[Outbox发布到RabbitMQ] K --> TX[Go relayer:持久化交易任务] TX --> C[Settlement合约] C --> SC[Go:receipt/活动轮询/块锚点] SC --> J K --> H[历史索引/通知消费者] SC --> DB[PostgreSQL:链任务/事件/扫描状态] H --> DB R --> UI DB --> Q[查询API] Q --> UI |
图表达目标职责,不要求每个框独立部署一个微服务。可以是交易服务+链worker两种进程,外围多个goroutine;同一市场Engine只有一个拥有者。多个API入口应路由到该拥有者,不各自建同市场核心。
图中链任务状态不是可以清空的普通投影。扫描结果作为有确定身份的新命令进入日志;正常重放不进行RPC调用/广播,不从旧数据库余额强行覆盖核心。
3. 中间件怎么用才有面试价值#
3.1 Redis:解决读压力与共享限流#
先做两件事:公共盘口快照缓存;按IP/账号/操作类型的外围限流。限流使用原子操作或Lua,不在Engine中请求Redis。登录bcrypt与钱包签名校验有独立并发预算,避免认证计算挤占所有资源。
行情key绑定dataset/market,value带applied_seq与生成时刻;写入需要版本裁决,防止慢请求覆盖新快照。缓存缺失/故障按策略回源SQL,要求min_seq的请求不能返回低水位缓存。private订单和余额先走SQL,不缓存成资金裁决来源。
限流Redis故障采用明确策略:普通公共读可回源并使用本地预算;昂贵认证/交易入口可本地保守限流或拒绝。不能用“Redis不在线就无限放行”掩盖保护失效。
面试证据:相同并发下SQL查询量、缓存命中/失效、p95/p99、Redis关闭后的服务行为。不能只说“用了Redis所以快”。
3.2 RabbitMQ:可靠解耦外围任务与多个消费者#
当前分发结算意图给 relayer 任务接收器、发售资格事件给签名任务接收器。历史索引直接扫描已确认链块,通知广播仍是后续扩展,未实现 SettlementStatusChanged 广播。创建订单的关键路径仍是有界队列→FULL 日志→单写者。
**事务Outbox先保证“业务结果与待发布意图同时可靠存在”,再发布RabbitMQ。**如果保留SQLite投影,确定性结算意图可与该条投影同一事务写outbox,恢复尾部时补齐;发布状态可重复发送,消费者按settlementId幂等,不能只用一个published布尔值承诺恰好一次。
以后迁移SQL投影到PostgreSQL时保持同一数据库事务中的业务投影与outbox;禁止把SQLite结果提交与PostgreSQL outbox插入称为跨库原子事务。日志已有但outbox还未落库时,依靠重放补齐,不盲目把丢失通知看作结算失败。
relayer 收到 RabbitMQ delivery 后先持久 SQL 任务(settlementId 唯一),成功才手动 ack;广播由任务驱动。发布 confirm 后才标记 outbox,断连可能重投;链转账不承诺 exactly-once,靠任务去重、raw/hash/nonce 与合约约束恢复。
同一队列多个消费者竞争消息,独立订阅必须增加独立队列和交换机绑定。当前使用默认交换机直达持久 quorum 队列,不支持 Kafka group/offset 回放。nonce 仍由受控单所有者分配,增加消费者不等于可以并发争抢同一钱包 nonce。
消息失效不应只扔进死信后释放资金。区分可重试、需要人工核对与确定业务失败,持久任务/SQL对账仍能发现卡住意图。第一阶段可先用SQL worker轮询证明协议,再加RabbitMQ分发证明不改变可靠性。
面试证据:消息重复/消费崩溃/发布后未标记/积压/重放,确认不重复链结算、任务可恢复、交易接入不会无限积压。
3.3 PostgreSQL:外部任务权威与历史查询#
先承担chain_transactions、settlement_tasks、chain_events、scanner_progress以及钱包绑定/签名挑战等新增持久状态,设计唯一约束、事务、索引和幂等upsert。高并发历史读可通过专门投影提供,但业务可见水位必须一起保存,不能查一份没有水位的异步复制数据宣称最新。
现有SQLite FULL journal继续是Engine输入权威,当前模拟auth/views不强行一次迁移。新增SQL链状态是另一类权威,备份恢复要和业务命令/外部已发送交易对账;它不能被当成views删除重建。
外部签名交易raw tx、发送账户/nonce、txHash、替换关系、任务进度须在广播前可靠存储。恢复旧SQL备份可能落后真实链,先扫链和核对nonce/任务,不因数据库倒退重新转账。
面试证据:任务唯一约束与事务、explain索引、并发任务claim、跨库崩溃恢复、备份落后链状态的处理。不要增加Redis锁取代唯一约束,也不要复制一份可用余额到SQL让它与Engine各自批准花费。
3.4 观测:说明性能瓶颈在哪里#
沿用独立诊断与 Prometheus,观察接入/拒绝、inflight、核心/日志/投影、缓存、RabbitMQ Ready/Unacked、任务滞留、广播失败、最终性和对账。RabbitMQ 自身队列指标从 broker 管理端观察。
现有count/sum/max不是p99。需要分位数时设计合适histogram或由负载工具记录端到端样本,区分批耗时与每命令耗时。middleware安装数量不代表性能,分层测量才有说服力。
4. 合约保持小,但具备真实业务意义#
一个Settlement.sol业务合约,外加标准测试token fixture;不自行实现密码学/ERC-20基础。业务合约负责:
- EIP-712验订单签名;签名域绑定chainId/verifyingContract/version。
- 核验资产地址、订单方向、数量、价格约束、deadline、接收方与必要费用条件。
- 记录每个orderHash累计成交数量,部分成交不超过授权;取消订单或失效nonce防后续执行。
- 核验两边授权并按同一笔交易原子转移两种token,任何一边失败整笔revert。
- 发出可索引的成交/取消事件,包含必要业务引用;采用SafeERC20和重入防护。
用户先approve合约,再签订单。两种授权不同,签名不是转账成功;合约约束不能靠relayer在请求参数里自报通过。服务只给出满足双方限价的执行方案,合约再次核验。
第一版可以指定唯一relayer提交成交简化操作,但订单安全仍靠用户签名和合约约束;服务不可用会影响成交,平台FIFO仍是链下承诺。若开放任何执行者或多个relayer,必须处理并发填充/取消与本地预留失效,不假称当前设计自动支持。
签名订单的价格可编码为允许付出的整数数量与至少收到的整数数量,或规范化整数price/tick;选一种统一规格。部分成交乘除和舍入规则必须同时符合双方限制,不能每笔向不利于用户的方向舍入后仍说满足原报价。Go与Solidity对同一组输入做一致性测试。
管理员页面保留运营查询,不控制真实资产余额。演示余额只属于模拟mode;链上模式显示已索引钱包余额/allowance、待结算数量与实际链确认,不沿用注册赠币流程。
5. 订单簿保留,资金模型必须改#
原Engine.place立即move双方余额并产生Trade。新链上mode应产生MatchIntent/SettlementRequested,锁住候选订单的待结算数量;外部确定结算结果进入新命令后再生成最终Trade。
一个参考状态划分:
订单:可撮合余量 / 待结算余量 / 已确认成交 / 已取消量 任务:READY → SIGNED → BROADCAST → INCLUDED → FINALIZED ↘ UNKNOWN:继续查询 确定失败 → FAILED:按规则恢复订单可撮合量或取消 |
订单数量守恒需要纳入待结算量。不可将未最终确认收到的币作为下一笔单的可用资金;第一版允许确认前一直pending,用吞吐/资金占用代价换清晰边界。
钱包余额不是服务可实际冻结的钱。平台本地预留只能防止自己重复安排资金,用户仍可转币、撤allowance或取消订单,使合约执行失败。这是非预存方案的代价;不能为追求“100%本地成交成功”悄悄改成金库托管。
receipt失败不等于所有任务可直接重新结算:同订单可能在其他交易已填充或被取消,先核对合约权威状态。RPC超时更不能恢复余量然后生成第二个任务。取消本地挂单与链上取消区分显示,已广播结算与取消谁先执行由链决定。
EIP-712 nonce、业务幂等key、orderHash、settlementId、Ethereum发送nonce、AMQP deliveryTag分别解决不同范围的重复与顺序,文档/字段名需显式区分。
6. 为什么这仍然是一个后端项目#
合约不维护红黑树/FIFO,不做订单分页/行情推送,也不负责HTTP背压、Redis缓存、RabbitMQ消费者或业务日志恢复。后端主要难题集中在:
- 多并发入口与单写者所有权之间的协调、工作量预算与可观测延迟。
- 从单条到批次的可靠日志/投影,缓存可见水位与消息解耦。
- SQL任务、RabbitMQ与区块链之间没有统一事务,怎样处理重复、未知结果与恢复。
- 外部RPC故障、nonce协调、日志补拉、链重组、结算失败与本地预留一致性。
- 压测和故障实验如何证明性能与正确性,而不是只展示调用成功。
项目可以定位为“Go单写者订单簿与异步链上结算系统”,而非“完整去中心化交易所”。钱包、签名、链上资产交换都能现场展示,同时保留后端深度。
7. 分阶段实现与验收#
| 阶段 | 具体交付 | 要拿出的证据 |
|---|---|---|
| R1 外围Redis | 行情版本缓存、共享限流、本地故障预算 | 压力/命中/回源、慢写不覆盖、Redis断开 |
| R2 结算意图与SQL任务 | 新mode/命令/数量不变量、outbox、任务表 | 回包/落库/worker崩溃,重放不发链交易 |
| R3 最小链闭环 | Anvil测试token、签单、合约settle/cancel、Go发送扫描 | 双钱包部分成交、失败回滚、签名重放拒绝 |
| R4 RabbitMQ解耦 | outbox发布、幂等消费、历史/通知消费者 | 重复/积压/消费恢复、不重复结算 |
| R5 测试网与交付 | 确认策略/重组、钱包页面、容器、观测/文档 | 实际测试网记录、状态恢复、分层容量证据 |
上表是最初路线,现已在v0.4完成本地链和三中间件等能力;v0.5已补本地完整已确认事件索引,公共测试网和云仍未完成。后续路线按真实业务架构评估细化,不能把尚未执行的部署当验证成绩。
链上功能保持限价 GTC 与小成交批次。RabbitMQ 基于负载调整队列、消费者与 QoS,扩传输层不改变单市场一个核心或结算 nonce 所有权。
8. 面试时能讲什么,不能讲什么#
完成后可讲:通过单写者保证撮合状态顺序;Redis缓存隔离查询与SQL,RabbitMQ解耦外围消费者,outbox+SQL任务+合约约束协调未知结果;订单离线签名,资金在链上原子交换,扫描器处理重放和最终性。
吞吐分成接入、新订单受理、匹配、结算任务、链上最终成交五种口径。只测Go核心不可写“链上每秒处理X单”;RabbitMQ集群与多个查询API不意味着撮合核心已经高可用。已实现范围按v0.5报告陈述;自动HA/链批量结算未完成,不能放进履历当已完成能力。
更多资金与链上语义见链上可行性,已有核心/日志边界见架构,现有测试执行见测试手册。工具官方资料入口在可行性文档,本轮未重新联网核验版本或网络参数。
最终实现与原路线差异#
二级市场采用钱包 approve,本地预留不冻结余额;失败取消两单余量。公共 state 缓存 250ms、限流 50/s/IP。RabbitMQ 持久队列、confirm、手动 ack 与 SQL 稳定 ID 配合;PG owner 不等于 HA。链回包等待投影,确认后 maker 余量档尾重挂,无等待期间严格绝对 FIFO。发售的卖方库存预存属于独立资产边界。
v0.5 路线更新#
生产架构阶段 A 已落地,日志与合约协议保持兼容。当前展示 Redis 共享限流/缓存、RabbitMQ outbox、PG 原交易任务、单写者、最终性索引和跨系统对账。下一阶段先做交易 attempts/同 nonce 替换、公共测试网复查,不因演示需求立即拆微服务或托管用户资金。