WuYongJie/CaiWuXiTong
1
0
Fork 0
Code Issues Pull Requests 4 Packages Projects Releases Wiki Activity
802 Commits 212 Branches 10 Tags
Commit Graph

290 Commits

Author SHA1 Message Date
limeng
63799de416 fix(发货数据): 快递公司/仓库按实际出库单取，同步命令内存上限调至 4G 
- 发货明细(jst_order_express_details)可能停在作废前的旧分配（如先分工厂代发仓、后改外采由总仓出库；或换单后仍是旧快递公司），
  工作平台按实际出库单显示。快递公司与出库单不一致或为空时改用出库单 logistics_company，
  仓库按出库单 wms_co_id 映射（从快递公司一致的明细行学习仓库名，扫描结束统一回填）。
- 9 月核对：快递名称不一致 434/331,612，仓库不一致 85，其中外采快递、线下快递、换单类为此原因。
- jushuitan:sync-shipping 内存上限 1536M -> 4096M：整月窗口重跑在扫描后段内存耗尽（退出码 255）。

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
Claude-Session: https://claude.ai/code/session_014nvGZkg27YMEdhry6eiuwf
 2026-10-08 10:52:10 +08:00
limeng
471aa714e8 fix(发货数据): 以本地全量核对通过的版本替换 #282 的同步实现 
#282 的整合版在本地全量同步中发现问题，改用已与工作平台逐单核对通过的实现(保留 #283/#284 及 main 其它改动)：
- 订单元数据只缓存精简字段(状态仅存取消/拆分/合并，标签只存是否线上发货)，全表扫描后释放；
  #282 缓存完整标签会在全表扫描时内存超限导致同步中途退出
- 按规则排除的包裹(取消/拆分/合并/线上发货)清除本窗口旧记录
- 剩余 @ 前缀统一去掉(工作平台导出无 @)
- 自动发货仓虚拟/补差单：单号已被其它包裹实际输出时留空(对齐工作平台)
- 出库映射保留作废单但排在有效单之后；换单按出库单号顺序一对一配对
测试：同步单测相应调整(作废单排序、多候选配对)。
验证：本地清空 8.15-9.30 后全量同步 9.1-9.16，与工作平台对比两边共有包裹 195,555，带单号漏拉 1 单。

Co-Authored-By: Claude Opus 5.5 <noreply@anthropic.com>
Claude-Session: https://claude.ai/code/session_014nvGZkg27YMEdhry6eiuwf
 2026-10-07 16:33:23 +08:00
qiuxiang
ae694004cf 总账备注匹配：账单项目自动去 wx 前缀再查一次 
先原样匹配，不中则去掉开头 wx 前缀（wx基础软件服务费 → 基础软件服务费）再匹配；原样命中优先，不影响既有结果。
科目映射表优先级链路与回落原总账备注链路都按此顺序匹配。
 2026-10-07 15:58:42 +08:00
qiuxiang
0933941533 总账备注取科目映射表：平台/账单项目键做大小写与空格归一 
科目映射表平台写「唯品会JX」、页签内部键「唯品会jx」，原样索引匹配不到；统一小写去空格后索引与查找。
 2026-10-07 15:30:56 +08:00
qiuxiang
1cbc8312a6 店铺收款账户账单：总账备注优先取「科目映射表」的财务备注 
账单项目在「科目映射表」里能匹到（同平台+同项目）时，总账备注取该规则的「财务备注」；
多规则时按业务备注/商品名称关键词取最具体的一条；匹不到则保留原有总账备注映射。规则按平台+项目预索引，避免逐行扫全表。
 2026-10-07 15:24:58 +08:00
chenxi
73617e4899 Merge remote-tracking branch 'origin/main' 2026-10-07 14:50:18 +08:00
chenxi
57c1ea7046 抖音账户关键词框与其它页签统一（去掉匹配方式下拉） 
关键词改为单输入框；后端对 15~30 位纯数字按等值匹配（记录编码/订单号）快速返回，
其余仍为包含匹配，避免抖音账户全表扫描导致的长等待。
 2026-10-07 14:50:07 +08:00
qiuxiang
4b3baeaaf0 拼多多完整账单导入：账单项目为空时按「收支方向 + 业务描述」回填 
源文件偶发账单项目为空的行；导入时在 activate 之前用同代已有口径回填（方向+描述取众数），
找不到口径的行保持原样。生产已用同一规则回填历史 10 行（技术服务费 4 / 交易收入 4 / 优惠券结算 1 / 提现 1），
拼多多页签总账备注为空从 10 行降到 0。
 2026-10-07 14:36:34 +08:00
renshen
c4a976751d 修复订单售后页面一直转圈：店铺候选改成定时预热 
上一次把店铺候选的完整计算放在 app()->terminating() 里，但服务器是 mod_php，
响应要等整个请求（含终止回调）结束才算完成，浏览器就一直转圈、侧边栏停在骨架屏。
线上实测：发布后第一个打开订单售后费用明细的人，页面会卡两分钟以上。

改成：页面只返回毫秒级的店铺目录兜底，完整候选（目录 ∪ 订单镜像店铺）由新增的
order-data:warm-shop-candidates 每小时预热一次，并在发布脚本的 cron 里注册。
 2026-10-07 14:21:36 +08:00
WuYongJie
a9da8d4447 修复发货镜像字段校准与合并列表耗时 (#283) 2026-10-07 14:08:20 +08:00
renshen
916fb30f37 修复批量筛选：纯数字单号当数组键会被 PHP 转成 int 
batchValues() 原来拿值本身当数组键去重，纯数字订单号（如 3317080368285022883）会被
PHP 转成 int，后续 whereIn 就成了数字和长文本比较，走不上 so_id / outer_oi_id 的
前缀索引，实测退化成全表扫描（70 秒以上）。

改成键加 v 前缀、返回原字符串，ctype_digit 显式传字符串。新增用例覆盖前导零单号
0001234 与 1234，防止再回归。
 2026-10-07 14:05:53 +08:00
renshen
e5922dd78e 订单售后费用明细 / 商品推广费用明细：订单号和商品编码支持批量查询 
两个页签的「订单号」「商品编码」改成多行输入框，可以直接粘一整列：
每行一个，或用逗号、空格、分号、顿号分隔，一次最多 50 个值，多值取并集。

- 订单号批量：先去两套来源解析候选 o_id（单表、等值 IN，走各自前缀索引），
  再按订单过滤；单个订单号仍保留「从头匹配」的模糊语义。
  线上实测 20 个真实单号解析 0.01 秒。
- 商品编码批量：每个编码在 商品/款式/店铺编码（推广页为 item_id）里匹配一组，
  多组 OR；仍受统计日期/订单日期范围约束。
- 非淘系旧查询路径同步支持批量，保持两套口径一致。
 2026-10-07 13:55:02 +08:00
WuYongJie
6c054c7081 整合发货补漏与导出口径修复，保留主线同步保护 (#282) 2026-10-07 13:52:18 +08:00
renshen
4b97b30a3a 商品推广费用明细：店铺筛选改成和订单售后费用明细一致的多选控件 
- 把「店铺名称：可点选的多选 + 模糊搜索」抽成公共组件
  partials/order-data-shop-picker.blade.php，订单售后费用明细改为引用它，
  商品推广费用明细用同一个控件（原来是一个纯文本输入框）。
- 推广页提交 shop_name[]（多个取并集），后端镜像查询和非淘系旧查询都改成
  按多个店铺 OR 匹配，仍兼容原来的单个 shop_name。
- 推广表的店铺名带下划线（天猫_卓禾家具旗舰店），和订单镜像的「天猫-…」
  不是同一套命名，所以候选单独取自 ops_item_sales_cost_ratio 当前统计日期
  出现过的店铺，按日期缓存 24 小时（单次约 0.4 秒、约 400 个店铺）。
 2026-10-07 13:39:25 +08:00
qiuxiang
d76b102bca 总账备注平台口径：1688 / 新佰广 前缀按阿里巴巴匹配 
新佰广1688、1688xxx 店铺名不带「阿里巴巴」前缀，之前落到页签默认平台（淘系支付宝=淘宝），
1688 系账单项目匹配不到总账备注；新增两条前缀映射（1688、新佰广 → 阿里巴巴）并补单测断言。
 2026-10-07 13:20:06 +08:00
renshen
af83d75a00 订单售后费用明细：订单号查询改为先解析候选订单再过滤 
订单号原来在「订单 ⋈ 明细」关联后做三列 %x% 匹配，没有日期条件时优化器会放弃
索引，淘系那套 520 万订单 × 680 万明细必须全表扫描，线上实测单条跑到 19 分钟
还没结束（还占满 Apache 工作进程）。

改成两段式：先用带前缀索引的单表查询把订单号解析成两套来源各自的候选 o_id
（线上订单号 / 子订单号从头匹配、内部订单号按数值等值），再让分支按 o_id 过滤。
两套来源分开解析，避免两侧 o_id 撞号。候选超过 500 条或订单号不足 4 个字符时
退回原来的包含匹配，保持既有行为。

顺带给 jst_OrderItem 补 outer_oi_id 前缀索引（非淘系子订单号原来要扫 70 秒），
已在生产建好索引。
 2026-10-07 11:31:56 +08:00
yueyang
96b8f503c6 账单明细：平台筛选改为按账户/数据来源分类（与店铺收款账户账单页签一致） 
- 平台下拉改为淘系支付宝/淘系微信/拼多多/京东账单/京喜账单/京东网银钱包/抖音/得物

- 京东账单与京喜账单同表，按店铺前缀切分；财务备注/财务类型仍按店铺前缀匹配映射表
 2026-10-07 11:12:24 +08:00
renshen
5b95b655bb 运费对账：全量汇总缓存 1 小时，避免每 15 分钟重跑两分钟的重查询 
无筛选的全量汇总约 110~200 秒，按原来的 900 秒缓存会让常看这个页面的人
反复等两分钟；带筛选的汇总走索引很快，保持 15 分钟。
 2026-10-07 11:01:29 +08:00
renshen
af8f1403fb 修复运费对账汇总卡死与订单店铺候选查询过慢 
- 运费对账全量汇总：哈希关联的 join buffer 从 16MB 提到 128MB（空间上限 384MB）。
  300 万行明细 × 400 万行最新关联表在 16MB 下会退化成磁盘多趟扫描，实测超过
  max_statement_time(300s) 也跑不完，页面「记录数/运费合计」永远停在计算中；
  调整后约 110 秒出结果并写入缓存。
- 订单售后费用明细店铺候选：改回两个来源各自 DISTINCT 后在 PHP 合并（UNION 会
  把两个上百万行结果一起物化去重排序）。同时完整候选只算一次并缓存 24 小时，
  冷缓存时先返回毫秒级的店铺目录，完整列表放到响应结束后补齐，避免页面为了
  下拉候选把工作进程占住两分钟。
 2026-10-07 10:52:36 +08:00
renshen
cf7924fdc6 订单售后费用明细：合并淘系（天猫/淘宝）订单来源 
聚水潭把淘系订单放在 jst_qmcust_* 系列；页面镜像已接入后，报表改为两套来源合并：

- 订单、明细、售后分别按来源取数（ops_jst_orders* 与 ops_jst_qmcust_*），列映射一致；
  淘系明细没有 send_warehouse，用订单上的 wms_co_id 兜底
- 每套来源各自下推筛选条件并按当前页各取所需行数再合并，避免整表物化后排序
- 店铺候选同时包含两类店铺（天猫-/淘宝- 前缀）
- 镜像数据集登记：jst_qmcust_orderlist/_item、jst_qmcust_refundlist/_item 及分层策略
- 用例：淘系订单与售后进入报表、店铺候选包含淘系、双源多店铺筛选
 2026-10-07 10:00:20 +08:00
renshen
83e5108ce6 订单售后费用明细：重置后不再自动带日期 
- 点“重置”或提交空日期时，不再回填近 7 天默认区间，日期框保持为空并做不限日期查询
- 首次进入页面仍保留近 7 天默认区间；导出文件名在无日期时显示“不限日期”
- 补充过滤归一化与页面渲染用例
 2026-10-07 10:00:20 +08:00
renshen
eda10bd740 订单售后费用明细：店铺筛选改为可点选的多选模糊查询 
- 店铺名称由单个输入框改为可点选的多选下拉：候选里可按关键字模糊筛选、多选、全选当前结果/清空
- 提交 shop_name[]，多个店铺取并集逐个模糊匹配；保留旧的单值 shop_name 兼容
- 候选来自订单镜像中真实出现过的店铺，缓存 1 小时；单次最多 50 个店铺，超出在面板内提示
- 补充仓库层与页面层用例
 2026-10-07 10:00:20 +08:00
WuYongJie
bfc119608f feat: 新增税金预测表逻辑配置页面 2026-10-06 23:18:53 +08:00
WuYongJie
8419d4097c feat: 内部流转报表导入工作簿数据并支持查询导出 
- 新增共享镜像表 business_internal_flow_records 与整份替换导入命令 internal-flow:import
- 按 Excel 表头展示抬头、标签、预计9月销量、开票、所需进项成本、收票、剩余缺口与开票比例
- 复用公司基础信息的字段查询、表头排序、筛选字段与导出 Excel 交互
- 新增导入与页面测试，覆盖合计行跳过、重导入替换、筛选排序与未导入空状态
 2026-10-06 22:08:08 +08:00
qiuxiang
5f1fc25578 修复：未带「总账备注」筛选时 filteredQuery 读取未定义键 
选择总账备注才生成 bill_items；未选择时该键不存在，直接读取会触发 Undefined array key，使唯品会MP/唯品会JX 页签的常规请求报错。改为 ?? [] 读取。
 2026-10-06 20:03:58 +08:00
苏木
e777e75176 店铺违规信息预警：统一表头映射，支持查询、导入导出与每日同步 2026-10-06 19:02:22 +08:00
qiuxiang
13a9697447 店铺收款账户账单新增「总账备注」筛选；每日账单脚本支持胜算异步分片导出 
- 所有账户页签在「店铺」右侧新增「总账备注」下拉：按（平台+账单项目）翻译成账单项目集合过滤，页面/列设置/导出同口径；淘系支付宝、淘系微信同页签混多平台时按店铺名前缀细分
- 每日账单脚本：胜算超出同步导出上限（url=null+taskId）时自动从「异步导出下载管理」取回本次任务全部分片并合并成一份 CSV，导入前按页面笔数核对（不一致则跳过导入）
- 实测：京东 7 月异步导出两片 219158+235846=455004 笔 / 收入 17695094.84 / 支出 8035128.21，与已导入口径一致
 2026-10-06 18:46:57 +08:00
WuYongJie
78857a51d9 feat: 店铺维度报表按主体期间拆分并支持期初数据维护 
- 改为按期初数据+系统主体+爬虫新主体生成主体期间，一行一期间，修复流程历史重复行
- 变更日当天归新主体、老主体失效显示变更日前一天；关店和其他非正常状态两列显示 -
- 期初数据首次打开固化为系统库设置，可在「规则信息 → 店铺维度报表逻辑配置」在线增删改
- 爬虫店铺主体按税号归一，首次抓到的新主体写入期间变更表并自动生成新期间
- 新增期间变更表迁移与 crawl_shop_company 镜像数据集
 2026-10-06 18:42:12 +08:00
zhoushengchen
d6b0b7f1d7 feat: 接入退货取件管理镜像、实际运费核算与 XLSX 导出 2026-10-06 16:05:59 +08:00
qiuxiang
c04054ca0b 修复「总账备注」在共享镜像页签不生效（mirrorIndex 漏补装饰） 2026-10-06 15:54:52 +08:00
qiuxiang
e147c90a2c 店铺收款账户账单新增「总账备注」列（按平台+账单项目映射表取值） 
- 新增 ec_account_ledger_remarks 映射表与 account-ledger-remarks:import 导入命令（平台/账单项目/总账备注）
- 新增 AccountLedgerRemarkMap：按店铺名前缀识别平台，无前缀时用页签默认平台；缺失匹配保持空白
- 全部账户页签（含淘系支付宝自有列定义）在「店铺/店铺名称」右侧新增「总账备注」列，页面/列设置/导出共用同一份列定义
- 控制器在分页与导出流读取时补齐 payload.ledger_remark，不改动上游账单与共享镜像数据
- 用例：新增 AccountLedgerRemarkMapTest；修正唯品会 JX/MP 列清单断言
 2026-10-06 15:42:57 +08:00
yueyang
6af12c030e 财务经营报表：新增账单明细页（多选筛选/日历选择/四项汇总/按列导出与进度/收款明细同款分页），科目映射表字段改名财务备注与财务类型 
- 账单明细：7 个平台账单分支下推查询，按 active_generation 取当前版本（修正抖音重复计数），跨月大数据量由 73s 降到 1-2s

- 筛选：平台/店铺/账单项目/财务类型多选下拉（打字模糊搜索+滚动），日期改日历选择

- 导出：全部筛选结果 CSV 流式下载并按显示列最小取数，带进度轮询；列设置按账号存本机

- 分页：每页 10/20/50，首页/上下页/末页，第 X-Y 条/共 N 条

- 科目映射表：字段改名财务备注/财务类型（导入兼容旧名）
 2026-10-06 15:35:16 +08:00
Codex Yueyang
bb5b03ad80 科目映射表：大类新增「税费」（支出基准） 2026-09-30 10:40:59 +08:00
yueyang
57ea42ffb8 科目映射表：导出文件名的时间戳也按平台时区（北京时间） 2026-09-29 18:04:46 +08:00
yueyang
9f73d1915c 科目映射表：区分条件留空显示并导出为「-」，导入按不限处理 2026-09-29 17:40:36 +08:00
yueyang
9b05d99cd8 科目映射表：按业务备注/商品名称区分同一账单项目的不同业务，修正重复口径 2026-09-29 17:27:25 +08:00
qiuxiang
88626ad404 科目映射表并入待处理财产损益大类 
固定大类清单新增「待处理财产损益」（支出基准），前端大类→基准映射同步；补用例覆盖。另：唯品会JX 的 8 条规则平台名由「唯品会jx」统一为「唯品会JX」（数据修正，逐条 update 并记操作日志）。
 2026-09-29 17:04:57 +08:00
qiuxiang
cf4fd5f59c Merge branch 'feature/qiuxiang-account-mapping-nine-percent-invoice' 2026-09-29 16:30:34 +08:00
qiuxiang
f0e8803626 科目映射表票据口径并入9% 
常用票据口径新增 0.09（京东短信服务费等 9% 税率），页面票据下拉可选且校验不再报提示；补用例覆盖 0.09 与 options.invoices。另：京东「综合违约金/违约赔付」的借方科目由「销售费用/营业外支出」改为「营业外支出」（数据修正，走 store.update 并记操作日志）。
 2026-09-29 16:30:11 +08:00
yueyang
7f3aeb233e 科目映射表操作记录：时间固定按平台时区，避免页面请求按公司时区写入导致差 7 小时 2026-09-29 16:10:34 +08:00
qiuxiang
46689d99d3 科目映射表并入抖音大类并把票据0按不开票处理 
固定大类清单新增售后费用/平台服务费/平台佣金（支出基准）与往来（收入基准），页面大类下拉与改大类时自动带基准的前端映射同步更新；导入时票据「0 / 0.00 / 0%」归一为「不开票」。现网 38 行抖音规则已由 0 改为不开票（逐条更新、写操作日志）。
 2026-09-29 15:20:44 +08:00
renshen
813e956df5 应付款终版目录接入独立按表数据 
两个「终版」目录（供应商应付（终版）、快递应付（终版））改为独立数据：
保留原有导入、导出、查询、重置、编辑按钮和导入模板，数据初始为空、按表独立存放，
不再借用基础目录的页面与数据。

- 终版目录拥有自己的同名子页面与横向页签
- 新增终版按表数据的独立导入/导出/模板/编辑接口（数据集键 final:<目录>:<页面>）
- 供应商终版 13 个页面、快递终版 4 个页面已接入
- 终版导入模板统一增加“月份”列，记录标识列改为选填
 2026-09-29 11:06:41 +08:00
yueyang
3c4c47fb94 新增「财务规则 · 科目映射表」可维护页面 (#279) 2026-09-29 10:41:54 +08:00
qiuxiang
666efc26b6 唯品会MP账户新增订单结算时间列 
唯品会MP账户账单在「订单签收或退款时间」后新增「订单结算时间」，取账单结算期间（YYYY-MM，当前系统内全部为 2026-08）；列定义与导出共用 AccountBillColumns。现网 913 行的 payload 已补 settle_period=2026-08（先备份原 payload，校验无冲突后按 JSON_SET 更新，笔数与金额不变），并补齐 MP 页签的功能测试。
 2026-09-29 10:15:49 +08:00
qiuxiang
7de1d30605 唯品会JX账户新增订单结算时间列 
唯品会JX账户账单在销售订单号后新增「订单结算时间」，取账单结算期间（YYYY-MM，当前系统内全部为 2026-07）；列定义在 AccountBillColumns，导出与页面同一份定义。现网 8518 行的 payload 已补 settle_period=2026-07（先备份原 payload，校验无冲突后按 JSON_SET 更新，金额与笔数不变）。
 2026-09-29 09:18:21 +08:00
qiuxiang
a0c99c3e8d 新增店铺收款京喜账单页签并从京东账单切分 
在京东账单右侧新增京喜账单页签，复用京东日账单的取数、列定义、筛选、排序、分页与导出，只增加平台维度过滤：京东账单排除京喜店铺，京喜账单只取京喜店铺。平台口径集中在 config/jd_bill_platform.php 与 JdBillPlatform（含口径切换起始日期参数，默认全量历史），仓库通过 forPlatform() 收窄，两个口径互补、总额守恒，底层镜像数据不修改不删除。真实镜像实测：京喜 488,464 笔 + 京东 210,983 笔 = 拆分前 699,447 笔，收入/支出/差额逐项误差为 0。
 2026-09-28 19:25:53 +08:00
qiuxiang
a08b28199d 新增店铺收款唯品会JX账户页签 
店铺收款账户账单新增 vipshop-jx 页签：导航配置、列定义、控制器与前端路由；读取共享账单表 ec_account_bills 中的唯品会JX（JITX）原始账单（店铺/类型/二次备注/销售订单号/含税金额），按金额正负拆出收入与支出，订单日期由销售订单号前 6 位还原（原始账单无日期列）。DB 页签日期统一按 Y-m-d H:i:s 返回，JX 页签汇总口径为收支净额，并补齐单元与功能测试。
 2026-09-28 17:51:41 +08:00
qiuxiang
0c1e73f405 fix: rename vipshop account to mp account 2026-09-28 09:35:11 +08:00
qiuxiang
bfbfe935ea 新增淘系支付宝权威账单导入链路 2026-09-27 17:25:04 +08:00
chenxi
18fdb8a22f 支持进销存多月份权威快照 2026-09-26 22:45:37 +08:00