没听懂，到底是同步别人的数据还是自己的数据，去给别人的数据库分库分表吗，这种一般就是流复制+断点续传 解决方案就是canal或debezium订阅binlog或wal log，或者flink cdc，本地的文件存储可以选parquet或feather，数据库可以选clickhouse什么的

如果第三方不能动，就要从我方想办法。比如自己这边建个缓存，把已查到的数据偷偷存起来，未知的才去请求。如果能遍历第三方，干脆就整个拿过来再做优化。不就解决了