SeibroBondSyncService.cs 22 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259260261262263264265266267268269270271272273274275276277278279280281282283284285286287288289290291292293294295296297298299300301302303304305306307308309310311312313314315316317318319320321322323324325326327328329330331332333334335336337338339340341342343344345346347348349350351352353354355356357358359360361362363364365366367368369370371372373374375376377378379380381382383384385386387388389390391392393394395396397398399400401402403404405406407408409410411412413
  1. using Application.Abstractions.Data;
  2. using Application.Helpers;
  3. using Microsoft.EntityFrameworkCore;
  4. using Microsoft.Extensions.DependencyInjection;
  5. using Microsoft.Extensions.Logging;
  6. using Microsoft.Extensions.Options;
  7. using SharedKernel;
  8. namespace Infrastructure.StockData;
  9. /// <summary>
  10. /// SEIBro 채권·단기금융 수집 (Wave 4) — 기본 07:40 KST(CorpActionSync 07:20 다음 슬롯), `Seibro:BondSync` 게이트.
  11. /// 전 단계가 채권(Bond) 예산(Seibro:BondBudget)을 공유한다.
  12. ///
  13. /// a) BondIssuance: getBondIssuInfo 날짜 스윕(ISSU_DT, 발행일) 3년 → 발견(다수 종목/일).
  14. /// b) BondMaster rolling: 대상 = BondIssuance.Isin ∪ 기존 KRX BondDailyTrade.Code(ISIN) 중복 제거, 미수집·stale 우선 →
  15. /// getBondStatInfo(ISIN) → PK Isin upsert(신용등급 4사 포함).
  16. /// c) BondInterestPayment rolling: BondMaster 있는 ISIN → getIntPayInfo(ISIN) → PK Isin 스냅샷 갱신.
  17. /// d) BondEarlyRedemption: getBondOptionXrcInfo 날짜 스윕(ERLY_RED_DT, 조기상환일) 3년 → 조기상환일 window delete+insert.
  18. /// e) ShortTermIssuance: getShortmIssuInfo 날짜 스윕(ISSU_DT) × SECN_TPCD{12,13,14} 3년 → 발견(다수 종목/일).
  19. /// f) Cd/Cp/Estb Master rolling: ShortTermIssuance 발견분 중 SECN_TPCD 별 대상(13→CdMaster/getCDInfo, 12→CpMaster/getCPInfo,
  20. /// 14→EstbMaster/getESTBInfo), **최근 발행 우선**(IssuDt desc — CP/전단채 유니버스 과대) → 각 마스터 upsert.
  21. ///
  22. /// 실패/0행 = 정상 빈결과. HTTP·파싱 오류 = 경고 + false(RetryDelay 후 재시도). quota 소진 = 정상 종료(true). ApiKey 미설정 시 skip.
  23. /// ⚠️ getIntPayInfo·getCDInfo 실샘플이 result="0" 이라 이자/CD 필드 매핑은 스펙 기준 — 운영 첫 수집 시 로그로 확인.
  24. /// ⚠️ CP/전단채 유니버스 과대(일 수백 발행) → 최근발행 우선 rolling + BackfillYears 컷으로 예산 내.
  25. /// </summary>
  26. internal sealed class SeibroBondSyncService(
  27. IServiceScopeFactory scopeFactory,
  28. IHttpClientFactory httpClientFactory,
  29. SeibroQuota quota,
  30. IOptions<AppSettings> settings,
  31. ILogger<SeibroBondSyncService> logger
  32. ) : DailyScheduledService(logger)
  33. {
  34. // 단기금융증권 종목구분 (SECN_TPCD) — 12어음(CP) 13CD 14전자단기사채
  35. private static readonly string[] ShortTermSecnTpcds = ["12", "13", "14"];
  36. // 마커 job 키 (리뷰 결함 #1) — 정상 0행/조용한 날 재조회·starvation 해소
  37. private const string IssuanceJobKey = "bond-issuance"; // date-sweep (SweptDate)
  38. private const string EarlyRedJobKey = "bond-earlyred"; // date-sweep (SweptDate)
  39. private const string ShortTermJobKey = "bond-shortterm"; // date-sweep (SweptDate, Discriminator=tpcd)
  40. private const string BondStatJobKey = "bond-stat"; // rolling (FetchMarker, key=ISIN)
  41. private const string IntPayJobKey = "bond-intpay"; // rolling (FetchMarker, key=ISIN)
  42. private const string CdJobKey = "bond-cd"; // rolling (FetchMarker, key=ISIN)
  43. private const string CpJobKey = "bond-cp"; // rolling (FetchMarker, key=ISIN)
  44. private const string EstbJobKey = "bond-estb"; // rolling (FetchMarker, key=ISIN)
  45. protected override string JobName => "SeibroBondSync";
  46. protected override TimeOnly TargetTime => ParseTime(settings.Value.Seibro.BondSyncTime, new TimeOnly(7, 40));
  47. protected override int MaxRetryCount => 2;
  48. protected override TimeSpan RetryDelay => TimeSpan.FromHours(2);
  49. protected override async Task<bool> RunOnceAsync(DateOnly todayKst, CancellationToken ct)
  50. {
  51. var cfg = settings.Value.Seibro;
  52. if (string.IsNullOrWhiteSpace(cfg.ApiKey))
  53. {
  54. Logger.LogWarning("[{Job}] Seibro:ApiKey 미설정 — 수집 skip", JobName);
  55. return true;
  56. }
  57. using var scope = scopeFactory.CreateScope();
  58. var db = scope.ServiceProvider.GetRequiredService<IAppDbContext>();
  59. var client = httpClientFactory.CreateClient(SeibroHttp.ClientName);
  60. var years = cfg.BackfillYears > 0 ? cfg.BackfillYears : 3;
  61. var startDate = todayKst.AddYears(-years);
  62. try
  63. {
  64. // a) 채권 발행내역 날짜 스윕 (Bond) — BondMaster 발견 소스
  65. if (!await SweepBondIssuancesAsync(db, client, cfg, startDate, todayKst, ct))
  66. {
  67. return true;
  68. }
  69. // b) 채권 마스터 rolling per-ISIN (Bond) — BondIssuance ∪ KRX BondDailyTrade ISIN
  70. if (!await RollBondMastersAsync(db, client, cfg, ct))
  71. {
  72. return true;
  73. }
  74. // c) 이자지급 rolling per-ISIN (Bond) — BondMaster 있는 것
  75. if (!await RollInterestPaymentsAsync(db, client, cfg, ct))
  76. {
  77. return true;
  78. }
  79. // d) 조기상환 날짜 스윕 (Bond)
  80. if (!await SweepEarlyRedemptionsAsync(db, client, cfg, startDate, todayKst, ct))
  81. {
  82. return true;
  83. }
  84. // e) 단기금융증권 발행 날짜 스윕 × 구분{12,13,14} (Bond)
  85. if (!await SweepShortTermIssuancesAsync(db, client, cfg, startDate, todayKst, ct))
  86. {
  87. return true;
  88. }
  89. // f) CD/CP/전단채 마스터 rolling per-ISIN (Bond) — 최근발행 우선
  90. await RollShortTermMastersAsync(db, client, cfg, ct);
  91. return true;
  92. }
  93. catch (Exception ex) when (ex is HttpRequestException or System.Xml.XmlException or FormatException)
  94. {
  95. Logger.LogWarning(ex, "[{Job}] SEIBro 호출/파싱 실패 — run 중단, {Delay} 후 재시도 (최대 {Max}회)", JobName, RetryDelay, MaxRetryCount);
  96. return false;
  97. }
  98. }
  99. /// <summary>
  100. /// a) 채권 발행내역 날짜 스윕(ISSU_DT, 최신→과거) — 미적재 발행일만. 발행일당 다수 종목 upsert(UQ Isin). 예산 소진 시 false.
  101. /// ⚠️ 발행일은 영업일 성격이나 스펙 확정 불가라 전 캘린더일 스윕(보수적, 기존 SEIBro 배치 판단과 동일).
  102. /// </summary>
  103. private async Task<bool> SweepBondIssuancesAsync(IAppDbContext db, HttpClient client, AppSettings.SeibroSection cfg, DateOnly startDate, DateOnly today, CancellationToken ct)
  104. {
  105. var fetched = 0;
  106. var first = true;
  107. for (var day = today; day >= startDate; day = day.AddDays(-1))
  108. {
  109. ct.ThrowIfCancellationRequested();
  110. // 데이터 존재 OR 조회완료 마커 → 스킵 (발행 없는 날도 재조회 회피, 리뷰 결함 #1)
  111. if (await db.BondIssuance.AsNoTracking().AnyAsync(c => c.IssuDt == day, ct) || await SeibroMarkers.IsSweptAsync(db, IssuanceJobKey, day, null, ct))
  112. {
  113. continue;
  114. }
  115. if (!quota.TryConsume(SeibroCategory.Bond, 1, cfg.BondBudget))
  116. {
  117. Logger.LogWarning("[{Job}] 채권 예산({Budget}) 소진 — getBondIssuInfo {Day} 부터 중단", JobName, cfg.BondBudget, day);
  118. return false;
  119. }
  120. if (!first && cfg.DelayMs > 0)
  121. {
  122. await Task.Delay(cfg.DelayMs, ct);
  123. }
  124. first = false;
  125. var xml = await SeibroHttp.GetStringWithRetryAsync(client, cfg.BaseUrl, cfg.ApiKey, "getBondIssuInfo", [new("ISSU_DT", day.ToString("yyyyMMdd"))], Logger, ct);
  126. var rows = SeibroBondIssuParser.Parse(SeibroXml.Parse(xml));
  127. var (inserted, updated) = await SeibroBondImport.UpsertBondIssuancesAsync(db, rows, ct);
  128. await SeibroMarkers.MarkSweptAsync(db, IssuanceJobKey, day, null, ct); // 0행 포함 조회완료 기록
  129. Logger.LogInformation("[{Job}] getBondIssuInfo {Day} rows={Rows} — inserted={Inserted}, updated={Updated}", JobName, day, rows.Count, inserted, updated);
  130. fetched++;
  131. }
  132. Logger.LogInformation("[{Job}] 채권 발행 스윕 완료 — 창=[{Start}~{End}], fetch={Fetched}일", JobName, startDate, today, fetched);
  133. return true;
  134. }
  135. /// <summary>
  136. /// b) 채권 마스터 rolling — 대상 = BondIssuance.Isin ∪ 기존 KRX BondDailyTrade.Code(ISIN) 중복 제거, BondMaster 미수집·stale 우선.
  137. /// getBondStatInfo(ISIN) 1콜(Bond) → PK Isin upsert(신용등급 4사 포함, ISIN 요청값 스탬핑). 예산 소진 시 false.
  138. /// </summary>
  139. private async Task<bool> RollBondMastersAsync(IAppDbContext db, HttpClient client, AppSettings.SeibroSection cfg, CancellationToken ct)
  140. {
  141. var issuedIsins = await db.BondIssuance.AsNoTracking().Select(c => c.Isin).Distinct().ToListAsync(ct);
  142. var krxIsins = await db.BondDailyTrade.AsNoTracking().Select(c => c.Code).Distinct().ToListAsync(ct);
  143. var universe = issuedIsins.Union(krxIsins, StringComparer.Ordinal).ToList();
  144. if (universe.Count == 0)
  145. {
  146. Logger.LogInformation("[{Job}] getBondStatInfo 대상 없음 (BondIssuance ∪ KRX BondDailyTrade 비어 있음)", JobName);
  147. return true;
  148. }
  149. // 조회 시도(0행 포함) 마커 기준 정렬 — 정보 없는 ISIN 도 재조회 회피(#1)
  150. var markers = await SeibroMarkers.LoadFetchMarkersAsync(db, BondStatJobKey, ct);
  151. var targets = universe.Select(isin => (Key: isin, LastUpdatedAt: markers.TryGetValue(isin, out var last) ? (DateTime?)last : null)).ToList();
  152. var maxPerRun = quota.Remaining(SeibroCategory.Bond, cfg.BondBudget);
  153. var quotaExhausted = false;
  154. var processed = await SeibroRollingSweep.RunAsync(
  155. targets: targets,
  156. fetchAndUpsert: async (isin, token) => {
  157. if (!quota.TryConsume(SeibroCategory.Bond, 1, cfg.BondBudget))
  158. {
  159. quotaExhausted = true;
  160. return;
  161. }
  162. var xml = await SeibroHttp.GetStringWithRetryAsync(client, cfg.BaseUrl, cfg.ApiKey, "getBondStatInfo", [new("ISIN", isin)], Logger, token);
  163. var rows = SeibroBondStatParser.Parse(SeibroXml.Parse(xml));
  164. var ok = await SeibroBondImport.UpsertBondMasterAsync(db, isin, rows, token);
  165. await SeibroMarkers.TouchFetchMarkerAsync(db, BondStatJobKey, isin, token);
  166. Logger.LogInformation("[{Job}] getBondStatInfo ISIN={Isin} rows={Rows} — upsert={Ok}", JobName, isin, rows.Count, ok);
  167. },
  168. maxPerRun: maxPerRun,
  169. delayMs: cfg.DelayMs,
  170. ct: ct);
  171. Logger.LogInformation("[{Job}] 채권 마스터 rolling 완료 — 유니버스={Universe}(발행={Issued}∪KRX={Krx}), 처리={Processed} (maxPerRun={Max})", JobName, universe.Count, issuedIsins.Count, krxIsins.Count, processed, maxPerRun);
  172. return !quotaExhausted;
  173. }
  174. /// <summary>
  175. /// c) 이자지급 rolling — BondMaster 있는 ISIN 중 BondInterestPayment 미수집·stale 우선.
  176. /// getIntPayInfo(ISIN) 1콜(Bond) → PK Isin 스냅샷 갱신(ISIN 요청값 스탬핑). 예산 소진 시 false.
  177. /// </summary>
  178. private async Task<bool> RollInterestPaymentsAsync(IAppDbContext db, HttpClient client, AppSettings.SeibroSection cfg, CancellationToken ct)
  179. {
  180. var masterIsins = await db.BondMaster.AsNoTracking().Select(c => c.Isin).ToListAsync(ct);
  181. if (masterIsins.Count == 0)
  182. {
  183. Logger.LogInformation("[{Job}] getIntPayInfo 대상 없음 (BondMaster 비어 있음)", JobName);
  184. return true;
  185. }
  186. // 조회 시도(0행 포함) 마커 기준 정렬 — getIntPayInfo 실샘플 result=0 이라 스냅샷이 안 남아 매 실행 재조회되던 결함(#1 대표 케이스) 해소
  187. var markers = await SeibroMarkers.LoadFetchMarkersAsync(db, IntPayJobKey, ct);
  188. var targets = masterIsins.Select(isin => (Key: isin, LastUpdatedAt: markers.TryGetValue(isin, out var last) ? (DateTime?)last : null)).ToList();
  189. var maxPerRun = quota.Remaining(SeibroCategory.Bond, cfg.BondBudget);
  190. var quotaExhausted = false;
  191. var processed = await SeibroRollingSweep.RunAsync(
  192. targets: targets,
  193. fetchAndUpsert: async (isin, token) => {
  194. if (!quota.TryConsume(SeibroCategory.Bond, 1, cfg.BondBudget))
  195. {
  196. quotaExhausted = true;
  197. return;
  198. }
  199. var xml = await SeibroHttp.GetStringWithRetryAsync(client, cfg.BaseUrl, cfg.ApiKey, "getIntPayInfo", [new("ISIN", isin)], Logger, token);
  200. var rows = SeibroIntPayParser.Parse(SeibroXml.Parse(xml));
  201. var ok = await SeibroBondImport.UpsertInterestPaymentAsync(db, isin, rows, token);
  202. await SeibroMarkers.TouchFetchMarkerAsync(db, IntPayJobKey, isin, token);
  203. Logger.LogInformation("[{Job}] getIntPayInfo ISIN={Isin} rows={Rows} — upsert={Ok}", JobName, isin, rows.Count, ok);
  204. },
  205. maxPerRun: maxPerRun,
  206. delayMs: cfg.DelayMs,
  207. ct: ct);
  208. Logger.LogInformation("[{Job}] 이자지급 rolling 완료 — 대상={Targets}, 처리={Processed} (maxPerRun={Max})", JobName, targets.Count, processed, maxPerRun);
  209. return !quotaExhausted;
  210. }
  211. /// <summary>
  212. /// d) 조기상환 날짜 스윕(ERLY_RED_DT, 최신→과거) — 미적재 조기상환일만. 조기상환일 window delete+insert. 예산 소진 시 false.
  213. /// ⚠️ 조기상환일은 영업일 성격이나 스펙 확정 불가라 전 캘린더일 스윕(보수적).
  214. /// </summary>
  215. private async Task<bool> SweepEarlyRedemptionsAsync(IAppDbContext db, HttpClient client, AppSettings.SeibroSection cfg, DateOnly startDate, DateOnly today, CancellationToken ct)
  216. {
  217. var fetched = 0;
  218. var first = true;
  219. for (var day = today; day >= startDate; day = day.AddDays(-1))
  220. {
  221. ct.ThrowIfCancellationRequested();
  222. // 데이터 존재 OR 조회완료 마커 → 스킵 (조기상환 없는 날도 재조회 회피, 리뷰 결함 #1)
  223. if (await db.BondEarlyRedemption.AsNoTracking().AnyAsync(c => c.ErlyRedDt == day, ct) || await SeibroMarkers.IsSweptAsync(db, EarlyRedJobKey, day, null, ct))
  224. {
  225. continue;
  226. }
  227. if (!quota.TryConsume(SeibroCategory.Bond, 1, cfg.BondBudget))
  228. {
  229. Logger.LogWarning("[{Job}] 채권 예산({Budget}) 소진 — getBondOptionXrcInfo {Day} 부터 중단", JobName, cfg.BondBudget, day);
  230. return false;
  231. }
  232. if (!first && cfg.DelayMs > 0)
  233. {
  234. await Task.Delay(cfg.DelayMs, ct);
  235. }
  236. first = false;
  237. var xml = await SeibroHttp.GetStringWithRetryAsync(client, cfg.BaseUrl, cfg.ApiKey, "getBondOptionXrcInfo", [new("ERLY_RED_DT", day.ToString("yyyyMMdd"))], Logger, ct);
  238. var rows = SeibroBondOptionXrcParser.Parse(SeibroXml.Parse(xml));
  239. var (inserted, deleted) = await SeibroBondImport.ReplaceEarlyRedemptionWindowAsync(db, day, day, rows, ct);
  240. await SeibroMarkers.MarkSweptAsync(db, EarlyRedJobKey, day, null, ct); // 0행 포함 조회완료 기록
  241. Logger.LogInformation("[{Job}] getBondOptionXrcInfo {Day} rows={Rows} — inserted={Inserted}, deleted={Deleted}", JobName, day, rows.Count, inserted, deleted);
  242. fetched++;
  243. }
  244. Logger.LogInformation("[{Job}] 조기상환 스윕 완료 — 창=[{Start}~{End}], fetch={Fetched}일", JobName, startDate, today, fetched);
  245. return true;
  246. }
  247. /// <summary>
  248. /// e) 단기금융증권 발행 날짜 스윕(ISSU_DT, 최신→과거) × SECN_TPCD{12,13,14} — 미적재 (발행일,구분)만.
  249. /// 발행일당 다수 종목 upsert(UQ Isin, SECN_TPCD·ISSU_DT 스탬핑). 예산 소진 시 false. 발견분이 (f) 마스터 rolling 대상.
  250. /// resumable 판정: 해당 발행일·구분으로 스탬핑된 ShortTermIssuance 존재 여부.
  251. /// </summary>
  252. private async Task<bool> SweepShortTermIssuancesAsync(IAppDbContext db, HttpClient client, AppSettings.SeibroSection cfg, DateOnly startDate, DateOnly today, CancellationToken ct)
  253. {
  254. var fetched = 0;
  255. var first = true;
  256. for (var day = today; day >= startDate; day = day.AddDays(-1))
  257. {
  258. foreach (var tpcd in ShortTermSecnTpcds)
  259. {
  260. ct.ThrowIfCancellationRequested();
  261. // 데이터 존재 OR 조회완료 마커(축=tpcd) → 스킵 (발행 없는 (일,구분)도 재조회 회피, 리뷰 결함 #1)
  262. if (await db.ShortTermIssuance.AsNoTracking().AnyAsync(c => c.IssuDt == day && c.SecnTpcd == tpcd, ct) || await SeibroMarkers.IsSweptAsync(db, ShortTermJobKey, day, tpcd, ct))
  263. {
  264. continue;
  265. }
  266. if (!quota.TryConsume(SeibroCategory.Bond, 1, cfg.BondBudget))
  267. {
  268. Logger.LogWarning("[{Job}] 채권 예산({Budget}) 소진 — getShortmIssuInfo {Day}/{Tpcd} 부터 중단", JobName, cfg.BondBudget, day, tpcd);
  269. return false;
  270. }
  271. if (!first && cfg.DelayMs > 0)
  272. {
  273. await Task.Delay(cfg.DelayMs, ct);
  274. }
  275. first = false;
  276. var xml = await SeibroHttp.GetStringWithRetryAsync(client, cfg.BaseUrl, cfg.ApiKey, "getShortmIssuInfo", [new("ISSU_DT", day.ToString("yyyyMMdd")), new("SECN_TPCD", tpcd)], Logger, ct);
  277. var rows = SeibroShortmIssuParser.Parse(SeibroXml.Parse(xml));
  278. var (inserted, updated) = await SeibroBondImport.UpsertShortTermIssuancesAsync(db, tpcd, day, rows, ct);
  279. await SeibroMarkers.MarkSweptAsync(db, ShortTermJobKey, day, tpcd, ct); // 0행 포함 조회완료 기록
  280. Logger.LogInformation("[{Job}] getShortmIssuInfo {Day}/{Tpcd} rows={Rows} — inserted={Inserted}, updated={Updated}", JobName, day, tpcd, rows.Count, inserted, updated);
  281. fetched++;
  282. }
  283. }
  284. Logger.LogInformation("[{Job}] 단기금융 발행 스윕 완료 — 창=[{Start}~{End}], fetch={Fetched}콜", JobName, startDate, today, fetched);
  285. return true;
  286. }
  287. /// <summary>
  288. /// f) CD/CP/전단채 마스터 rolling — ShortTermIssuance 발견분 중 SECN_TPCD 별로 미수집·**최근 발행 우선**(IssuDt desc, 유니버스 과대).
  289. /// 13→CdMaster(getCDInfo), 12→CpMaster(getCPInfo), 14→EstbMaster(getESTBInfo). 각 마스터 PK Isin upsert(ISIN 요청값 스탬핑).
  290. /// ⚠️ 리뷰 결함 #1: getCD/CP/ESTBInfo 실샘플 result=0 → 마스터가 안 남아 같은 최근 ISIN 이 매 실행 재조회(starvation).
  291. /// 조회 시도(0행 포함) 마커로 이미 시도한 ISIN 을 후보에서 제외 → 한 번씩만 시도하고 유니버스가 순환 소진된다.
  292. /// </summary>
  293. private async Task RollShortTermMastersAsync(IAppDbContext db, HttpClient client, AppSettings.SeibroSection cfg, CancellationToken ct)
  294. {
  295. await RollShortTermMasterAsync(db, client, cfg, "13", CdJobKey, "getCDInfo", MasterHas.Cd, "CD", ct);
  296. await RollShortTermMasterAsync(db, client, cfg, "12", CpJobKey, "getCPInfo", MasterHas.Cp, "CP", ct);
  297. await RollShortTermMasterAsync(db, client, cfg, "14", EstbJobKey, "getESTBInfo", MasterHas.Estb, "전단채", ct);
  298. }
  299. private enum MasterHas { Cd, Cp, Estb }
  300. /// <summary>
  301. /// 단기금융 마스터 rolling 공용 — SECN_TPCD 별 대상. "마스터 없음 AND 조회 시도 마커 없음" 후보를 IssuDt desc 로 컷,
  302. /// 조회 시도(0행 포함) 후 마커 Touch. → 0행 ISIN 이 재조회되지 않고 후순위로 밀려 나머지가 진행(#1).
  303. /// </summary>
  304. private async Task RollShortTermMasterAsync(IAppDbContext db, HttpClient client, AppSettings.SeibroSection cfg, string secnTpcd, string jobKey, string operation, MasterHas masterHas, string label, CancellationToken ct)
  305. {
  306. var maxPerRun = quota.Remaining(SeibroCategory.Bond, cfg.BondBudget);
  307. if (maxPerRun <= 0)
  308. {
  309. return;
  310. }
  311. var checkedIsins = (await db.SeibroFetchMarker.AsNoTracking().Where(c => c.JobKey == jobKey).Select(c => c.EntityKey).ToListAsync(ct)).ToHashSet(StringComparer.Ordinal);
  312. // 마스터 미수집 + 최근 발행 우선. 이미 조회 시도한(마커 있는) ISIN 은 in-memory 로 제외 후 maxPerRun 컷.
  313. var query = db.ShortTermIssuance.AsNoTracking().Where(c => c.SecnTpcd == secnTpcd);
  314. query = masterHas switch
  315. {
  316. MasterHas.Cd => query.Where(c => !db.CdMaster.Any(m => m.Isin == c.Isin)),
  317. MasterHas.Cp => query.Where(c => !db.CpMaster.Any(m => m.Isin == c.Isin)),
  318. _ => query.Where(c => !db.EstbMaster.Any(m => m.Isin == c.Isin))
  319. };
  320. var ordered = await query.OrderByDescending(c => c.IssuDt).Select(c => c.Isin).ToListAsync(ct);
  321. var candidates = ordered.Where(c => !checkedIsins.Contains(c)).Distinct().Take(maxPerRun).ToList();
  322. var processed = await SeibroRollingSweep.RunAsync(
  323. targets: candidates.Select(isin => (Key: isin, LastUpdatedAt: (DateTime?)null)).ToList(),
  324. fetchAndUpsert: async (isin, token) => {
  325. if (!quota.TryConsume(SeibroCategory.Bond, 1, cfg.BondBudget))
  326. {
  327. return;
  328. }
  329. var xml = await SeibroHttp.GetStringWithRetryAsync(client, cfg.BaseUrl, cfg.ApiKey, operation, [new("ISIN", isin)], Logger, token);
  330. var ok = masterHas switch
  331. {
  332. MasterHas.Cd => await SeibroBondImport.UpsertCdMasterAsync(db, isin, SeibroCDParser.Parse(SeibroXml.Parse(xml)), token),
  333. MasterHas.Cp => await SeibroBondImport.UpsertCpMasterAsync(db, isin, SeibroCPParser.Parse(SeibroXml.Parse(xml)), token),
  334. _ => await SeibroBondImport.UpsertEstbMasterAsync(db, isin, SeibroESTBParser.Parse(SeibroXml.Parse(xml)), token)
  335. };
  336. await SeibroMarkers.TouchFetchMarkerAsync(db, jobKey, isin, token); // 0행 포함 조회 시도 기록 → 재조회 회피
  337. Logger.LogInformation("[{Job}] {Op} ISIN={Isin} — upsert={Ok}", JobName, operation, isin, ok);
  338. },
  339. maxPerRun: maxPerRun,
  340. delayMs: cfg.DelayMs,
  341. ct: ct);
  342. Logger.LogInformation("[{Job}] {Label} 마스터 rolling 완료 — 후보={Cands}, 처리={Processed} (maxPerRun={Max})", JobName, label, candidates.Count, processed, maxPerRun);
  343. }
  344. }