template1.py 4.9 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139
  1. # coding:utf8
  2. import re
  3. from typing import Dict, Any
  4. from BiddingKG.dl.template_extract.abstract_template import AbstractTemplate, table2list
  5. import os
  6. import json
  7. class CustomBidTemplate(AbstractTemplate):
  8. """
  9. 自定义招标信息提取模板
  10. 适配包含供应商、候选供应商、交付时间等信息的表格提取
  11. """
  12. def __init__(self):
  13. super().__init__(
  14. template_id=os.path.abspath(__file__),
  15. priority=3
  16. )
  17. def check_call_timing(self, preprocessed_data: Dict[str, Any]) -> bool:
  18. """检查是否符合模板调用条件"""
  19. if "表格列表" not in preprocessed_data:
  20. return False
  21. tables = preprocessed_data["表格列表"]
  22. if len(tables) < 1:
  23. return False
  24. try:
  25. datas = tables[0]
  26. # 至少需要表头行和一行数据
  27. if len(datas) < 2:
  28. return False
  29. header = datas[0]
  30. # 表头列数需匹配目标表格(5列)
  31. if len(header) != 5:
  32. # print(f"表头列数异常:{len(header)}列,预期5列")
  33. return False
  34. # 表头内容正则匹配(泛化类似表达)
  35. header_patterns = [
  36. r'序号|编号', # 第1列:序号
  37. r'供应商名称|供货单位|服务商名称', # 第2列:供应商名称
  38. r'候选供应商|预成交供应商|中标候选人|候选单位', # 第3列:候选供应商
  39. r'交付时间|服务时间|供货时间|工期', # 第4列:交付时间
  40. r'备注|说明|注释' # 第5列:备注
  41. ]
  42. # 逐列验证表头
  43. for i, pattern in enumerate(header_patterns):
  44. if not re.fullmatch(pattern, header[i]):
  45. # print(f'表头第{i+1}列未匹配:{pattern} vs {header[i]}')
  46. return False
  47. self.header = header
  48. self.data = datas[1:]
  49. return True
  50. except Exception as e:
  51. print(f"表格验证错误: {e}")
  52. return False
  53. def extract(self, preprocessed_data: Dict[str, Any]) -> Dict[str, Any]:
  54. """提取表格中的招标相关信息"""
  55. # 初始化返回结果结构
  56. extract_result = {
  57. "项目编号": "",
  58. "项目名称": "",
  59. "招标信息": [],
  60. "中标信息": [],
  61. "候选人信息": [],
  62. "产品信息": []
  63. }
  64. for row in self.data:
  65. # 跳过列数异常的行
  66. if len(row) != 5:
  67. continue
  68. # 解析每行数据
  69. seq, supplier_name, candidate_supplier, delivery_time, remark = row
  70. if re.search('预?(成交|中标)供应商', candidate_supplier):
  71. candidate_supplier = '1'
  72. else:
  73. candidate_supplier = ''
  74. # 整理候选人信息(满足包含候选人及排名)
  75. if supplier_name and candidate_supplier:
  76. candidate_info = {
  77. "标的": "",
  78. "标包": "",
  79. "包号": "",
  80. "候选人": supplier_name,
  81. "投标价": "",
  82. "排名": candidate_supplier,
  83. "联系人": "",
  84. "电话": "",
  85. "服务时间": delivery_time,
  86. "地址": ""
  87. }
  88. # 过滤空值字段
  89. candidate_info = {k: v for k, v in candidate_info.items() if v}
  90. # 验证候选人信息必填项
  91. if candidate_info.get("候选人") and candidate_info.get("排名"):
  92. extract_result["候选人信息"].append(candidate_info)
  93. # 过滤空列表
  94. if not extract_result["招标信息"]:
  95. del extract_result["招标信息"]
  96. if not extract_result["中标信息"]:
  97. del extract_result["中标信息"]
  98. if not extract_result["候选人信息"]:
  99. del extract_result["候选人信息"]
  100. if not extract_result["产品信息"]:
  101. del extract_result["产品信息"]
  102. # 过滤项目编号、项目名称空值
  103. if not extract_result["项目编号"]:
  104. del extract_result["项目编号"]
  105. if not extract_result["项目名称"]:
  106. del extract_result["项目名称"]
  107. return extract_result
  108. # 使用示例
  109. if __name__ == "__main__":
  110. # 读取数据文件
  111. with open("data.json", "r", encoding="utf8") as f:
  112. preprocessed_data = json.load(f)
  113. # 初始化模板并提取信息
  114. template = CustomBidTemplate()
  115. if template.check_call_timing(preprocessed_data):
  116. result = template.extract(preprocessed_data)
  117. print("提取结果:", json.dumps(result, ensure_ascii=False, indent=2))
  118. else:
  119. print("当前数据不满足模板调用条件")