template1.py 4.6 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129
  1. # coding:utf8
  2. import re
  3. from typing import Dict, Any
  4. from BiddingKG.dl.template_extract.abstract_template import AbstractTemplate, table2list
  5. import os
  6. import json
  7. class CustomDealInfoTemplate(AbstractTemplate):
  8. """
  9. 成交信息提取模板(适配data.json中的表格结构)
  10. 提取包含需求编号、设备信息、成交候选人等字段的表格数据
  11. """
  12. def __init__(self):
  13. super().__init__(
  14. template_id=os.path.abspath(__file__),
  15. priority=3
  16. )
  17. def check_call_timing(self, preprocessed_data: Dict[str, Any]) -> bool:
  18. """检查是否符合模板调用条件"""
  19. if "表格列表" not in preprocessed_data:
  20. return False
  21. tables = preprocessed_data["表格列表"]
  22. if len(tables) < 1:
  23. return False
  24. try:
  25. # 取第一个表格进行验证
  26. datas = tables[0]
  27. # 验证表头列数
  28. if len(datas[0]) != 8:
  29. print("表头数量异常;", len(datas[0]))
  30. return False
  31. # 表头内容正则匹配(泛化表达)
  32. header_patterns = [
  33. '需求编号|项目编号', # 第1列:需求编号/项目编号
  34. '(设备|材料)名称/编号|标的名称|产品名称', # 第2列:设备名称/编号
  35. '成交候选人排名|排名|名次', # 第3列:成交候选人排名
  36. '公司名称|供应商名称|单位名称', # 第4列:公司名称
  37. '投标(设备|材料)数量|数量', # 第5列:投标设备数量
  38. '最终报价(不含税)|报价|价格|金额', # 第6列:最终报价
  39. '选择(设备|材料)', # 第7列:选择设备(用于判断中标)
  40. '评审情况|评审结果' # 第8列:评审情况
  41. ]
  42. # 逐列验证表头
  43. for i, pattern in enumerate(header_patterns):
  44. if not re.search(pattern, datas[0][i], re.IGNORECASE):
  45. print('表头未验证: ', pattern, datas[0][i])
  46. return False
  47. # 确保表格有数据行
  48. if len(datas) < 2:
  49. return False
  50. self.header = datas[0]
  51. self.data = datas[1:]
  52. return True
  53. except Exception as e:
  54. print(f"表格验证错误: {e}")
  55. return False
  56. def extract(self, preprocessed_data: Dict[str, Any]) -> Dict[str, Any]:
  57. """提取表格中的相关信息"""
  58. extract_result = {
  59. "项目编号": "",
  60. "项目名称": "",
  61. "招标信息": [],
  62. "中标信息": [],
  63. "候选人信息": [],
  64. "产品信息": []
  65. }
  66. # 提取项目编号(取第一行的需求编号)
  67. if self.data:
  68. extract_result["项目编号"] = self.data[0][0]
  69. # 用于存储已处理的标的信息,避免重复
  70. processed_subjects = set()
  71. for row in self.data:
  72. # 跳过列数异常的行
  73. if len(row) != 8:
  74. continue
  75. # 解析每行数据
  76. (req_id, device_name, rank, company, quantity, price, selected, review) = row
  77. # 候选人信息(必须包含候选人和排名)
  78. if company and rank:
  79. if rank == '1' and selected == "0": # 选择设备不为0的才算中标
  80. rank = '5'
  81. elif rank != '1' and selected != "0":
  82. rank = '1'
  83. candidate_info = {
  84. "标的": device_name,
  85. "候选人": company,
  86. "投标价": f"{price}元" if price else "", # 补充单位
  87. "排名": rank,
  88. "选择数量": selected
  89. }
  90. # 过滤空值字段
  91. candidate_info = {k: v for k, v in candidate_info.items() if v}
  92. extract_result["候选人信息"].append(candidate_info)
  93. # 招标信息:由于没有招标人或预算信息,置空
  94. extract_result["招标信息"] = []
  95. return extract_result
  96. # 使用示例
  97. if __name__ == "__main__":
  98. # 读取并解析数据文件
  99. with open("data.json", "r", encoding="utf8") as f:
  100. preprocessed_data = json.load(f)
  101. # 初始化模板并提取信息
  102. template = CustomDealInfoTemplate()
  103. if template.check_call_timing(preprocessed_data):
  104. result = template.extract(preprocessed_data)
  105. print("提取结果:", json.dumps(result, ensure_ascii=False, indent=2))
  106. else:
  107. print("当前数据不满足模板调用条件")