template32.py 4.4 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121
  1. # coding:utf8
  2. import re
  3. from typing import Dict, Any
  4. from BiddingKG.dl.template_extract.abstract_template import AbstractTemplate, table2list
  5. import os
  6. import json
  7. class CandidateInfoTemplate(AbstractTemplate):
  8. """
  9. 候选人信息提取模板
  10. 适配包含成交候选人信息的表格提取
  11. """
  12. def __init__(self):
  13. super().__init__(
  14. template_id=os.path.abspath(__file__),
  15. priority=3
  16. )
  17. def check_call_timing(self, preprocessed_data: Dict[str, Any]) -> bool:
  18. """检查是否符合模板调用条件"""
  19. if "表格列表" not in preprocessed_data:
  20. return False
  21. tables = preprocessed_data["表格列表"]
  22. if len(tables) < 1:
  23. return False
  24. try:
  25. datas = tables[0]
  26. # 验证表头列数(目标表格为9列)
  27. if len(datas[0]) != 9:
  28. print("表头数量异常;", len(datas[0]))
  29. return False
  30. # 表头内容正则匹配(泛化类似表达)
  31. header_patterns = [
  32. '序号|编号', # 第1列:序号相关
  33. '标的(名称)?', # 第2列:标的相关
  34. '标包|标段|包(名称)?', # 第3列:标包相关
  35. '(成交|中标|投标)?人?候选(人|单位)?(排序|排名|名次)|排名顺序|名次排序', # 第4列:排序相关
  36. '(成交|中标|投标)?候选(人|单位)(名称)?', # 第5列:候选人名称相关
  37. '(响应报价|投标报?价|报价|参选价|中标价)((万?元))?', # 第6列:报价相关
  38. '质量(标准|要求)?', # 第7列:质量相关
  39. '服务期/工期|工期/服务期|工期/交货期|交货期/工期|服务期|工期|交货期', # 第8列:工期相关
  40. '资格(能力)?(条件|要求)|资质(条件|要求)', # 第9列:资格条件相关
  41. ]
  42. # 逐列验证表头
  43. for i, pattern in enumerate(header_patterns):
  44. if not re.fullmatch(pattern, datas[0][i]):
  45. print('表头未验证: ', pattern, datas[0][i])
  46. return False
  47. # 确保表格有数据行
  48. if len(datas) < 2:
  49. return False
  50. self.header = datas[0]
  51. self.data = datas[1:]
  52. return True
  53. except Exception as e:
  54. print(f"表格验证错误: {e}")
  55. return False
  56. def extract(self, preprocessed_data: Dict[str, Any]) -> Dict[str, Any]:
  57. """提取表格中的候选人信息"""
  58. extract_result = {
  59. "招标信息": [],
  60. "中标信息": [],
  61. "候选人信息": []
  62. }
  63. # 提取候选人信息(根据规则有排名只返回候选人信息)
  64. for row in self.data:
  65. if len(row) != 9:
  66. continue
  67. # 解析每行数据
  68. seq, subject, package, rank, candidate, price, _, _, _ = row
  69. # 补充报价单位(如果表头有单位而内容没有)
  70. if re.search('[万亿千百十]?[元角分]|(万|千|百)元', self.header[5]) and not re.search('[万亿千百十]?[元角分]|(万|千|百)元', price):
  71. unit = re.search('[万亿千百十]?[元角分]|(万|千|百)元', self.header[5]).group(0)
  72. price += unit
  73. # 整理候选人信息
  74. candidate_info = {
  75. "标的": subject,
  76. "标包": package,
  77. "候选人": candidate,
  78. "投标价": price,
  79. "排名": rank
  80. }
  81. extract_result["候选人信息"].append(candidate_info)
  82. # 招标信息无招标人或预算,置空列表
  83. extract_result["招标信息"] = []
  84. # 有排名信息,中标信息置空列表
  85. extract_result["中标信息"] = []
  86. return extract_result
  87. # 使用示例
  88. if __name__ == "__main__":
  89. from lxml import etree
  90. # 读取并解析数据文件
  91. with open("data.json", "r", encoding="utf8") as f:
  92. preprocessed_data = json.load(f)
  93. # 初始化模板并提取信息
  94. template = CandidateInfoTemplate()
  95. if template.check_call_timing(preprocessed_data):
  96. result = template.extract(preprocessed_data)
  97. print("提取结果:", result)
  98. else:
  99. print("当前数据不满足模板调用条件")