Просмотр исходного кода

Merge remote-tracking branch 'origin/master'

znj 3 лет назад
Родитель
Сommit
d404086432
2 измененных файлов с 5 добавлено и 3 удалено
  1. 1 0
      BiddingKG/dl/interface/Preprocessing.py
  2. 4 3
      BiddingKG/dl/test/test4.py

+ 1 - 0
BiddingKG/dl/interface/Preprocessing.py

@@ -1464,6 +1464,7 @@ def get_preprocessed_article(articles,cost_time = dict(),useselffool=True):
     for article in articles:
         doc_id = article[0]
         sourceContent = article[1]
+        sourceContent = re.sub("<html>|</html>|<body>|</body>","",sourceContent)
         _send_doc_id = article[3]
         _title = article[4]
         #表格处理

Разница между файлами не показана из-за своего большого размера
+ 4 - 3
BiddingKG/dl/test/test4.py


Некоторые файлы не были показаны из-за большого количества измененных файлов