技术坑
scrapy使用xpath的text提取文字内容出现丢失
mtsym 发表于2019-06-21 浏览4614 评论0
使用python库scrapy在提取html内容的时候, 如果需要提取的标签中有em一类标签, 这时候使用text进行提取就会出现内容丢失,比如
go微架go-micro深度学园
这时候可以考虑手动提取, 或者使用lxml库中的etree
html = etree.HTML(html_text)
title = ''.join(html.xpath('.//text()'))
```<!--autointro-->