scrapy進一步爬取內容?

時間 2021-06-04 15:36:13

1樓:giantslayer

item["link"]=sel.xpath("a/@href").extractitem["link"]是否需要題主自己決定吧

item["desc"]=sel.xpath("text()").extract()

yield itemfor url in response.xpath("//h2/a/@href").extractyield Request(url,callback=self.

parse)

如果再定義乙個函式parse2,就可以用callback=self.parse2來接受鏈結所反饋的response了。

2樓:蘿蔔特

大概有了一點眉目,

parse方法可以返回以Request或者item,Request返回的連線可以作為進一步爬取的連線,所以我使用

parse_item來返回進一步爬取的正文部分。

怎樣進一步了解佛教?

護法居士 爾時文殊師利白佛言。世尊。云何歸依。佛告文殊師利。歸依者應如是言。大德。我某甲。乃至菩提歸依佛。乃至菩提歸依法。乃至菩提歸依僧。第二第三亦如是說。復言我某甲。已歸依佛已歸依法已歸依僧竟。如是三說。次言大德。我持菩薩戒。我某甲乃至菩提。不殺眾生離殺生想。乃至菩提。不盜亦離盜想。乃至菩提。不非...

如何進一步學習韓語?

夜卜 我覺得學習韓語,是沒有止境的,如果你考到韓語證書有很高的級別了,但是你不堅持學習,就很容易落下,所以你的更進一步只能說是永無止境,最好是自己學習表乙個步驟,下面就介紹一下我自己學習韓語多年的學習方法。1,學習韓語先學韓語發音。2,學習韓語,對韓語單詞需要先拼寫,熟讀熟記,理解詞義。3,學習韓語...

練字如何更進一步。

秋闕 想要在進步很簡單,從頭來過,腳踏實地!我這裡舉個栗子 你面前有包沒開啟包裝的包裹,好幾層的包裝很麻煩,但是你特別著急想要看到裡面的東西,就剪速度刀 菜刀 手 腳 牙其上,最後把包裹的外包裝撕的粉碎,拿到了裡面的東西很開心,然後看著一地的碎屑和要收拾的工具又開始頭疼起來。是否與你提問中的感覺一樣...