爬蟲是不是用 Node js 更好?

時間 2021-06-02 08:16:51

1樓:全棧研習社

用不習慣python,所以自己用nodejs寫了乙個https://

2樓:

從描述上看,似乎尚未涉及 PhantomJS、分布式,外掛程式等。所以,其實樓主的問題不是用什麼語言好,而是先把各種技術了解清楚。爬不到可能會有很多情況,是不是網路質量問題?

是不是請求被伺服器拒絕?是不是記憶體(或者其他)不足?

3樓:lellansin

不辯論,純推薦。

7 年前就用 C# 模擬人工操作做爬蟲的路過,目前這個 Node.js + Chrome headless 的方案出來之後真的很方便。。

4樓:chie4

本人寫nodejs比較多一點,node單執行緒實現高併發的爬蟲不要太簡單。python寫的較少,體感實現相應的功能只能使用多執行緒?效能也較差?最近也在學習py,還請多指教了。

5樓:

C/C++可以寫V8,也可以寫CPython,甚至還可以寫JVM,大佬怎麼不用C/C++寫爬蟲啊,C/C++毀天滅地統治一切()

6樓:任衛

年輕人總是這麼幼稚,圖樣圖森破。

你能用nodejs寫爬蟲,覺得nodejs比python好,你去寫就成了。

這跟取代python有什麼關係,別老想著一統天下。世面見多了就知道世界複雜的狠,別老想取代這個取代那個,老老實實搬磚,踏踏實實做人。

7樓:靈劍

爬蟲這種東西太簡單了,用什麼語言都一樣,同步非同步也沒有特別大的差別,如果要做到搜尋引擎那種級別的收錄,靠的是架構,也不靠語言。

8樓:Mike Chen

你說的很對,nodejs非常適合做爬蟲,我在另外乙個回答裡面也強調了這一點。我們已經用nodejs做了多年爬蟲,crawler是目前nodejs中最優秀的爬蟲庫,牆裂推薦https://

不攀比是不是可以過得更好!?

也不一定,你看很多動力就是來自於攀比 但攀比後也要看你的心理 要是攀比之後有消極的想法 那不攀比的話會好一點 希望你可以過的好。 凱瑟喵 不比什麼 1,別拿不勞而獲的事物來攀比,2,別拿父母給你的來比,3,別拿金錢來比,比什麼 1,比完全靠自我能否買車買房結婚生孩子走向人生巔峰,不依賴任何外界,包括...

VRay是不是要涼涼了,是不是用Vray的人越來越少了?

高力 不請自來回答下這個問題,現在市面上的渲染器Vray,Corona最流行,Vray的模擬渲染肯定不如Corona的物理渲染,從光線上就可以看出。但是!在全世界都覺得Corona要取代Vray的時候,Vray的母公司ChaosGroup收購了Corona,Vray最近更新的5.0版本中混合燈光有很...

科學發聲是不是用氣息?

到解決唱歌方法之後來說,的確唱歌感覺就是靠氣息。但如果對於初學者或者正在學習階段的人來說,氣息是基礎,除了氣息還需要讓發聲和氣息得到很好的結合,比如聲音落在氣息上等的感覺。氣息發聲相輔相成缺一不可,如果發聲位置不正確,只有氣息也不行。但科學發聲這一概念可以說是包含了正確的氣息運用和流動。 rixon...