苦
每當數(shù)據(jù)檢查不通過時,就會有點揪心,怕是又出了什么亂子。最可恨的就是網(wǎng)站改版,每次改版,原先設(shè)計的系統(tǒng)基本全部廢掉,爬蟲邏輯又得重新來。最近好幾個網(wǎng)站改版。。。
而且有些網(wǎng)站就喜歡在放假時和周五發(fā)版,沒辦法啊,背上電腦,改吧。
昨天某網(wǎng)站不知道咋的掛了,今天修到現(xiàn)在,還在測試中,我的周末啊。還要補上事故說明,昨天某某數(shù)據(jù)沒了,計算的時候注意點。誰能保證自己寫的代碼沒BUG。。。
這是數(shù)據(jù)采集的苦,還有就是PM隨意加需求的痛。那個數(shù)據(jù)爬下來看看;這個這么簡單,什么時候能上線;今天什么都沒改嘛?
好了,小吐槽下,自己還是要保持正能量,工作還是要做的。不過我覺得這是程序員的通病。
樂
可以接觸到各種各樣的反爬姿勢,相應(yīng)的可以學習到各種解決方法(大部分情況下,某些網(wǎng)站除外)。這點算是增加自己的經(jīng)驗閱歷。
“與天奮斗,其樂無窮;與地奮斗,其樂無窮;與人奮斗,其樂無窮。
看成自己爬來的數(shù)據(jù)做成一個個產(chǎn)品。數(shù)據(jù)本身并沒有價值,有價值的是如何利用。大多數(shù)情況下原始數(shù)據(jù)沒法用,需要計算部門來處理,將其轉(zhuǎn)化為可用的結(jié)構(gòu)化數(shù)據(jù),分析、挖掘、計算,最終產(chǎn)生價值。
還可以認識各種大牛吧。我們公司大牛真的很多,和他們帶了一年多了,計算方面真的學到了不少。下周他們好像回成都校招,有興趣的可以了解下。
自己負責的項目有BUG當然要及時去解決問題,做好自己的事情,盡量減少事故,也算一種責任。
-
工程師
+關(guān)注
關(guān)注
59文章
1574瀏覽量
68704 -
網(wǎng)絡(luò)爬蟲
+關(guān)注
關(guān)注
1文章
52瀏覽量
8735
發(fā)布評論請先 登錄
相關(guān)推薦
如何成為嵌入式開發(fā)工程師?
月薪 3 萬的嵌入式工程師都在用,串口屏到底神在哪?

電子工程師的電源設(shè)計經(jīng)驗分享

不同時期的硬件工程師,最怕發(fā)生的事 #電子工程師 #硬件工程師 #內(nèi)容過于真實 #YXC晶振 #揚興科技


嵌入式軟件工程師如何提升自己?

索尼誠邀軟件工程師參與PS免費手游平臺設(shè)計
嵌入式軟件工程師和硬件工程師的區(qū)別?




單片機如何通過代碼控制硬件:一名工程師的分享

評論