1.使用smaller鏡像作為基礎(chǔ)鏡像2.清理無用的yum apt pip緩存 使用多階段構(gòu)建 多個(gè)RUN指令合并為一個(gè)
發(fā)簡(jiǎn)信
IP屬地：臺(tái)灣
-
海量數(shù)據(jù)處理問題之MapReduce什么是MapReduce? MapReduce是Google提出的一個(gè)的軟件架構(gòu)， 用于大規(guī)模數(shù)據(jù)集的并行運(yùn)算。Map Reduce的思想很簡(jiǎn)單，就是 通過Map步驟使用多臺(tái)...
-
社招阿里，字節(jié)，拼多多，滴滴面掛經(jīng)歷總結(jié)
阿里： 投遞部門：阿里云智能事業(yè)群投遞崗位：Java開發(fā)專家面試結(jié)果: 二面掛 一面(電面)： 面試官因?yàn)槭俏彝碌呐笥?，他說那就給你一點(diǎn)建議：(1) 面試和面試官闡述的...
-
爬蟲線程開的多了應(yīng)該是。
爬取搜狐幾十萬新聞數(shù)據(jù)——一些見解與感悟
因?yàn)樨?fù)責(zé)一個(gè)新聞推薦系統(tǒng)的項(xiàng)目，需要采集大量的新聞數(shù)據(jù)作為文本分類的材料，通過自己的不斷摸索，以知乎上某位大牛的框架為基礎(chǔ)，完成了一個(gè)能采集幾十萬新聞數(shù)據(jù)的爬蟲，并且健壯性非...
-
@像一塊滾石_e941 這個(gè)應(yīng)該是提取了錯(cuò)誤的url，你改了代碼嗎？
爬取搜狐幾十萬新聞數(shù)據(jù)——一些見解與感悟
因?yàn)樨?fù)責(zé)一個(gè)新聞推薦系統(tǒng)的項(xiàng)目，需要采集大量的新聞數(shù)據(jù)作為文本分類的材料，通過自己的不斷摸索，以知乎上某位大牛的框架為基礎(chǔ)，完成了一個(gè)能采集幾十萬新聞數(shù)據(jù)的爬蟲，并且健壯性非...
-
我是 Alice<br>喜歡人工智能，行動(dòng)派<br>創(chuàng)造力，思考力，學(xué)習(xí)力提升修煉進(jìn)行中<br>歡迎志同道合的小伙伴們和我一起學(xué)習(xí)<br>微信：XerDudu，備注簡(jiǎn)書<br>公眾號(hào)：極客X養(yǎng)成計(jì)劃<br>轉(zhuǎn)載記得聯(lián)系作者哦！
-
@像一塊滾石_e941 這個(gè)線程本身就是一直運(yùn)行的，不斷獲得url然后爬取網(wǎng)頁內(nèi)容，除非遇到被封異常退出的情況線程才會(huì)結(jié)束。
爬取搜狐幾十萬新聞數(shù)據(jù)——一些見解與感悟
因?yàn)樨?fù)責(zé)一個(gè)新聞推薦系統(tǒng)的項(xiàng)目，需要采集大量的新聞數(shù)據(jù)作為文本分類的材料，通過自己的不斷摸索，以知乎上某位大牛的框架為基礎(chǔ)，完成了一個(gè)能采集幾十萬新聞數(shù)據(jù)的爬蟲，并且健壯性非...
-
對(duì)于機(jī)器學(xué)習(xí)中訓(xùn)練集(train set)、驗(yàn)證集(cross vaildation set)和測(cè)試集(test set)的理解
機(jī)器學(xué)習(xí)中為什么要把數(shù)據(jù)集劃分成這么三個(gè)部分？我們可以這么做個(gè)比喻來幫助我們理解。我們?cè)跀?shù)據(jù)集上訓(xùn)練模型的過程就相當(dāng)于我們?yōu)榱丝荚嚳汲龊贸煽?jī)刷題的過程，我們的最終...
-
《大學(xué)生活》專欄收稿要求 ｜寫在前面｜ “這個(gè)專欄收稿的標(biāo)準(zhǔn)真的不低啊！專欄只收與大學(xué)有關(guān)的文章，什么明星，風(fēng)水，工作跑題的文章，就請(qǐng)不要投這個(gè)專欄了?！? 投稿的具體要求如下（務(wù)必仔細(xì)閱讀）: 1.質(zhì)量！ （1）如果你的文章被拒且沒有理由，那原因一定是質(zhì)量不行。 （2）通篇流水賬，你有考慮過小學(xué)語文老師的感受嗎？ （3）還有日記，摘抄、目標(biāo)類、打卡類的文章，請(qǐng)投到相關(guān)的專題，或者自己監(jiān)督自己！！ （4）拒絕標(biāo)題黨，雞湯文！ （5）詩歌一般不收錄，因?yàn)橛袑?duì)應(yīng)的專題。 （6）沒有標(biāo)題（系統(tǒng)自定的當(dāng)天的日期為題目）的不要！連標(biāo)題都沒有，一點(diǎn)都不嚴(yán)謹(jǐn)！ 2.字?jǐn)?shù)的問題。 （1）入選進(jìn)專欄的或日記或隨筆或連載，字?jǐn)?shù)要過八百。 （2）短篇小說字?jǐn)?shù)要兩千。連載小說要有二百字的小說簡(jiǎn)介，題目格式為小說名 章節(jié)數(shù) 小標(biāo)題。 3.排版要求。 （1）文章盡量簡(jiǎn)單大方，避開羅里吧嗦的花哨！ （2）行距，間距保持一致。 （3）文章不是聊天界面，當(dāng)然也不是圖片庫！ ｜寫在后面的話｜ 有美人美食美景之說，也有美文之念。好的文章看了心曠神怡，而不好的文字，看多了，真的想罵街。 所以請(qǐng)尊重自己的文字也請(qǐng)尊重我們這些小編的時(shí)間，我們會(huì)溫柔待之你的文字，但拒稿也是不得不為之。凡事都要汰舊換新，請(qǐng)努力做到迎浪不敗的作者吧
-
爬取搜狐幾十萬新聞數(shù)據(jù)——一些見解與感悟因?yàn)樨?fù)責(zé)一個(gè)新聞推薦系統(tǒng)的項(xiàng)目，需要采集大量的新聞數(shù)據(jù)作為文本分類的材料，通過自己的不斷摸索，以知乎上某位大牛的框架為基礎(chǔ)，完成了一個(gè)能采集幾十萬新聞數(shù)據(jù)的爬蟲，并且健壯性非...
個(gè)人介紹
在杭程序員，曾在華為云數(shù)據(jù)庫團(tuán)隊(duì)，360企業(yè)云盤團(tuán)隊(duì)工作，任職運(yùn)維開發(fā)相關(guān)崗位，技術(shù)棧：python,golang, kubernetes,prometheus云原生相關(guān)套件，在這里記錄一些工作面試遇到的問題。