1.oracle數(shù)據(jù)庫中查字段名稱、類型及comment 2.查詢owner 3.數(shù)據(jù)導(dǎo)出將txt轉(zhuǎn)成csv 4.數(shù)倉(cāng)建設(shè)的一些資料
發(fā)簡(jiǎn)信
IP屬地：內(nèi)蒙古
-
零碎的筆記
-
hive not in 子查詢踩坑
在hive中使用not in 子查詢時(shí)，一定要去掉null值；否則滿足條件的數(shù)據(jù)會(huì)返回null值，而不是true，如下圖所示是個(gè)例子
-
python數(shù)據(jù)分析系列1.5——map()&apply()&applymap()/sort()&sorted()&argsort()
第二周的作業(yè)是熟悉Python基礎(chǔ)，了解pandas數(shù)據(jù)結(jié)構(gòu)，這些資料網(wǎng)上很全，所以本文打算總結(jié)一些"長(zhǎng)得很像"的函數(shù)，關(guān)于概率分布將繼續(xù)在下一篇文章描述。 1.1 map函...
-
數(shù)據(jù)分析之描述性統(tǒng)計(jì)
統(tǒng)計(jì)學(xué)包括描述性統(tǒng)計(jì)和推論統(tǒng)計(jì)。 描述性統(tǒng)計(jì)的含義——"A descriptive statistic is a summary statistic that quantit...
-
-
python數(shù)據(jù)分析系列一——描述性統(tǒng)計(jì)
這是python數(shù)據(jù)分析系列文章，從統(tǒng)計(jì)學(xué)基礎(chǔ)知識(shí)到機(jī)器學(xué)習(xí)，將跟隨居士的學(xué)習(xí)教程持續(xù)更新。這一篇主要描述數(shù)據(jù)集中趨勢(shì)，離散程度以及分布形態(tài)等知識(shí)點(diǎn)，下一篇將講述概率分布。 ...
-
pandas常用函數(shù)??說起pandas這個(gè)是python數(shù)據(jù)清洗的利器，它可以讓你像sql一樣操作數(shù)據(jù)，同時(shí)可以對(duì)數(shù)據(jù)進(jìn)行各種計(jì)算，轉(zhuǎn)換完成后還可以方便的存儲(chǔ)到excel，轉(zhuǎn)化為array、M...
-
python正則表達(dá)式必知必會(huì)
??正則是做數(shù)據(jù)分析和挖掘必須要會(huì)的一種方法，會(huì)了它很多問題其實(shí)就可以高效的解決了。說一個(gè)最常用的應(yīng)用場(chǎng)景，在文本識(shí)別中，使用正則可以快速識(shí)別出類似于qq號(hào)、廣告、聯(lián)系方式等...
-
xgboost原理及調(diào)參方法-通俗易懂版本??xgboost是各種比賽中最常使用的方法，網(wǎng)上介紹非常多，但是大部分看起來都比較費(fèi)勁，這篇文章我將通俗的講一下xgboost是在干什么，是怎么實(shí)現(xiàn)的，每一步的細(xì)節(jié)中要注意...
-
完全理解RNN（循環(huán)神經(jīng)網(wǎng)絡(luò)）1.RNN基礎(chǔ)概念和結(jié)構(gòu) ??RNN(Recurrent Neural Network)即循環(huán)神經(jīng)網(wǎng)絡(luò)，用于解決訓(xùn)練樣本輸入是連續(xù)的序列,且序列的長(zhǎng)短不一的問題，比如基于時(shí)間...
-
喜歡數(shù)據(jù)分析與挖掘，平時(shí)主要用hive、python進(jìn)行數(shù)據(jù)分析，目前就職于快手，期望與大家一起討論交流進(jìn)步。<br>有想內(nèi)推快手的請(qǐng)私信我
-
hive進(jìn)階寶典二——hive 常用小技巧
1.日期格式轉(zhuǎn)換（將yyyymmdd轉(zhuǎn)換為yyyy-mm-dd） 2.hive修改庫名、表名注釋、表屬性 3..hive去掉字段中除字母和數(shù)字外的其它字符 4.hive解析j...
-
hive進(jìn)階寶典一——hive常用參數(shù)設(shè)置
1.hive并行執(zhí)行 **2.增大hive memory--java heep space ** 3.mr讀取遞歸目錄設(shè)置hive執(zhí)行引擎為mr時(shí)，默認(rèn)不支持讀取遞歸目錄，如...
-
hive lateral view explode (array()） array為null
談一下使用hive udtf 函數(shù)lateral view explode(array()) array為空時(shí)遇到的坑，這個(gè)UDTF轉(zhuǎn)換的Array為空的記錄，自動(dòng)被過濾掉...
-
一次批量下載上交所公告pdf的嘗試大家平時(shí)可能有需要批量下載pdf的場(chǎng)景，小編會(huì)分享一下第一次嘗試批量下載上交所公告的嘗試歷程。 1.導(dǎo)入爬蟲必備的常用包 2.構(gòu)建list分別存放pdf的鏈接地址和pdf名稱...
-
每個(gè)人都是生活家? 1.生活家收錄范圍：美食、美妝護(hù)膚、穿搭、手工手賬、旅行攻略、購(gòu)物指南以及測(cè)評(píng)、寵物植物、育兒指南、家裝指南、運(yùn)動(dòng)健身（非專業(yè)）、健康養(yǎng)生、及其他貼近生活的興趣愛好 所有讓生活變得更好的技能和經(jīng)驗(yàn)，（比如教你p照片，記錄瘦身過程等）純粹生活感悟不收 ? 2.內(nèi)容原創(chuàng)、鼓勵(lì)從生活中的自身經(jīng)驗(yàn)發(fā)掘生活的美好與樂趣，鼓勵(lì)圖文并茂。? 3. 文內(nèi)不得出現(xiàn)個(gè)人推廣性質(zhì)的額外鏈接，例如微信號(hào)，微博。更不得在通過投稿后再修改文章加入推廣信息。? 專題主編：? 迷蝴莊生 http://www.itdecent.cn/u/257421ea813e 簡(jiǎn)書生活家微信群已建立，加入請(qǐng)?zhí)砑佑袗鄣纳罴倚≈治⑿臜edy3680（歡姐），拉入群。添加請(qǐng)備注“我愛生活家”。 關(guān)注簡(jiǎn)書官方微信公眾號(hào)（jianshuio），及時(shí)閱讀簡(jiǎn)書熱門好文。?
-
本專題僅收錄與創(chuàng)業(yè)相關(guān)的內(nèi)容，如：創(chuàng)業(yè)者經(jīng)歷、大學(xué)生創(chuàng)客心得、電子商務(wù)、創(chuàng)業(yè)項(xiàng)目分析、團(tuán)隊(duì)管理、商業(yè)模式、創(chuàng)客時(shí)評(píng)等。 投稿指南詳見：http://www.itdecent.cn/p/40acca11e9ee 投稿須知：? 1.??文章內(nèi)容必須原創(chuàng)。? 2.??字?jǐn)?shù)在800—3000字（優(yōu)秀文章可放寬）。圖片不宜過多，800字/圖?。 3.??文章內(nèi)容：思路清晰、一目了然、排版整潔? 4.??文章內(nèi)不得有任何推廣信息。包括但不限于公眾號(hào)、微博、微信，更不得在通過投稿后再修改文章加入推廣信息。你可以將這些推廣以及個(gè)人信息放在個(gè)人主頁介紹里。??
-
如果你是程序員，或者有一顆喜歡寫程序的心，喜歡分享技術(shù)干貨、項(xiàng)目經(jīng)驗(yàn)、程序員日常囧事等等，歡迎投稿《程序員》專題。 專題主編：小彤花園 http://www.itdecent.cn/users/4a4eb4feee62/ 【程序員】專題拒稿指北：http://www.itdecent.cn/p/7c8b33b5f63b 投稿須知： 1.收錄相關(guān)技術(shù)文章，但不限于技術(shù)，也可以是項(xiàng)目經(jīng)驗(yàn)類的文章和程序員日常。 2.文章內(nèi)不得有任何推廣信息。包括但不限于公眾號(hào)、微博、微信，更不得在通過投稿后再修改文章加入推廣信息。你可以將這些推廣以及個(gè)人信息放在個(gè)人主頁介紹里。 3.字?jǐn)?shù)極少，段落混亂，大段代碼沒有放到代碼框的文章不收錄 4.不相關(guān)的內(nèi)容不收錄，請(qǐng)確認(rèn)文章內(nèi)容和本專題相關(guān) 目前針對(duì)優(yōu)質(zhì)作者及愛好者，開設(shè)了官方程序員微信群，希望加入請(qǐng)發(fā)簡(jiǎn)信給主編小彤花園索取個(gè)人微信，主編會(huì)將你加入到【程序員】微信群，分享內(nèi)容，收獲知識(shí)。添加微信時(shí)備注昵稱。
