公眾號：Python數(shù)據(jù)分析實(shí)戰(zhàn)，分享最新python技術(shù)，等你來！
發(fā)簡信
IP屬地：湖南
-
-
原名凡人求索-李凱旋,歡迎大家一起交流數(shù)據(jù)方面的問題，我的微信號lkx941013
-
ping&&telnet
ping通常是用來檢查網(wǎng)絡(luò)是否通暢或者網(wǎng)絡(luò)連接速度的命令。 telnet是用來探測指定ip是否開放指定端口的。 ping 可以測試到目標(biāo)機(jī)器的連通性。Ping域名還可以得出解...
-
/etc/hosts、/etc/sysconfig/network ，hostname
/etc/host IP地址 主機(jī)名/域名 別名 主機(jī)名通常在局域網(wǎng)內(nèi)使用，通過hosts文件，主機(jī)名就被解析到對應(yīng)ip； 域名通常在internet上使用，但如果本機(jī)不想使...
-
-
Linux 網(wǎng)絡(luò)配置
serLinux下網(wǎng)卡命名規(guī)律：eth0，eth1。 第一塊以太網(wǎng)卡，Link encap:Ethernet 第二塊,lo為環(huán)回接口，它的IP地址固定為127.0.0.1，掩...
-
http and httpsHTTPS（Hypertext Transfer Protocol Secure）：超文本傳輸安全協(xié)議。 HTTP+加密+認(rèn)證+完整性保護(hù) = HTTPS HTTPS并非應(yīng)用...
-
2019-03-26 基本概念
MapReduce是一種基于java的分布式計算的處理技術(shù)和程序模型. MapReduce是一個框架，我們可以使用它來編寫應(yīng)用程序，以可靠的方式并行地處理大量商品硬件群集上的...
-
2019-03-18 python 面試題
https://mp.weixin.qq.com/s?__biz=MzIxODM4MjA5MA==&mid=2247488573&idx=3&sn=927f9458e2f0a...
-
2019-03-16 Spark基本架構(gòu)及運(yùn)行原理Spark Core: 包含Spark的基本功能，包含任務(wù)調(diào)度，內(nèi)存管理，容錯機(jī)制等，內(nèi)部定義了RDDs(彈性分布式數(shù)據(jù)集)，提供了很多APIs來創(chuàng)建和操作這些RDDs。為其...
-
2019-03-16 job、stage、taskjob、stage、task Worker Node：物理節(jié)點(diǎn)，上面執(zhí)行executor進(jìn)程 Executor：Worker Node為某應(yīng)用啟動的一個進(jìn)程，執(zhí)行多個task...
-
2019-03-16 spark 分區(qū)spark 分區(qū)與性能。 RDD 的分區(qū)并行運(yùn)行1個并發(fā)的任務(wù)，達(dá)到CPU的數(shù)量或者2-3倍。 比較好的分區(qū)是excutors的數(shù)量。 可以設(shè)置默認(rèn)的分區(qū)數(shù)，并行度：sc.d...
-
-
最詳細(xì)的 Hadoop 入門教程
終極算法 關(guān)注微信號每天收聽我們的消息終極算法為您推送精品閱讀 前言 Hadoop 在大數(shù)據(jù)技術(shù)體系中的地位至關(guān)重要，Hadoop 是大數(shù)據(jù)技術(shù)的基礎(chǔ)，對Hadoop基礎(chǔ)知...
-
2019-03-13 Sqoop export data to rds假設(shè)將HDFS中的t1表通過sqoop導(dǎo)入到Mysql中的consumer表(事先必須存在) $sqoop export --connect jdbc:mysql://had...
