Skip to content

sagar2694/bigdata_tcci

 
 

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

26 Commits
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 

Repository files navigation

台泥資訊Big Data 課程

Hadoop 投影片

Spark 投影片

Ipython notebook

Hadoop 環境

  • 192.168.204.59:7180
  • 192.168.204.59:8888
  • user01 ~ user30

Cloudera Pseudo Distributed Mode 安裝說明

啟用Cloudera Manager (獨立設置一台)

切換成 root 使用者

  • $ su –

修改密碼

  • $ passwd

關閉selinux

  • $ vi /etc/selinux/config
  • SELINUX = disabled

關閉防火牆

  • $ setup
  • $ chkconfig iptables off

設定NTP Server

  • $ service ntpd start

產生ssh key

  • $ ssh-keygen -t rsa
  • $ cat ~/.ssh/id_rsa.pub >> ~/.ssh/authroized_keys

修改HOSTNAME

  • $ ifconfig
  • $ vi /etc/hosts
  • $ vi /etc/sysconfig/network
  • $ hostname cmaster

重啟伺服器

  • $ reboot

安裝 Cloudera Manager (以root 登入)

啟用Hadoop 機器

  • 使用帳號/密碼: admin/admin 登入

製作Parcels

About

bigdata_tcci

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

 
 
 

Contributors

Languages

  • Jupyter Notebook 98.2%
  • Java 1.2%
  • Other 0.6%