Curs 7. Servicii de file sharing. 17 noiembrie Gestiunea Serviciilor de Rețea. GSR Curs 7, Servicii de file sharing 1/45

Transcription

1 Curs 7 Servicii de file sharing Gestiunea Serviciilor de Rețea 17 noiembrie 2011 GSR Curs 7, Servicii de file sharing 1/45

2 Moto Jesus saves! The rest of us better make backups. GSR Curs 7, Servicii de file sharing 2/45

3 Partajarea fișierelor SSH. rsync NFS Samba FTP Încheiere Întrebări GSR Curs 7, Servicii de file sharing 3/45

4 Suport Unix and Linux System Administration Chapter 8 Storage (Section Storage area networking ) Chapter 18 The Network File System Chapter 30 Cooperating with Windows (Section Sharing files with Samba and CIFS ) Professional Linux System Administration Chapter 12 File and Print Sharing GSR Curs 7, Servicii de file sharing 4/45

5 Outline Partajarea fișierelor SSH. rsync NFS Samba FTP Încheiere Întrebări GSR Curs 7, Servicii de file sharing 5/45

6 Partajarea fișierelor file sharing distribuție de conținut/date/informație probleme drepturi de acces autentificare consum de resurse (lățime de bandă) interfață de utilizare scalabilitate număr de utilizatori, număr de accese HTTP/FTP, Peer-to-Peer, SSH, rsync, NFS, Samba GSR Curs 7, Servicii de file sharing 6/45

7 HTTP/FTP HTTP universal disponibil, număr mare clienți (browsere) suport de securitate (HTTPS) număr mare de aplicații nu are implicit suport pentru transferuri parțiale wget --continue folosit, în general pentru download; pentru upload se folosește SSH/FTP necesită acces și configurări la nivel de server FTP din ce în ce mai puțin utilizat suport redus comparativ cu HTTP suport de securitate: autentificare, FTPS nu are suport implicit pentru transferuri parțiale folosit pentru upload; un avantaj față de SSH este rapiditatea posibile probleme de acces (active mode, passive mode) GSR Curs 7, Servicii de file sharing 7/45

8 WebDAV web-based distributed authoring and versioning authoring a activ, versioning mai târziu (extensia Delta-V) makes the web a readable and writable medium noi metode și headere în HTTP mod dav în Apache în Linux, davfs2, fusedav, cadaver (CLI) util pentru sisteme de control al versiunii (Git, SVN): URL-uri read-write peste HTTP(S) extensii: Delta-V, CalDAV, CardDAV, GroupDAV GSR Curs 7, Servicii de file sharing 8/45

9 Protocoale Peer-to-Peer nu necesită un server upload/download facil transfer parțial distribuție rapidă scalabilitate probleme cu NAT, firewall utile pentru număr mare de clienți/peeri în general fără forme de securitate/drepturi de acces GSR Curs 7, Servicii de file sharing 9/45

10 SSH/rsync SSH (scp) transfer securizat (probabil cea mai sigură metodă) necesită cont și server formă preferată de upload nu există download public (anonim) se preferă HTTP sau protocoale peer-to-peer fără suport de transfer parțial (use rsync) rsync cel mai bun suport de transfer parțial actualizări ale conținutului se transferă doar ce diferă (delta encoding) util pentru mirroring și backup-uri poate folosi wrapper cu SSH GSR Curs 7, Servicii de file sharing 10/45

11 NFS/Samba NFS, SMB/CIFS, DFS, AFS NFS (Network File System) montare locală (mount -t nfs) acces transparent acces la server configurare relativ facilă suport de securitate controlul accesului sistem de fișiere partajat Samba implementare a SMB/CIFS compatibilitate cu sisteme Windows acces la server configurare complexă; se poate folosi SWAT suport de securitate montare locală cu smbmount, smbfs GSR Curs 7, Servicii de file sharing 11/45

12 Outline Partajarea fișierelor SSH. rsync NFS Samba FTP Încheiere Întrebări GSR Curs 7, Servicii de file sharing 12/45

13 scp reminder scp sursă destinație upload folosit în colaborare cu alte protocoale scp file.txt scp -r code/ download folosit doar în situațiile ce necesită securitate; în rest, HTTP scp -r GSR Curs 7, Servicii de file sharing 13/45

14 rsync sincronizarea fișierelor între două sisteme minimizarea transferului se transmit, în măsura posibilului, doar datele diferite delta encoding înlocuitor pentru scp sintaxă similară pentru client Andrew Tridgell backups mirroring GSR Curs 7, Servicii de file sharing 14/45

15 rsync daemon rsync --daemon port implicit 873 pentru configurare pe Debian editat /etc/default/rsync RSYNC ENABLE=true /etc/init.d/rsync start stop restart Configurare în /etc/rsyncd.conf man rsyncd.conf format.ini (similar cu Samba) cat /etc/rsyncd.conf [code] path = /home/razvan/code comment = Razvan s code GSR Curs 7, Servicii de file sharing 15/45

16 Client rsync implicit folosește un shell rsync localhost:code s password: drwxr-xr-x /11/13 09:40:02 code transfer folosind rsync daemon (de două ori două puncte : ) razvan@valhalla:/tmp$ rsync localhost::code drwxr-xr-x /11/13 09:40:02. -rw-r--r /11/13 09:40:02.gitignore drwxr-xr-x /11/13 09:41:14.git drwxr-xr-x /11/07 12:33:17 asm [...] argumente uzuale sunt -avz GSR Curs 7, Servicii de file sharing 16/45

17 rsync + SSH șir de căutare rsync ssh pe Google :-) opțiunea -e la rsync nu necesită server de rsync util pentru upload (sigur) rsync -avz -e ssh remoteuser@remotehost:/remote/dir /this/dir/ sincronizare rsync -avz -e ssh /this/dir remoteuser@remotehost:/remote/dir backup GSR Curs 7, Servicii de file sharing 17/45

18 rsync backup (cron) 1 #!/bin/bash 2 3 RSYNC=/usr/bin/rsync 4 SSH=/usr/bin/ssh 5 RUSER=so 6 RHOST=cursuri.cs.pub.ro 7 RPATH=/home/courses/so/public html/* 8 LPATH=/home/so/www/cs/ 9 #OPTS= -avz --include /wiki/images --exclude /wiki/* --exclude /wiki-old --exclude /Teme/note --exclude /Teme/upload --exclude /Teme/*.auth --exclude /functions.php 10 OPTS="-avz --exclude /wiki-old --exclude /Teme/note --exclude /Teme/upload --exclude /Teme/*.auth --exclude /functions.php" cd $LPATH && $RSYNC $OPTS -e $SSH $RUSER@$RHOST:$RPATH $LPATH GSR Curs 7, Servicii de file sharing 18/45

19 Outline Partajarea fișierelor SSH. rsync NFS Samba FTP Încheiere Întrebări GSR Curs 7, Servicii de file sharing 19/45

20 NFS protocol de acces la fișiere montare în rețea NFSv4 (RFC3010, RFC3530) inițial funcționa peste UDP, astăzi peste TCP RPC-based nu există un port pe care ascultă portmap (port mapper, rpcbind) TCP/UDP port 111 NFSv4.1 pnfs (scalable parallel access) GSR Curs 7, Servicii de file sharing 20/45

21 Configurare server NFS /etc/exports Ce se partajează? Ce stații au acces? Cu ce drept? anaconda:~# cat /etc/exports /home/razvan/public_html/pub (rw,sync,subtree_check) După modificarea /etc/exports se rulează comanda exportfs -ra GSR Curs 7, Servicii de file sharing 21/45

22 Client NFS montare mount anaconda.cs.pub.ro:/home/razvan/public_html/pub pub configurare /etc/fstab montare automată la pornire tail -1 /etc/fstab anaconda.cs.pub.ro:/home/razvan/public_html/pub /home/razvan/nfs/anaconda/ GSR Curs 7, Servicii de file sharing 22/45

23 Utilizări NFS directoare partajate la nivelul rețelei locale stocarea directoarelor home pe un singur sistem/server directoare cu executabile pe un singur sistem (dacă sunt sisteme identice) GSR Curs 7, Servicii de file sharing 23/45

24 Sisteme de fișiere pentru clustere Lustre (Linux cluster) high performance file system GlusterFS NAS file system cloud computing GSR Curs 7, Servicii de file sharing 24/45

25 SAN/NAS Storage Area Network discuri legate prin rețea la sistemele de procesare SCSI AoE, FC, HyperSCSI, iscsi Network Attached Storage sisteme dedicate care asigură stocarea elimină nevoia utilizării FreeNAS (stripped-down version of FreeBSD) GSR Curs 7, Servicii de file sharing 25/45

26 SAN/NAS (2) GSR Curs 7, Servicii de file sharing 26/45

27 iscsi Internet Small Computer System Interface SCSI commands over IP networks SCSI clients initiators SCSI storage devices targets SAN poate folosi infrastructura existentă (spre deosebire de FibreChannel) GSR Curs 7, Servicii de file sharing 27/45

28 Outline Partajarea fișierelor SSH. rsync NFS Samba FTP Încheiere Întrebări GSR Curs 7, Servicii de file sharing 28/45

29 Samba implementare free a SMB/CIFS SMB Server Message Block CIFS Common Internet File System Andrew Tridgell (rsync) network shares doi daemoni smbd serviciu de file/printer sharing nmbd serviciu de mapare NetBIOS-IP GSR Curs 7, Servicii de file sharing 29/45

30 Configurare Samba configurările se realizează în /etc/samba/smb.conf fișier format.ini (similar rsyncd.conf :-P) în zona [global] este importantă opțiunea netbios name nu apare implicit în fișierul de configurare anaconda:~# cat /etc/samba/smb.conf grep -v ^[#;] grep -v ^$ [global] workgroup = CS netbios name = anaconda server string = %h server dns proxy = no log file = /var/log/samba/log.%m max log size = 1000 syslog = 0 [...] GSR Curs 7, Servicii de file sharing 30/45

31 Configurare Samba (2) directive pentru creare share-uri implicit sunt partajate read-only directoarele home pentru verificarea configurației se folosește comanda testparm se folosește smbpasswd pentru adăugarea unui utilizator în Samba GSR Curs 7, Servicii de file sharing 31/45

32 Configurare Samba (3) se adaugă utilizatorul în configurarea Samba anaconda:~# smbpasswd -a razvan New SMB password: Retype new SMB password: Testare configurație smbclient -L //anaconda -U razvan Enter razvan s password: Domain=[CS] OS=[Unix] Server=[Samba ] Sharename Type Comment print$ Disk Printer Drivers IPC$ IPC IPC Service (anaconda server) lp Printer Generic dot-matrix printer entry razvan Disk Home Directories Domain=[CS] OS=[Unix] Server=[Samba ] GSR Curs 7, Servicii de file sharing 32/45

33 Client Samba smbclient interfața FTP-like smbclient //anaconda/rd-pub -U razvan Enter razvan s password: Domain=[CS] OS=[Unix] Server=[Samba ] smb: \> get i386-cds.torrent getting file \i386-cds.torrent of size as i386-cds.torrent (490.3 KiloBytes/sec) (aver smb: \> exit smbmount montarea share-ului în sistemul local de fișiere $ smbmount //anaconda/rd-pub pub -o username=razvan,password=statesecret $ smbumount pub GSR Curs 7, Servicii de file sharing 33/45

34 Client Samba (2) smbmount apelează mount.cifs man smbmount (identic cu man mount.cifs) mount.cifs montare/demontare mount -t cifs //anaconda/rd-pub pub -o username=razvan,password=roseb umount pub se poate configura /etc/fstab pentru pornire la boot GSR Curs 7, Servicii de file sharing 34/45

35 Client Samba (3) aplicații GUI în Windows, integrat în Explorer (file sharing) pe Linux, suport integrat în KDE, GNOME URL de forma smb://netbios-name/share-name intrări de tipul View Network GSR Curs 7, Servicii de file sharing 35/45

36 SWAT Samba Web Administration Tool pe Debian apt-get install swat ascultă conexiuni pe portul 901 se recomandă securizarea (certificat digital) accesului la port GSR Curs 7, Servicii de file sharing 36/45

37 Outline Partajarea fișierelor SSH. rsync NFS Samba FTP Încheiere Întrebări GSR Curs 7, Servicii de file sharing 37/45

38 Protocolul FTP File Transfer Protocol transfer de fișiere RFC aprilie 1971 control connection data connection active mode conexiune de date de la server la client passive mode conexiune de date de la client la server implicit nesigur FTPS, SFTP/SCP anonymous FTP GSR Curs 7, Servicii de file sharing 38/45

39 Clienți/severe FTP BulletProof FTP, CrushFTP Server, FileZilla Server ProFTPD, Pure-FTPd, vsftpd FileZilla, WinSCP, Total Commander curl, ftp, lftp, ncftp GSR Curs 7, Servicii de file sharing 39/45

40 FTPS vs. SFTP Pros cunoscut transfer server-to-server autentificare SSL/TLS suport FTP + SSL/TLS în multe framework-uri Cons necesită un canal de date secundar nu toate serverele FTP oferă suport SSL/TLS nu toți clienții FTP oferă suport SSL/TLS Pros o singură conexiune (nu există canal de date) conexiune permanent securizată operații pentru modificarea drepturilor de acces Cons gestiune mai dificilă a cheilor SSH nu există suport SSH/SFTP în diverse framework-uri GSR Curs 7, Servicii de file sharing 40/45

41 Outline Partajarea fișierelor SSH. rsync NFS Samba FTP Încheiere Întrebări GSR Curs 7, Servicii de file sharing 41/45

42 Ce folosim în situația X? upload de fișiere: scp, SFTP, FTPS upload constant/sincronizare/backup/mirroring: RSYNC download de fișiere publice: HTTP, anon-ftp download de fișiere în mod securizat: SCP, SFTP, FTPS distribuție de fișiere de mari dimensiuni: BitTorrent folosirea unei singure instanțe de directoare home, date cu acces comun: NFS interacțiune cu sisteme Windows, printer sharing: Samba partajarea codului, code versioning: SCM/VCS (Git, Subversion, Mercurial, Darcs, Bazaar) GSR Curs 7, Servicii de file sharing 42/45

43 Cuvinte cheie WebDAV SSH file-sharing SSH, scp rsync rsync daemon /etc/rsyncd.conf NFS RPC NAS SAN iscsi nfs-kernel-server /etc/exports mount -t nfs Samba /etc/samba/smb.conf smbclient smbmount mount -t cifs SWAT sshfs FTP FTPS/SFTP GSR Curs 7, Servicii de file sharing 43/45

44 Resurse utile GSR Curs 7, Servicii de file sharing 44/45

45 Outline Partajarea fișierelor SSH. rsync NFS Samba FTP Încheiere Întrebări GSR Curs 7, Servicii de file sharing 45/45