jcaristy

ref: refs/heads/main

jcaristy

https://chrismckee.co.uk/creating-mounting-new-drives-in-ubuntu-azure/

There are at least three programs I know of that list device mount points: mount, df and lsblk:

jcaristy

# Para correr Portainer con Data Local
docker run -d -p 9000:9000 --restart always -v /var/run/docker.sock:/var/run/docker.sock -v /data-portainer:/data portainer/portainer


docker run -d -v /data/rancher-mysql:/var/lib/mysql -p 8080:8080 -p 80:8080 --restart=unless-stopped rancher/server:latest

jcaristy

# Deshabilitar el firewall
sudo ufw status verbose
sudo ufw disable

# Instalar Apache
sudo apt -get install apache2


# Buscar paquetes actuales de mysql
sudo apt-cache search mysql | grep mysql | more

jcaristy

Estos pasos son para instalar Dremio en Ubuntu


### Primero instalamos jre
sudo apt-get update
sudo apt-get install default-jre
https://www.digitalocean.com/community/tutorials/instalar-java-en-ubuntu-con-apt-get-es


#LINKS DE INSTALACION

jcaristy

Editamos el crontab

sudo crontab -e

Agregamos la siguiente linea

0 6 * * * /sbin/shutdown -r now

// Reiniciamos todos los dias a las 4am. Hora del servidor

Obtenemos la hora del servidor

date

jcaristy

# Mostrar
defaults write com.apple.finder AppleShowAllFiles YES
killall Finder /System/Library/CoreServices/Finder.app

# Ocultar
defaults write com.apple.finder AppleShowAllFiles NO
killall Finder /System/Library/CoreServices/Finder.app

jcaristy

Informacion interesante del parseo

Tener en cuenta que se puede leer con OpenCSVSerde http://docs.aws.amazon.com/athena/latest/ug/csv.html

jcaristy

# Listar en databricks el archivo
%fs ls dbfs:/databricks-datasets/online_retail/data-001/

# En databricks ya esta inicializado el objeto SparkSession pero sino se puede inicializar asi
from pyspark.sql import SparkSession
spark = SparkSession.builder.master("local").appName("Word Count").config("spark.some.config.option", "some-value").getOrCreate()
  
# Leer CSV a un RDD
path = "dbfs:/databricks-datasets/online_retail/data-001/data.csv"
data = spark.read.csv(path)

jcaristy

Listar los archivos

%fs ls

Nota: %fs = Funciones del sistema (%file-system)