Nota: estos apuntes sirven para tener una visión clara del proceso de creación de Images-Docker sin usar Dockerfile, útil para que los retoques que tengamos que hacer a una images para que se ajuste a nuestros fines, de eta forma cumplan nuestras necesidades. # Crear un contenedor Docker lo llamaremos (spark-docker) # In: root@juan-Aspire-ES1-512:/# docker […]
Seguir leyendo
Nota: A continuación conceptos sobre las images de docker. -. Una imagen de Docker es una plantilla de solo lectura que contiene un conjunto de instrucciones para crear un contenedor que se puede ejecutar en la plataforma Docker. Una imagen Docker es un archivo, compuesto por múltiples capas ordenadas. -. Cada vez que Docker lanza […]
Seguir leyendo
Nota: En este laboratorio haremos una instalación de SciKit Learn dentro de un entorno Venv y le instalaremos un cuaderno Jupyter . Instalamos el paquete Venv : (en la maquina anfitriona) In: root@juan-Aspire-ES1-512:/# apt-get install python3-venv Cree una carpeta donde guardamos el proyecto : In: root@juan-Aspire-ES1-512:/# mkdir my-scikit-learn && cd my-scikit-learn In: root@juan-Aspire-ES1-512:/my-scikit-learn# Creamos el […]
Seguir leyendo
-. Estos Apuntes se basan un laboratorio de Apache-Spark y Docker y controlando por PySpark , Jupyter-Notebook . Probando diferentes configuraciones de Pytho-Venv , Docker ,en Cluster. En esta ocasión usare un portátil Host el cual ejecuta sus nodo Master, Jupter, SparkSession y un Server-Ubuntu:20.04 en el cual irán alojados los Worker1 , Worker2 , […]
Seguir leyendo
Nota: En este laboratorio de Apache-Spark y Docker y controlando por PySpark , Jupyter-Notebook, su objetivo es poner en funcionalidad diferentes programas para conseguir un entorno de producción. -.Estos Apuntes se basan en un laboratorio (Que iré escalando) de Apache-Spark y Docker y controlando por PySpark , Jupyter-Notebook . -.Probando diferentes configuraciones de Pytho-Venv , […]
Seguir leyendo
Nota: Instalación de jupyterLab en un entorno docker y lo hacemos con la magia de Dockerfile Creamos la carpeta jupyter-lab : In: root@juan-Aspire-ES1-512:/my-dockerfile# mkdir jupyter-lab Creamos un archivo dockerfile con nano : In: root@juan-Aspire-ES1-512:/my-dockerfile/jupyter-lab# nano dockerfile # Cargamos la imagen base ubuntu-python-pip y Nombre del autor FROM ubuntu-python-pip:latest MAINTAINER Juan-Ma # Ruta del proyecto WORKDIR […]
Seguir leyendo
Nota: Instalación de la ultima versión de JupyterLAB dentro de un entorno Venv-Python con lo cual lo separamos del SO de nuestro PC Dentro de la carpeta (my-venv) creamos el proyectos (my-JupyterLab) : In: root@juan-Aspire-ES1-512:/my-venv# python3 -m venv my-jupyterlab In: root@juan-Aspire-ES1-512:/my-venv# ls -lah Out: drwxr-xr-x 6 root root 4,0K oct 9 19:25 my-jupyterlab Activar el […]
Seguir leyendo
Nota: Instalación en un Entorno-Virtual-Venv Dentro de la carpeta (my-venv) creamos el proyectos (my-Jupyter) : In: root@juan-Aspire-ES1-512:/my-venv# python3 -m venv my-jupyter In: root@juan-Aspire-ES1-512:/my-venv# ls -lah Out: drwxr-xr-x 6 root root 4,0K oct 10 10:59 my-jupyter Activar el entorno (my-Jupyter): In: root@juan-Aspire-ES1-512:/my-venv# source my-jupyter/bin/activate In: (my-jupyter) root@juan-Aspire-ES1-512:/my-venv# Necesitamos tener pip instalado en su sistema Venv : […]
Seguir leyendo
El Proyecto Jupyter es una organización sin ánimo de lucro creada para «desarrollar software de código abierto, estándares abiertos y servicios para computación interactiva en docenas de lenguajes de programación», creado a partir de Ipython El nombre del proyecto Jupyter es una referencia a los tres lenguajes de programación principales soportados por Jupyter, que son […]
Seguir leyendo
Prologo: ( Este post exponemos un caso real, en el cual generamos un entorno virtualizado-ligero ¡paso a paso! Usando Python3-Venv). Python3-Venv El venv módulo proporciona soporte para la creación de “entornos virtuales” ligeros con sus propios directorios , aislados de los directorios de sitios del sistema. Cada entorno virtual tiene su propio binario de Python […]
Seguir leyendo
Prologo: (El modulo Venv de Python3 nos proporciona los medios para crear un entorno virtualizado-ligero en su propia carpeta “Directorio” de ubicación, asislado de los directorios, archivos, del sistema-operativo-anfitrión). Que es Venv: Un entorno virtual (venv) se utiliza para configurar uno o más entornos Python independientes . Los módulos de Python se instalan por […]
Seguir leyendo
Nota: (Un entorno de trabajo (framework), o marco de trabajo es un conjunto estandarizado de conceptos, prácticas y criterios para enfocar un tipo de problemática particular que sirve como referencia, para enfrentar y resolver nuevos problemas de índole similar). Frameworks de Machine-Learning (ML) -. En el desarrollo de software, un entorno de trabajo es […]
Seguir leyendo
Nota: Lo primero un repaso, una recopilación, de los conceptos básicos del Machine-Learning Aprendizaje-Automático (ML). Definiendo Machine Learning: -. El Machine Learning (Aprendizaje Automático) es un rama de la Inteligencia Artificial que busca resolver el cómo construir programas de computadora que mejoran automáticamente adquiriendo experiencia. Esta definición indica que el programa que se crea […]
Seguir leyendo
Nota: (La definición que he encontrado para definir los Algorismos Machine Learning mas explicita para de finirlos valga la redundancia; (Los Algoritmos de Machine Learmin son el alma que impulsa el proceso de aprendizaje.) podemos predecir el resultado deseado aparir de los datos suministrados) . Que son Algorismos-(ML) -. Antes de enumerar los algoritmos […]
Seguir leyendo
Nota: (Las Neuronas-Artificiales pretenden imitar las funciones de las neuronas biológicas. Esta tecnología se pretende que dentro de unos años se pueda empezar a utilizar en en todos los ámbitos. Gracias a las neuronas artificiales se pueden crear redes neuronales artificiales. La unidad básica de una RNA es la neurona. Aunque hay varios tipos de […]
Seguir leyendo
Nota: (Cuando hago referencia en estos apuntes a (Reglas de Aprendizaje Neuronal Network), englobo los siguientes temas que sabemos que están hay pero no se profundiza en ellos o se hace de tal forma ?digamos que no hay forma de como cogerlo¿ lo haré con cierta profundidad (basica) para poder entendelos) . Reglas-Aprendizaje-Red-Neuronal -. […]
Seguir leyendo
Nota: (Las Redes-Neuronales son una rama de la investigación informática, de la neuroinformática. Existen muchos tipos diferentes de Artificial-Neural-Networks y cada uno ofrece diferentes posibilidades para procesar la información). Claves-Redes-Neuronales Las redes neuronales artificiales (también conocidas como sistemas conexionistas) son un modelo computacional evolucionado a partir de diversas aportaciones científicas. Consiste en un conjunto […]
Seguir leyendo
Descarga Spark:(descomprimir el fichero.tgz)-(crear)Mover a la carpeta /spark https://spark.apache.org/downloads.html In: root@juan-Aspire-ES1-512:/# curl -O https://archive.apache.org/dist/spark/spark-3.1.1/spark-3.1.1-bin-hadoop3.2.tgz In: root@juan-Aspire-ES1-512:/# tar xvf spark-3.1.1-bin-hadoop3.2.tgz In: root@juan-Aspire-ES1-512:/# mv spark-3.1.1-bin-hadoop3.2/ /spark Descarga de datos TXT y CSV : Descargamos dos ficheros con datos para trabajar con BigData , uno con el libro ‘Moby Dick’ y el otro con unos datos de costes […]
Seguir leyendo
Descarga Spark:(descomprimir el fichero.tgz)-(crear)Mover a la carpeta /spark https://spark.apache.org/downloads.html In: root@juan-Aspire-ES1-512:/# curl -O https://archive.apache.org/dist/spark/spark-3.1.1/spark-3.1.1-bin-hadoop3.2.tgz In: root@juan-Aspire-ES1-512:/# tar xvf spark-3.1.1-bin-hadoop3.2.tgz In: root@juan-Aspire-ES1-512:/# mv spark-3.1.1-bin-hadoop3.2/ /spark Descarga de datos TXT y CSV : Descargamos dos ficheros con datos para trabajar con BigData , uno con el libro ‘Moby Dick’ y el otro con unos datos de costes […]
Seguir leyendo
. Apache Spark es un marco (Framework) de computación en clúster de código abierto para procesamiento en tiempo real . Qué es Apache Spark Apache Spark : Es una poderosa distribución de código abierto y de propósito general, motor de procesamiento de datos que proporciona procesamiento de flujo en tiempo real . Procesamiento interactivo, procesamiento […]
Seguir leyendo