Blog: Josep Curto D�az

Weka Lite - el futuro

Tue, 16 Mar 2010 05:26:20 -0700

La siguiente versi�n de weka (3.7.2) trae una revisi�n de la plataforma hacia un core mucho m�s simple y liviano (con los algoritmos tradicionales) y la disponibilidad del resto de algoritmos como descargas (soportados por el equipo de Weka y por los que los han creado).

El objetivo es simplificar los primeros pasos en Weka al tener una interficie con menos algoritmos de entrada. De paso tambi�n se consigue mejorar el mantenimiento de la soluci�n al hacerla modular.

Son buenas noticias que Pentaho continue realizando acciones relacionadas con Weka que faciliten tanto su desarrollo como su usabilidad (como por ejemplo, la posibilidad de lanzar procesos de Weka v�a Pentaho Data Integration). Esperemos que poco a poco vayan incorporando m�s funcionalidades de Weka hacia la suite de Pentaho y sus componentes.

Fuente: Pentaho Wiki

Otras opciones OSBI: SQLPower Software

Mon, 08 Mar 2010 07:34:08 -0700

Cuando hablamos de OSBI muchas veces es f�cil quedarse con los principales nombres como Pentaho, Jaspersoft, BIRT de Actuate o R-Project. Existen otras interesantes iniciativas a tener en cuenta y vigilar c�mo evolucionan. Por ejemplo, la de SQLPower Software.

Esta empresa ha creado una colecci�n de herramientas open source basadas en java y por lo tanto multiplataforma que responden a las necesidades usuales de un proyecto de inteligencia de negocio. A saber:

SQL Power Architect (Data Modeling & Profiling Tool): herramienta de modelizaci�n de datos que nos permite dise�ar el data mart o data warehouse e incluso hacer profiling de los datos cargados.
SQL Power Loader (ETL Tool): una herramienta de ETL que permite alimentar de datos al data warehouse o data mart.
SQL Power DQguru (Data Cleansing & MDM Tool): para realizar procesos de limpieza de datos y gesti�n de datos maestros.
SQL Power Wabit (The Intuitive BI Reporting Tool): para realizar self-service BI / ad-hoc querys.
SQL Power Dashboard (Executive Dashboard): para el dise�o de scorecard e informes para la alta direcci�n.
SQL Power XBRL forms: para enviar y gestionar datos XBRL.

Como podemos ver ofrece aire fresco respecto otras soluciones incluyendo tanto MDM (que por ahora s�lo incluye Talend) como XBRL (por primera vez tenido en cuenta en una soluci�n open source). Es decir, buenas ideas desde Canada.

Cabe comentar que algunas de ellas cuentan con una versi�n de subscripci�n con caracter�sticas premium.

Fuente: http://www.sqlpower.ca

Agile BI

Sat, 06 Mar 2010 10:31:46 -0700

Uno de los puntos que frecuentemente preocupa en los desarrollos de BI es el tiempo de desarrollo. Ya sabemos que uno de los puntos d�nde se gasta m�s tiempo es en el desarrollo del Data Warehouse.

Existen soluciones que abordan ese problema desde diferentes enfoques:

Creaci�n de data marts in-memory (pero est� claro que no es un data warehouse).
Desplegar soluciones SaaS enfocadas al self-service BI que frecuentemente tampoco incluyen la construcci�n del data warehouse sino de peque�os data marts.
Reducir el tiempo de desarrollo mediante propuestas de desarrollo �gil.

Es este �ltima tendencia a la que apunta el equipo de Pentaho al presentar su propuesta de dise�o �gil.

�En qu� consiste su propuesta? En aunar en la herramienta de ETL, las capacidades de crear la capa de metadatos OLAP y la creaci�n de elementos / vistas de an�lisis. Se persigue, por lo tanto, reducir el tiempo de desarrollo de soluciones anal�ticas sin menospreciar el desarrollo incremental del data warehouse.

Actualmente se halla en fase de Milestone (y contiene desarrollos no open source), pero debemos tenerlo en cuenta en el futuro dado que es una buena innovaci�n por parte de Pentaho para facilitar el despliegue de soluciones de inteligencia de negocio con sus herramientas.

Fuente: Wiki Pentaho

Intelligence Enterprise destaca Actuate, Jaspersoft, R-Project y Talend como empresas BI a seguir

Wed, 24 Feb 2010 04:58:07 -0700

Intelligence Enterprise ha publicado un interesante donde lista una s�rie de empresas que es necesario seguir. Se centran en los siguientes sectores:

Business Intelligence
Enterprise Applications
Information Management

Y han sido asesorados por los colaboradores habituales:

Rajan Chandras, integration expert and author
Seth Grimes, Alta Plana
Cindi Howson, BI Scorecard
David Linthicum, data integration and cloud computing expert
Curt Monash, Monash Research
Alan Pelz-Sharpe, CMS Watch
David Stodder, Perceptive Information Strategies

Vamos a centrarnos en las empresas Open Source:

Actuate: Actuate es conocida en el �mbito OSBI (Open Source Business Intelligence) por BIRT una de las soluciones de reporting open source m�s vers�tiles y potentes del mercado OSBI que anualmente se actualiza siguiendo el roadmap del IDE Eclipse. Esta soluci�n realmente ha revolucionado el nicho de herramientas de Reporting haciendo que las soluciones de otros fabricantes se deban poner las pilas. Vale la pena echar un vistazo al resto de sus productos. Y destacar la comunidad de intercambio de BIRT.
Jaspersoft: Este empresa conocida por su soluci�n de reporting llamada iReport (una de las primeras soluciones de reporting open source) ofrece una suite completa de BI que integra Reporting, Cuadros de Mando y OLAP. Cabe comentar que Jaspersoft anunci� el pasado 23 de febrero que super� los diez millones de descargas, que contribuye a 350 proyectos open source y que tiene una comunidad de 120.000 miembros registrados. Son cifras muy interesantes que refuerzan el mensaje que el Open Source Business Intelligence est� viviendo un momento importante. Lo que es cierto es Jaspersoft proclama que es ecosistema BI m�s grande del mundo y si bien eso se debe coger con pinzas, es importante tener en cuenta que estamos hablando de uno de los actores importantes del sector OSBI.
R-Project: es una potente soluci�n de an�lisis estad�stico que presenta m�ltiple m�dulos especializados. A parte de su uso intensivo en proyectos universitarios, es necesario destacar que es una herramienta de gran solvencia en miner�a de datos. De ello, se ha percatado incluso otras compa��as Business Intelligence como Information Builders que la han integrado en su suite.
Talend: Talend ofrece soluciones de integraci�n de datos, de MDM (Master Data Management) y Data Quality. Recientemente, ha sido incluida en el Cuadrante M�gico de Gartner de integraci�n de datos como empresa visionaria y eso es un punto a tener en cuenta de esta empresa que est� alcanzando cuotas muy importantes en poco tiempo gracias a un trabajo bien hecho.

CDA (Community Data Access)

Fri, 19 Feb 2010 02:44:07 -0700

De nuevo me pongo a hablar de la comunidad de Pentaho que est� trabajando muy intensamente estos �ltimos meses para mejorar esta herramienta open source. A los proyectos CDF, CDF-DE y PAT se une CDA.

Este proyecto consiste en crear una capa de acceso basada en llamadas URL de diferentes fuentes de datos: SQL, MDX, Metadatos, Kettle,... e incluso composiciones proporcionando diferentes formatos de salida: JSON, XML, CSV, XLS, HTML.

El beneficio de CDA es crear una capa independiente a ser usada por CDF y CDF-DE u otros proyectos en el futuro.

Si bien a�n no est� disponible para descarga est� previsto que sea integrado directamente en Pentaho.

Esperemos que la comunidad siga participando en esta soluci�n y esto incida tambi�n en que la propia empresa tambi�n se motive para ofrecer nuevas mejoras y caracter�sticas innovadores como Pentaho Agile BI. S�lo cabe agradecerles su esfuerzo a todos.

Proyecto: http://code.google.com/p/pentaho-cda/

CDF-DE

Sun, 07 Feb 2010 09:21:19 -0700

Otro interesante proyecto de la comunidad de Pentaho: CDF-DE. La comunidad de Pentaho es un pilar importante para potenciar la funcionalidad de esta soluci�n OSBI. �ltimamente esta comunidad est� muy activa creando mejoras para la soluci�n.

De los creadores de CDF (en particular, Pedro Alves), tenemos un nuevo proyecto CDF-DE. Un editor online de cuadros de mando para Pentaho. Si bien se encuentra en una versi�n muy inicial, este editor se encuentra completamente funcional y eso es un paso significativo en el camino de facilitar la creaci�n tanto para desarrolladores como para usuarios avanzados.

Una vez instalado, desde el servidor de Pentaho es posible la creaci�n si bien es necesario conocer un poco la estructura de un dashboard basado en CDF. Soporta la creaci�n de todos los objetos que actualmente soporta CDF.

Es una buena aportaci�n que conjuntamente con PAT augura un gran futuro de las aportaciones de la comunidad de Pentaho.

Web del proyecto: http://code.google.com/p/cdf-de/

Descargar: http://code.google.com/p/cdf-de/downloads/list

MDM para el resto de los mortales

Mon, 01 Feb 2010 15:32:16 -0700

Ya hace unos meses Talend anunci� la compra de una soluci�n MDM. Hace unos d�as est� disponible la versi�n community de esta soluci�n para su descarga. As� mismo la enterprise que incluye m�ltiples caracter�sticas m�s que su an�nimo como podemos consultar aqu�.

MDM es uno de los puntos calientes del mercado BI y tambi�n en el open source se est� teniendo en cuenta. Para conocer m�s sobre la soluci�n de Talend consultad su p�gina.

Le echaremos un vistazo para poder opinar en profundidad.

Novedades en Weka 3.7.1

Sat, 16 Jan 2010 03:13:32 -0700

Nuevo a�o, nuevas versiones de productos Open Source. Iremos hablando de todas ellas dado que tenemos novedades interesantes.

Empezamos por Weka. Este producto, como ya sabemos, fue adquirido por Pentaho si bien a�n se mantiene como producto independiente. En la �ltima versi�n (disponible aqu�), podemos encontrar interesantes mejoras con la inclusi�n de nuevos algoritmos entre los que destacamos:

SPegasus: Es un algoritmo que a trav�s de la descendiente del gradiente estoc�stico, permite aprendizaje de support vector machine. Para m�s informaci�n consultad el art�culo: S. Shalev-Shwartz, Y. Singer, N. Srebro: Pegasos: Primal Estimated sub-GrAdient SOlver for SVM. In: 24th International Conference on MachineLearning, 807-814, 2007.
RealAdaBoost: algoritmo de clasificaci�n de Friedman que usa el m�todo Real Adaboost. Para m�s informaci�n: J. Friedman, T. Hastie, R. Tibshirani (2000). Additive Logistic Regression: a Statistical View of Boosting. Annals of Statistics. 95(2):337-407.
Furia (Fuzzy Unordered Rule Induction Algorithm): aprendizaje de reglas fuzzy basado en el algoritmo RIPPER. Para m�s informaci�n: Jens Christian Huehn, Eyke Huellermeier (2009). FURIA: An Algorithm for Unordered Fuzzy Rule Induction. Data Mining and Knowledge Discovery.

Para m�s informaci�n consulta en la wiki de pentaho.

Son buenas noticias que este tipo de productos contin�e mejorando a�o tras a�o.

Pentaho Community Technical WebEx

Mon, 04 Jan 2010 23:58:27 -0700

Durante el a�o 2009, la comunidad de Pentaho bajo el auspicio de la compa��a ha estado muy activa realizando eventos online (v�a WebEx) explicando aspectos de las componentes de la suite o de las herramientas de desarrollo. Cabe destacar que los contenidos son frecuentemente muy interesantes y los ponentes son profesionales del mundo del Business Intelligence con una gran experiencia.

Para este 2010, contin�an con este tipo de eventos y ya tenemos las fechas y contenidos de las dos primeras:

January 13, 2010 - Roland Bouman - OLAP and Analysis for web applications using XMLA: en la que se presentar� el framework javascript Xmla4Js que permite interactuar con or�genes de datos XMLA.
January 20, 2010 - Nick Goodman - LucidDB, DynamoBI and Mondrian: d�nde se presentar� las bondades de la base de datos en columnas LucidBD en el contexto de Pentaho.

Coloquio UOC - Introducci�n a la inteligencia de negocio

Fri, 18 Dec 2009 17:05:29 -0700

Desde la semana pasada en la UOC estoy realizando un coloquio sobre el uso de herramientas open source de inteligencia de negocio. El t�tulo del coloquio es �Herramientas Open Source de Business Intelligence�.

El coloquio se divide en tres partes:

La primera parte introducir� el concepto y la finalidad de la inteligencia de negocio.
Posteriormente se presentar� el estado actual del mercado open source en este �mbito.
Finalmente, se usar� un caso pr�ctico para mostrar el uso y funcionalidades de una de las soluciones open source m�s maduras del mercado: Pentaho.

Dado que creo que es un material interesante de adjunto el enlace a la presentaci�n en slideshare as� como al canal youtube de la UOC.

Links: Slideshare - Introducci�n a Business Intelligence - Pentaho

Estudios de la evoluci�n del mercado OSBI

Wed, 09 Dec 2009 04:59:52 -0700

Hola a todos.

Una de las preguntas m�s frecuentes es cu�l es el estado del mercado Open Source. Desde BeyeNETWORK se han realizado diversos estudios. Os recomiendo dos de sus �ltimos an�lisis de mercado:

Open Source Solutions: Managing, Analyzing and Delivering Business Information
by Mark Madsen
Adoption and Usage Survey: Open Source Business Intelligence and Reporting
by Josep Curto D�az

Estos dos estudios nos permiten comparar la evoluci�n de los �ltimos seis meses.

Un cordial saludo.

Jaspersoft se une a OSSI

Sat, 07 Nov 2009 08:00:55 -0700

El pasado cinco de noviembre, Jaspersoft, una de los principales empresas OSBI del mercado, se uni� al Open Source Software Institute (OSSI) con el objetivo de extender el uso del software libre en la administraci�n de los Estados Unidos.

Es un signo de madurez que cada vez m�s organizaciones consideren que sus necesidades de negocio pueden ser cubiertas por soluciones open source.

Sin duda, es un buen paso para Jaspersoft para estar posicionados.

Fuente: Jaspersoft

Pentaho Analyzer

Mon, 05 Oct 2009 21:42:25 -0700

Pentaho ha anunciado la compra de tecnolog�a de Lucidera. En particular, esta compra consiste en Clearview, un sustituto de jpivot.

Este visor s�lo formar� parte de la versi�n enterprise, dotando de mayor valor a�adido esta versi�n y diferenci�ndola respecto la versi�n community.

Es un buen paso dado que Jpivot si bien es una herramienta muy solvente no est� tan enfocada al usuario final.

�Qu� opinais al respecto?

Fuente: Julian Hyde hablando sobre Pentaho Analyser

Colaborador destacado en Talend Babili

Sun, 27 Sep 2009 04:09:34 -0700

Como ya he comentado m�s de una vez, suelo colaborar en diversos proyectos de inteligencia de negocio open source ya sea a trav�s de su divulgaci�n v�a BeyeNETWORK Spain o bien participando de una forma m�s activa (comunicar alg�n bug identificado durante su uso,...).

En el caso particular de Talend, decid� participar en el proceso de traducci�n de sus soluciones (una de ellas de ETL, otra de Data Profiling) a trav�s de la magnifica herramienta web que pone a la disposici�n: Talend Babili.

Es un placer comentar que he sido escogido como uno de los colaboradores destacados de este a�o. Os animo a participar.

Pentaho Community Gathering - Barcelona 2009

Wed, 09 Sep 2009 15:40:53 -0700

Es un placer anunciar que se realizar� en Barcelona el Pentaho Community Gathering. Este evento de car�cter informal reune a la comunidad de pentaho en la que se presentan casos de estudio, nuevos desarrollos,...

Una oportunidad muy interesante de conocer tanto a gente de pentaho como a su comunidad as� como hac�a qu� direcci�n va esta soluci�n.

El evento es gratuito.

D�nde apuntarse: Pentaho Community Event 2009

M�s informaci�n: Wiki de pentaho