programa-con-google: Moderno enfoque para trabajar datos masivos, Bigquery API

Moderno enfoque para trabajar datos masivos, Bigquery API

Thursday, March 14, 2013

mas detallesPara que puedo utilizar esta tecnología de procesamiento de datos masivos?mas detallesQue tenemos que hacer para comenzar a utilizar la solución?

Como pueden observar en la Figura.2 podemos generar nuevos proyectos o bien utilizar consultas de prueba en los repositorios públicos como “natality”, “trigrams”, etc.

Enfoque Ninja

Para nuestra demostración técnica vamos a generar un cliente Web que consulte un banco público de datos, “natality”, luego mostrar un gráfico de la información consultada.Vamos a generar mediante HTML y javascript el acceso a la información desde ek banco de datos de “natality” utilizando Bigquery y representando la información mediante Chart API (grafico de torta que muestra la cantidad de tragos por estado del repositorio de datos masivo).
Consulta promedio: 2seg y1,49 GB procesados.
var request = gapi.client.bigquery.jobs.query({
'projectId': [identificador],
'timeoutMs': '30000',
'query': 'SELECT state, AVG(drinks_per_week) AS theav FROM [publicdata:samples.natality] WHERE year=2000 GROUP BY state ORDER BY theav DESC;' });Código 1 - Consulta a Bigquery request.execute(function(response) {
console.log(response);
var stateValues = [["State", "Drinks"]];
$.each(response.result.rows, function(i, item) {
var state = item.f[0].v;
var drinks = parseFloat(item.f[1].v);
var stateValue = [state, drinks];
stateValues.push(stateValue);
}); var data = google.visualization.arrayToDataTable(stateValues);

Código 2 - Proceso para los datos y su representación en Chart API

Podemos ver el resultado final en la Figura 3.

Pueden ver el código completo en el siguiente repositorio publico de código fuente. (en el video de implementación se muestra el camino completo para generar la solución)

Les dejo un video de muestra de la demostración:

Este tema lo tratamos en nuestro programa semanal de "Herramientas Modernas para Desarrolladores Modernos" en VIVO. Una metropolis de datos enfoque Bigquery

Puedes conocer más sobre nuestra región en:

+Desarrolladores Latam

+Nicolas Bortolotti Perfil | Blog |

Nicolás es director de relaciones para desarrolladores en latinoamérica región sur para Google. El ha desarrollado comunidades académicas y de investigación en varios países de Latinoamérica sobre la plataforma de desarrollo web y mobile de Google. Además Nicolas es profesor universitario, donde trabaja fuertemente en arquitecturas de software, ambientes emergentes e innovación en modelos de ingeniería de software

Programa con Google

Moderno enfoque para trabajar datos masivos, Bigquery API

No comments :

Post a Comment

Labels

Archive

Feed

Company-wide

Products

Developers