Tanto para sacar temas para este nuestro blog como para mejorar en mi actividad laboral, me paso el día buscando herramientas por el proceloso mar de Internet. De todas las que voy descubriendo las que más me atraen habitualmente no son aquellas supernovedosas y futuristas si no aquellas que cumplen el papel de la morfina, el de apaciguar los dolores. Y lo cierto es que el login de una web se está llegando a convertir en un dolor en los tiempos de Facebook, Twitter y demás servicios a través de los cuales cada vez más se solicita que uno se pueda autentificar y loguear. Una buena manera de combatir este dolor parece DailyCred.

DailyCred es basicamente una API basada en OAuth 2 que permite gestionar la autentificación en un sitio a través de Facebook, Twitter, Google y el habitual email/password de manera consistente y centralizada (en Amazon AWS), evitando duplicidades entre servicios y demás inconsistencias e incoherencias que se puedan producir al llevar cada autentificación por su cuenta. Además permite migrar las cuentas de usuario que ya tengas activas, agregar nuevos servicios a través de una RESTApi y analizar una importante serie de analíticas y datos.

En definitiva, que parece tener buena pinta y al ofrecer 30 días gratis (y tener una documentación bastante abundante y bien estructurada) se convierte en un caramelo muy apetitoso de probar… aunque guardar este tipo de información en la nube sigue siendo tema muy escabroso para muchos CTOs y jefes de proyecto. Una utilidad que puede llegar a ahorrarte algunos quebraderos de cabeza y un tiempo precioso que luego podrás emplear en maquinar nuevos fichajes en el Comunio en tareas más productivas.

Y como siempre: si lo terminas utilizando, queremos feedback. Además, si conoces más herramientas de este tipo (alguna open source no vendría mal), los comentarios también están abiertos.

Pd: odio estas musiquillas teletubieras que les ponen a este tipo de vídeos de presentación.

Vía y vídeo | DailyCred
En Genbeta Dev | Mozilla Persona nos garantiza un futuro con una contraseña

Controversias a parte sobre las actualización de la condiciones de la versión 1.1 de la API de Twitter para desarrolladores tenemos que reconocer que la compañía ha sabido conjuntar un gran abanico de tecnologías Open Source para construir un increíble servicio que hace posible millones de tweet diarios.

No es de extrañar, por tanto, que recientemente se haya incorporado Twitter a la Linux Foundation y participe activamente en conferencias como las que se está desarrollando en San Franscisco estos días, LinuxCon. Una de las charlas será la tecnología de software libre que hay detrás de cada tweet.

Pasamos a repasar algunas de las pinceladas y apuntar las tecnologías más importantes que usa Twitter en su infraestructura.

Twitter no sólo ha hecho uso de importantes tecnologías Open Source para sus propósitos, si no que ha colaborado activamente con el desarrollo de algunas y la creación desde cero de algunos framework que a muchos les sonarán. El constante ciclo de desarrollo de aprendizaje y desarrollo con la comunidad es un beneficio mutuo. Su mayor reflejo lo podemos observar en la cuenta de Github de Twitter en los más de 80 repositorios y 180 miembros que componen la mayor parte del software libre utilizado por la plataforma.

Proyectos Open Source usados por Twitter

Los ejemplos más claros de las tecnologías que Twitter consume a día de hoy son:

• MySQL usada principalmente para almacenar los Tweets. Ellos han desarrollado su propio fork para ajustarlo a la necesidades, por supuesto, abierto a la comunidad. En él se ha prestado especial atención en la optimización y en el rendimiento, claves para el servicio.
• El abanico de proyectos Apache usados en su infraestructura y que nos estamos acostumbrando en ver en las grandes redes sociales: Cassandra, Hadoop, Lucene, Pig. En muchos de ellos Twitter los ha esponsorizado.
• No podía faltar un clásico como Memcached para manejar la caché y escalar el creciente tráfico de la plataforma. De ahí ha salido un interesante proyecto abierto que han liberado recientemente, Twemcache, ajustando sus necesidades a la base de Memcached.

Algunos de sus proyectos liberados a la comunidad

Twitter también ha creado proyectos desde cero:

• lago es un generador de carga para testear el tráfico en producción. Es un herramienta fundamental para el entorno en el que se mueve Twitter con millones de peticiones en cortos espacios de tiempo.
• Zipkin ayuda a recolectar los tiempo de respuestas de las peticiones de la API de Twitter.
• Scalding es una librería de Scala que hace más sencillo escribir los jobs de MapReduce en Hadoop integrándose perfectamente con la Scala y la JVM.
• Apache Mesos para construir aplicaciones distribuidas y compartir recursos entre data center.
• No tan relacionada con la ifraestructura, pero si uno de los proyecto proveniente de Twitter tenemos a Bootstrap que nos permite crear ágiles páginas HTML5 con componentes potentes.

La cultura empresarial de Twitter está muy influenciada por el software libre. Muchos de sus ingenieros son conocidos entre las comunidades de desarrolladores, y lo que me parece fundamental es que cada empleado tiene voz y oportunidad para innovar. Twitter apoya los proyectos personales de los desarrolladores y los promueve devolviendo a la comunidad lo que les ha aportado.

Como fanáticos de Twitter disponen de una cuenta dedicada a todo lo relacionado con el Open Source: TwitterOSS y por supuesto su Github que está rebosantes de proyectos deseando ser trasteados.

Más información | GitHub Twitter
Vía | Open Source

Twitter, el gigante del microblogging, usa MySQL como base de datos para la gran mayoría de su sistema (tweets, timelines, datos del usuario…). Como es lógico en una web que tiene que soportar un tráfico tan brutal, han tenido que, aprovechando el carácter open source (de momento) del SGBD de Oracle, tunear MySQL al máximo para que ofrezca un rendimiento óptimo (aquellos pioneros que estábamos en Twitter en 2007 podemos dar fe de que la web estaba más tiempo caída que de pie). La novedad está en que la semana pasada Twitter decidió compartir con el resto de la humanidad este fork propio de MySQL.

Este Twitter MySQL está basado en MySQL 5.5, está disponible en Github, se comparte con una licencia BSD y Twitter hace hincapié en que lo comparte con fines ilustrativos y que no se va a encargar en ningún caso de bugs, compatibilidades o mantenimiento. Las características más novedosas de Twitter MySQL se pueden agrupar en cinco campos:

• Nuevas variables de estatus.
• Optimización del acceso a memoria no uniforme (NUMA).
• Timeout de las querys del lado del servidor.
• Exportación y restauración del pool de conexiones de manera más liviana.
• Optimización para dispositivos SSD.

Pues ya sabes, forkea, cacharrea y luego nos cuentas porque buena pinta desde luego tiene, visto desde fuera.

Vía | Twitter Engineering
Descarga | Github
En Genbeta Dev | MySQL deja de ser libre (nuestra inocentada del día)
En Genbeta Dev | Twitter libera Bootstrap, su framework CSS para aplicaciones

En Estados Unidos siempre han tenido, desde el celebérrimo ‘I want you’ de la II Guerra Mundial, una gran capacidad para el reclutamiento, para enaltecer unos valores y hacer que la gente corra para alistarse. En Twitter, que se ve que están buscando aumentar muy mucho aumentar su plantilla, lo saben y, de coña pero en el fondo en serio, han lanzado un vídeo de reclutamiento realmente peculiar. No te digo más, sólo dale al play.

Realmente se trataba de un concurso entre los empleados de Twitter para realizar “el mejor vídeo de reclutamiento de todos los tiempos” y el que está sobre estas líneas resultó el ganador (así serían los otros…). Es decir, vídeo de coña parodiando a los del ejercito pero puestos de trabajo reales… y muchos de ellos en nuestro área. Los van publicando todos en @jobs. Por intentarlo que no quede, ¿no?

Pd: al hablar de reclutamientos no puedo dejar de acordarme de ese mítico capi de ‘Los Simpson’ y el ‘Aniram al ne etatsila’

Vía | Genbeta SocialMedia
En Genbeta Dev | Vivir y trabajar en Twitter

Si de verdad quieres aprender de cualquier tema, tienes que escuchar y leer a los mejores en ese campo. Si quieres aprender de escalabilidad y rendimiento de bases de datos de gran carga y tamaño, escuchar al arquitecto de bases de datos de un gigante en expansión continua parece una gran idea. Pues bien, Jeremy Cole, uno de los arquitectos de bases de datos de Twitter impartió una charla en el ámbito de la O’Reilly MySQL Conference titulada ‘Big and Small Data in @Twitter’. La tienes completa en el vídeo de arriba pero podemos sacar unas cuantas revelaciones de lo que comenta a lo largo de la media hora larga que dura la charla:

- Al principio en Twitter usaban sharding (particionado de datos horizontal agrupando por alguna característica lógica) temporal. Pronto se dieron cuenta de que se trataba de un error debido a: logística compleja, caro y problemas con la carga de balanceado.

- Entonces pasaron a utilizar FlockDB (para el mapeo de ids) y Glizzard, un framework propio sobre MySQL (usando como tecnología de almacenamiento InnoDB, no MyIsam) para el almacenamiento.

- Con Glizzard no hay datos corruptos y el rendimiento mejora sustancialmente… lo que redunda en unos administradores de bases de datos viviendo un poco mejor.

- ¿Por qué MySQL y no otra? Principalmente porque es estable: funciona bien la mayoría del tiempo y no se suele corromper.

- Además de MySQL / Glizzard: Vertica para analisis y grandes agregaciones, Cassandra para escrituras de alta velocidad y el cada vez más en boga Hadoop para consultas que afecten a una gran cantidad de filas.

Se podrá estar más o menos de acuerdo pero desde luego se trata de aspectos muy interesantes.

Vía | Highscability.com
Vídeo | Canal de Youtube de O’Reilly

Hoy os traemos una nueva infografía con contenido bastante interesante para cualquier desarrollador y que ya lleva circulando unos cuantos días: las ventajas de trabajar en alguna de las grandes de Silicon Valley, en este caso, Google, Facebook, Twitter, Linkedin y las menos conocidas (por lo menos por este humilde editor) Tagged, Eventbritte y Gaia. Las ventajas se dividen en servicios proporcionados, actividades de oficina, comida, flexibilidad de horarios y beneficios sanitarios. La imagen completa la tienes debajo de estas líneas (y a gran escala en la fuente del post) y deja algunos datos curiosos:

• Google tiene una pared para escalar... Twitter también…
• El servicio de lavandería y el gimnasio son los servicios más comunes
• Todas ofrecen snacks y refrescos gratis (por lo que el gimnasio ahora cobra más sentido)
• No hay oficina donde no haya un futbolín, el invento español más universal con la fregona, el chupachups y la siesta
• Muy pocas vacaciones regladas (13 días como mucho)
• Todas ofrecen servicios médicos completos, algo que lo mismo en España no sería muy apreciado ya que tenemos sanidad pública pero que en Estados Unidos es algo primordial

En definitiva, unas ventajas que harán que a muchos se les haga la boca agua pero que a mi, personalmente, me parecen sobornos legales para tenerte atado a la oficina y el trabajo.

Vía | Mundo geek

Hace varias semanas el equipo de Twitter solicitó a su comunidad de desarrolladores, en una encuesta web, su opinión sobre dónde mejorar las funcionalidades de la plataforma. Incluso hicieron llamadas personales a muchos de ellos y, al cabo, se han estudiado todas y cada una de las propuestas que se les ha hecho llegar. Ahora publican los resultados, al menos un avance de los cambios más importantes solicitados por todos nosotros:

• Issue Tracker: es mucho más fácil tener todos los bugs/peticiones reunidos en un mismo sitio y, aunque el existente llevaba funcionando desde mayo, han sacado una nueva versión mucho más útil. La han migrado desde Google Code Tracker hasta su propia herramienta.
• Gestión de cambios: no existía una política clara de cambios así que, por fin, ya existe. A partir de ahora se sabrá con antelación cuándo las funcionalidades pasarán a “deprecated”, y además avisarán con 30 días de antelación. Apuntan que para cambios importantes, como el reciente cambio a OAuth, seguirán oyendo a la comunidad sin que ese plazo tenga efecto.
• Límites de uso: han recibido muchas peticiones para aumentar los límites en el uso de la API (350 llamadas/hora con autentificación, 150 sin ella). Ahora no será así para todos y dependerá de tu base de usuarios en tu Twitter: a más usuarios, más aumento del límite.
• Mejor asistencia: prometen más actualizaciones y mejoras en el contacto con los desarrolladores, suponemos que también en la documentación de producto.
• Autentificación: afirman que están simplificando esta funcionalidad (OAuth) y que quieren inmiscuir a la comunidad para conseguirlo de un modo eficiente.

Más información | Twitter Developers: Acting on your feedback

Twitter como viene siendo habitual ha lanzando una nueva herramienta Open Source para recompensar a la comunidad, como muestra de agradecimiento a los beneficios que obtiene la compañía al usar herramienta de código abierto en sus proyectos. En esta ocasión se trata de Twitter Bootstrap, un conjunto de herramientas front-end para el desarrollo rápido de aplicaciones web. En definitiva, un conjunto de CSS y HTML que utiliza algunas de las técnicas más modernas para ofrecer plantillas para maquetar, estilos estilos para tipografías, formularios o botones en una librería (de apenas 6k con gzip).

Twitter Bootstrap es una solución flexible que ofrece muchas más potencia que el CSS normal. Conseguimos una serie de características extras como las declaraciones anidadas, mixins, operaciones y funciones de color. Es fácil de implementar en el código tan sólo incluyendo la declaración en la cabecera y usar los componentes disponibles.

La evolución de Bootstrap dentro de Twitter ha sido un trabajo constante para disponer de una herramienta que les permitiera escalar más fácilmente y mantener los proyectos que iban desarrollando. Al principio de todo cada ingeniero usaba cualquier librería con la que estuviera familiarizado lo que producía graves inconsistencias al intentar crecer. Por lo tanto Twitter Bootstrap es un gran ejemplo para todos los desarrolladores que trabajamos en compañías grandes en la que es necesario disponer de un framework uniforme para ir evolucionando.

Podéis echar un vistazo a todo el código en la sección que dispone Twitter en GitHub. Allí comprobaréis todo lo los archivos que lo componen por separado:

• reset.css para eliminar los elementos innecesarios.
  
• Variables de color y preboot.less mixins para conseguir gradientes, transparencias y transiciones.
  
• scaffolding.less elementos básicos y globales para generación de grid, diseño estructural y las diferentes plantillas de páginas.
  
• type.less con estilos para el cuerpo de textos, listas y tipologías versátiles.
  
• pattern.less elementos para navegación, modales, paneles de advertencias…
  
• forms.less estilos para los campos de entrada, formularios y estados de validación.
  
• tables.less estilos para maquetar datos tabulados.
  

Vía | Twitter Dev Blog
Más información | Twitter Bootstrap

Uno de los puntos fuertes que han hecho grande a Twitter es su API. Después del anuncio de su servicio para subir fotos directamente a los tweets, todos esperábamos la llegada de una API del servicio de publicación de fotos de Twitter para implementarlo en nuestras aplicaciones. Podemos estar felices, porque ya está aquí.

El método para subir imagenes directamente a nuestros tweet, statuses/update_with_media, utiliza las credenciales OAuth y debe hacerse mediante multipart/form-data. Es más simple y requiere menos dependencias que el resto de métodos de subida de imágenes, por ejemplo, la del avatar. Uno de los aspectos más llamativos es que la nueva llamada cambia el host de las peticiones a upload.twitter.com. Táctica para no sobrecargar su ya saturada API.

Para más información podéis consultar la documentación oficial de Twitter en la que encontraréis todos los parámetros necesarios y el json de respuesta con los datos de la imagen después de ser cargada y procesada en el tweet. También podemos revisar las librerías existentes que soportan la subida de imágenes como twitter4j (java), tmhoAuth (PHP), twitterizer (.NET).

El tiempo nos dirá si el resto de servicios como TwitPic, Yfrog tienen sentido. De momento, los desarrolladores ya pueden trabajar implementando la subida de imágenes desde los clientes y el resto de aplicaciones de Twitter. Veremos si los ingenieros de Twitter hacen lo mismo con los clientes oficiales (Android/iPhone) sin cerrar la posibilidad de elección al resto de servicios de fotos. Para el usuario quizás le de igual con que servicio subir las imágenes mientras aparezcan en sus tweets, pero centralizar las fotos bajo un mismo hospedaje sea lo preferido por muchos.

Vía | Twitter Dev Blog
Más información | Documentación Twitter
En Genbeta | Lanzada la API para subir fotografías a Twitter

Silicon Valley, la Meca de las empresas tecnológicas, el sueño (la mayoría de las veces inalcanzable, no nos engañemos) de todo desarrollador que se precie. Pues bien, la infografía que os mostramos hoy en Genbeta Dev viene cargadita de datos interesantes sobre lo que se cuece en este valle cercano a San Francisco.

Para empezar destacamos el trozo que traemos en portada, los sueldos que las grandes estrellas de la ingeniería del software en las grandes empresas: desde los 180.000 dolares de Google hasta los modestos 125.000 que paga Twitter... ¡quien fuera un cerebrito! Pero hay otros muchos datos a tener en cuenta:

• Los 48.000 empleos que hay en Silicon Valley, donde el paro ha descendido en este 2011 con respecto al año pasado. Crisis, what crisis?
• La diferencia de salario medio entre el Valle y las tecnológicas del resto de Estados Unidos es bastante importante, destacando los ¡36.000 dolares! de diferencia en el caso de los desarrolladores web y Java. Una salvajada.
• Por contra, el coste de la vida puede ser hasta un 61% mayor que la media en los Estados Unidos… cosa que es pecata minuta comparado con el 191% más cara que está la vivienda

Realmente datos muy interesantes que puedes visualizar completos a continuación (y a tamaño completo en la fuente original):

Vía | @alexpuig y Baquia
Fuente e imágenes | Focus.com