New points on our path

We are in a fast moving world (especially regarding technologies, they evolve all the time, new paradigm change arrive every 6 months – in short, nothing is stable, we are all together on a boat that is carrying us on a trip that nobody is leading really) but we are also « backed » with rigid views on our world (the new has to establish itself as viable economic path before we accept it, our attitude regarding technology is very much tinted with our need to measure, plan and master everything – in short, we want to be sure that this boat belongs to us and follows our orders).

How those two antagonist streams do affect a project like Walking the Edit and our young Company Memoways ? It’s simple: we have to prove that the new ideas are not only theory, but 1) work and 2) bring money in. All that with very little money to begin with.

 

Our system has proven that it’s working (see Walking the Edit movies or the Smartmap), even with only 20% of the functionalities that we would like to implement.
We have done a lot until now, but it seems that it’s not enough (for many reasons, too long to explicit here). So we have to react to be able to stay on that boat, by bringing our specific, innovative and surprizing ways to « pull » and « push » the memory of this journey…
But to react, we need some more « fuel »: without money it will be very difficult to continue.
So now we have to prove that there can be a viable economic development for this new kind of open and playful interactions with the digital world; as there is no comparable project that has build up a working economic model, we have to project that the value of the individual and singular user experience is the creation of a potential economic value. It is not given, but as many other people try to develop strategies to engage user with a given (story)world, it seems that there is a global movement towards more experience creation on the road to the value creation.

Memoways – as a tool to « play » with our shared audiovisual memory through a personal way of interacting with the digital world – is in short two things: a new conceptual architecture of bridging existing technologies together and the vision of taking this digital world not only as a way to master our real world, but to extend our human needs (food for the body and the soul) to the digital world. And our human needs are not only to be able to go from point A to B as fast as possible or to find the most powerful way to get access to the bank account of a user – we as human being need to be entertained, intellectually and emotionally challenged; in short: to be able to use the available tools (may they be digital or not) to build working and sharable links between our dreams, wishes and desires and our daily reality.

All that being said – what road will we be able to build and what path can we share ?

Read our new roadmap; read here to get the new strategic positioning.
Those are the technical and strategic waypoints – about the more conceptual and artistic branches, we will still continue to work through possible research projects.
There is still so much to research, to try, to play with…

 

WE for iPhone – it is coming !

Picture by Charles Ayats

The road to publish an application on the appstore can be long: for many different reasons our 4 beta applications where not able or ready to be officially distributed.
Now that we changed a lot of things in the application (from a web app to a native application; from a server / client relation to an almost client only solution; from a audio stream to an internal audio playing solution) and we built up a complete new server solution (powered by Memoways), the WE app for iPhone is in the approval process at Apple.

La suite…

Une rentrée qui va marcher

L’été a été « danse du crabe »: un pas de côté, deux en arrière, un petit bond en avant, puis un tour et on recommence… Quand on regarde les traces, on en voit dans tous les sens, mais au mode du presque-sur-place; le crabe, lui, est revenu toujours au même endroit.
Pour des raisons différentes des siennes, notre parcours estival a été d’une forme semblable à cette image ci dessous: ah c’est les vacances (donc repousser à la rentrée toute nouvelle prise de contact sérieuse); oh le dossier envoyé n’a visiblement pas été compris (retour case départ, les poches vides); iihh la personne qui doit faire l’application iPhone n’arrive pas à finaliser quoi que ce soit (on tourne en rond); aaargh il faut de l’argent pour avancer mais pour avoir de l’argent il faut avancer… (du coup, c’est une spirale ou un labyrinthe ?)
Ok oui, alors revenons un petit moment à la maison et (re)posons nous: la forte marée qui nous emportera plus loin n’est pas encore visible à l’horizon.
Attente, attente.


image par Drriss

Mais toute cette agitation n’aura certainement pas été pour rien: même si au jour d’aujourd’hui il n’y a toujours rien de particulier à montrer, bientôt, très bientôt, presque imminament sous peu, il va y avoir du concret à présenter et alors le tableau sera tout différent:


image par Iris

L’exagération et la fête sont nécessaires: il est déjà sûr et certain que l’on va sabrer le champagne lorsque notre application WE pour iPhone sera validée par Apple; nous allons danser avec nos crabes sur la table lorsque notre application web Memoways sera en mode beta stable et beta-testable; et nous allons tout simplement nous coller au plafond lorsque les nouvelles entrées d’argent vont arriver…

Bon ce billet blabla private joke n’apporte pas grand chose, désolé: rien de consistant ni de sérieux à mettre sur la table pour le moment, circulez.
Oui, circulez: c’est en marchant que l’on va bientôt pouvoir générer des films, du mouvement il en faut !
Donc, dès la rentrée, « ça » va marcher – remettez vos chaussures, qu’on se le dise…

Les nouvelles de l’été 2011

Ce blog a été quelque peu silencieux depuis un moment – ce n’est pas tant à cause des vacances ou de l’été genevois (qui n’en est pas un), mais plutôt par la densité des chantiers en cours. Je vais lister ci après ce sur quoi nous travaillons et pour quoi, après une brève parenthèse.
Un peu comme tout bon scénario de Blockbuster, il faut des problèmes, du fil à retordre sur la route de l’histoire: des embûches plus abracadabrantes les unes que les autres viennent perturber le cours des choses pour que ce soit intéressant (suspens…). En prenant un peu de recul et en allumant le projecteur sur les évènements qui ponctuent notre route, je me sens parfois comme dans un de ces films: le chemin qui semblait bien clair se dérobe sous les pieds (une prévisualisation qui n’est pas en phase avec la réalité du terrain), un arbre tombe et retarde l’avancée (zut, un genou est resté coincé dessous), des réponses promises, pouvant débloquer une dynamique en mode pause, ne viennent pas…

La suite…

Retours d’ascenseur

Workshops Friday

© by Ivo Näpflin

Les quelques jours d’une présentation « à domicile » dans le cadre de la conférence Lift ont été très denses:
– nous avons pu assurer une présence durant les 3 jours grâce à la disponibilité de David et de Alexa; il a été en tout temps possible à des curieux d’emprunter notre iPhone avec l’application WE et de faire un tour dans le quartier;
– sur les personnes qui sont passées demander des informations sur le projet, environ la moitié a été « marcher » un film;
– il y a eu quelques discussions et réactions très intéressantes, avec à chaque fois une marque d’intérêt prononcée sur le potentiel du dispositif – peut-être que l’une ou l’autre de ces discussion pourra aboutir sur une adaptation ou application concrète…
– le workshop était presque plein – les deux heures à disposition ont juste suffi à présenter le projet et réfléchir ensemble sur les questions que soulève le projet. Le principal se fera sans doute par la suite, grâce aux contacts qui ont pu être fait à cette occasion.

Il y avait une ambiance très intense au CICG, et les quelques conférences que j’ai pu suivre (Etienne Mineur, Kevin Slavin ou Hasan Elahi) étaient d’un très haut niveau, très bien « produites » et posant des questions intéressantes (dont certaines sont bien en résonance avec notre projet WE).

Quelques constatations généralisantes par rapport à la réception du projet WE dans un tel cadre:
– les personnes qui arrivent à entrer le plus rapidement dans le projet et qui projettent aussi leurs propres adaptations ou applications sont majoritairement des personnes qui ont un profil ou cursus professionnel polyvalent: ils arrivent à lier la dimension émotionnelle avec la technique tout en voyant l’intérêt dans le processus de mémoire jouée à de multiples niveau sur un territoire donné. La curiosité n’est pas tout – il y a aussi le fait de considérer que dans toute expérience qui peut « prendre racine » il devrait y avoir un équilibrage et surtout complémentarité entre les divers muscles et organes sensitif dont nous sommes constitués;
– les personnes spécialisées ne voient souvent qu’un seul aspect et essayent de faire entrer le dispositif dans un « moule » déterminé et connu – et là évidemment le projet sonne absurde. C’est finalement assez répandu et se passe autant dans les domaines scientifiques, qu’artistiques ou économiques (ce n’est pas réservé à un type de métier ou d’activité). La grande question est de savoir comment ouvrir une porte pour susciter des réactions qui peuvent donner envie à « marcher »…
– il y a souvent eu les questions « à quoi ça sert? » et « qu’est-ce que ça peut rapporter » ? C’est un peu comme poser la question « à quoi sert un livre; un film ? », donc une question qui est à priori sans réponse objective possible; concernant la question d’une viabilité économique, c’est encore très difficile de répondre avec des modèles précis et basés sur des chiffres. Sans doute qu’il n’y aura que des réponses spécifiques liées à chaque adaptation particulière – on verra avec le temps. Mais il y a aussi la question d’une rentabilité dans le moyen terme lié surtout à des usages très personnalisables, avec des retours financiers qui ne sont pas forcément directs. Et là, les acteurs économiques poids lourds cherchent eux aussi comment se placer dans ce flux de données et de modèles de plus en plus brassé qui commence à échapper à tout le monde…

WE, un tour à LIFT

 

Cette semaine retour à Genève (après Paris et Biarritz), mais changer de quartier et sans doute d’étage: à la conférence LIFT, le projet WE va prendre une double existence:
– dans le Lift Experience: possibilité d’installer l’app WE pour iPhone, de recevoir en prêt un iPhone pour faire un tour et tester le dispositif, d’emprunter une caméra et de participer à la collecte de contenu, de visionner les films sur un ordinateur en libre accès. Un « stand » d’information et de participation en somme;
– dans le cadre d’un workshop: présentation du projet et des concepts afin de lancer une discussion autour des questions que « soulève » le projet ainsi que sur les possibles applications potentielles.

Nous avons ajouté le quartier autour du CICG à notre adaptation genevoise, en complétant avec des images du type:
– tournages sur la vie de quartier (interviews, ambiances)
– récolte sur ce que l’on trouve sur internet (conférences, films amateurs, organisations internationales etc)
– aujourd’hui nous filmons la mise en place de la conférence (les images devraient être dans notre « nuage » d’ici le début de la conférence mercredi après midi)
– nous allons proposer aux participants de la conférence de contribuer à la création de contenu, là aussi les images vont être intégrées le plus vite possible

Sur le chemin de cette adaptation complémentaire à Genève, le projet a bénéficié de l’aide et collaboration précieuse de:
– Alexa Andrey (collaboratrice de longue date, caméra, indexation et suivi global)
– David Saudan (stagiaire: caméra, indexation, recherche internet)
– Sevket Öztas (aide momentanée via un volontariat à Lift)
– Alejandra Garcia Rojas (aide momentanée via un volontariat à Lift)

Et merci à toutes les personnes de Lift qui nous ont permis de faire cette présentation: Mélanie Ducret, Nicolas Nova, Sylvie Reinhard

Nouvelle application iPhone !

Après près de deux mois de chantier, nous sommes à deux doigts de pouvoir envoyer à Apple la toute nouvelle application WE totalement réécrite en natif. Pour mémoire, la première application pour iPhone était développée comme une « web’app », donc en utilisant beaucoup de ressources réseau et avec des désavantages décrits dans ce post.

Marco Scheurer et son équipe de Sente ont travaillé en lien avec Nicolas Goy pour développer les aspects suivants:
– écrire l’application en mode natif, pour pouvoir maximiser les chances que l’application puisse être validée chez Apple et qu’elle puisse être plus réactive et maîtrisable;
– nous avons décidé de centraliser un maximum de processus dans le téléphone pour éviter d’être trop dépendants du réseau et de permettre une autonomie plus grande à l’utilisateur. Ainsi, le moteur de montage et la base de données sont installées puis synchronisées sur le téléphone, c’est juste le flux audio qui est envoyé depuis le serveur (dans le nuage chez Amazon) au téléphone;
– actuellement, pour des raisons de fiabilité de débit nous avons décidé de limiter la qualité audio à 48kbit/sec – c’est un compromis en attendant que Zencoder nous mette à disposition de l’adaptive streaming pour la mi février;
–  l’application est encore au stade beta, et la première version qui pourra être envoyée à Apple sera encore très basique et limitée autant dans les fonctionnalités que dans l’interface graphique. Nous n’avons pas encore pu implémenter la fameuse interface à bulles – là nous avons juste une playlist qui défile et qui permet d’avoir une idée plus précise des médias joués (durée, nom artistique, thématique);
– afin de donner une idée à l’utilisateur des contraintes techniques existantes (signal GPS et fiabilité du réseau 3G DATA), nous avons ajouté deux petites indications de couleur pour signaler si tout est ok (indicateurs au vert) ou s’il y a un problème avec le GPS ou le canal DATA (indicateurs en rouge);
– tout le système est actuellement prêt à pouvoir automatiser toute la chaîne depuis le déclenchement de l’enregistrement du parcours à la sauvegarde du film (avec un nom personnalisé) visible directement après sur le site internet.

Les limitations qu’il faut connaître:
– il faut désactiver la mise en veille du téléphone (mise en veille = jamais), sinon dès que l’appareil se met en veille ça coupe le son (et tous les processus); nous cherchons encore la manière de continuer les processus (écriture du tracé via le GPS, sélection des médias via le moteur de montage) et l’écoute du flux audio;
– après 3 à 5 minutes, il arrive souvent qu’au milieu de la lecture d’un média le son s’arrête, mais le compteur temporel du média continue: il faut simplement arrêter le film (clic sur stop), puis le sauver et recommencer un autre film;
– en dessous de 5 médias joués, il n’est pas possible de sauver le film (pour éviter d’avoir trop de films avec juste 2 à 3 médias)
– et comme décrit plus haut, la qualité audio est actuellement mauvaise du fait de la forte compression; cela va être amélioré dès la mi février avec la fonction de l’adaptive streaming;
– avant de marcher son premier film il faut créer son utilisateur sur une page spécifique (à venir).

Pour l’utilisation, veiller aux conditions suivantes:
– bien charger son téléphone avant de faire une ballade: l’application est très gourmande de batterie et va la vider très vite (à cause du GPS et des accès réseaux intensifs)
–  désactiver le WIFI (être sûr que l’on reste en 3G lors de la ballade, le fait de switcher du WIFI au 3G peut parfois entraîner des perturbations)
– utiliser le dispositif dehors: l’application marche seulement avec un bon signal GPS (le voyant position doit être vert, cela veut dire qu’il y a une précision d’au moins 100 mètres, ce qui n’est pas le cas si la position est calculée via les antennes de téléphonie) et il faut aussi avoir un bon signal DATA (le voyant vert audio doit aussi être vert, ce qui signifie que le flux audio est transporté via le réseau cellulaire).
– si l’application reste capricieuse (surtout avec les anciens modèles d’iPhone, le 3G par exemple), il faut désinstaller l’application du téléphone et la réinstaller.

Attention aux « pièges » suivants:
– selon l’état du réseau, il se peut que lorsque l’on clique sur Stop ou Sauver (le film) la commande prenne du temps à être prise en compte; il faut donc éviter de recliquer sur le bouton. Si l’on clique sur le bouton démarrer après avoir cliqué sur stop, on redémarre un film et le  film marché est irrémédiablement perdu!
– il faut au minimum 5 « médias » (plans joués) pour pouvoir sauver; il est conseillé de faire des enregistrements entre 2 minutes et 20 minutes. Au delà, risque de bug et sans doute aussi film trop long à regarder après…

Toute personne intéressée de tester l’application peut me contacter par mail dès le 24 janvier 2011.

Un grand merci à Marco et Nicolas pour leur travail de qualité et leur patience !

Adaptation à Genève

Voici les pistes de réflexion (il n’y a rien de définitif, c’est avant tout des bases de travail) pour l’adaptation dans le cadre du festival Image-Mouvement 2010 en décembre, qui se tiendra au BAC.
Tout le travail effectué sera utilisable et exploitable de manière plus large par la suite pour d’autres présentations, en croisant les images réalisées / récupérées avec d’autres bases de données (existantes ou à faire).

SCENARIO D’USAGE

Il s’agit de permettre au public de « marcher » un film dans le pourtour du centre du festival ainsi que de relier les diverses salles en composant un film (cf carte de délimitation ci dessous). Le contenu de chaque film est lié aux thématiques traitées dans le festival (à préciser) et / ou peut se baser sur un développement spécifique (voir pistes de réflexion ci dessous).
Ce qui est visé au niveau esthétique, formel et conceptuel :

–       films qui permettent de « décrocher » du réel, de partir d’éléments existants dans le réel pour offrir des images et un film qui soient une transposition poétique, abstraite, sensorielle du réel (et non une transfiguration directe de ce que nous pourrions voir) ;

–       le flux audio (le mixage du film en temps réel) que nous entendons lors de notre parcours doit être fortement suggestif, immersif. Il est prévu aussi l’utilisation de « mots » musicaux qui puissent rythmer la ballade (en devenant des phrases…) ;

–       les films résultants devraient être assez mystérieux, ambigus, poétiques sans pour autant casser les liens au réel : ce que nous voyons et entendons dans les films composés doit faire sens par rapport au réel ;

–       les scénarios d’usages (la scénographie de l’ensemble du dispositif) devraient donner envie aux visiteurs / marcheurs de produire des traces particulières, singulières : se mettre à courir, à faire des allers-retours, à marcher de manière chaotique… bref, d’user le territoire de manière originale et nouvelle. Il s’agit avant tout d’une expérience du réel amplifié par un dispositif numérique (artificiel).

L’enjeu est de créer une dynamique de départ pour permettre au public de marcher des films encore bien après la tenue de la manifestation (le festival continue donc de manière décentralisée) ; le festival laisse des traces (des parcours, des films).

QUESTIONS / PISTES DE RÉFLEXION

Voici en « vrac » pistes de réflexions :

–       pouvoir utiliser (placer sur le territoire) des images des bases de données du CAC, de la collection A. Iten, d’artistes associés au festival ou qui ont été présentés dans des manifestations BIM / CAC ;

–       pouvoir retravailler des images (archives, nouvelles images) en les rendant plus abstraites, plus spéciales (ralenti, contraste, zoom, recadrage etc). Verfremdungs-effekt…

–       pouvoir placer des images (extraits de vidéos) qui proviennent du programme de la I-M 2010 ;

–       pouvoir produire des images lors du festival et de pouvoir les intégrer durant la tenue du festival (cf. point sur le DIY / workshop) ;

–       demander à des artistes invités dans le cadre du festival s’ils peuvent mettre à disposition des rushes, des archives personnelles pour le dispositif – en somme de devenir des partenaires / collaborateurs sur le projet.

CONCEPT ARTISTIQUE

Afin de délimiter les possibles, il est important d’établir plusieurs cadres, dont :

  • définition des thématiques (ou contenus). Le but est de stimuler la création de séquences audiovisuelles au fort potentiel suggestif et artistique ; le choix des thèmes / pistes narratives sera donc du type « visible – invisible » ; « apparition – disparition » ; « la promesse » ; « en chantier » ; « en attendant le déluge » ; etc. En fonction des sensibilités à l’œuvre, du temps à disposition, de ce que l’espace suggère, une liste réduite et précise de thèmes sera établie en amont des tournages et servira d’ossature pour tout le projet. Chaque réalisateur / réalisatrice fera la traduction du thème en images, en fonction de ce que le territoire et le moment du tournage lui permet de faire. Il est également envisageable de faire des mises en scènes à mi chemin entre le documentaire et la fiction.
  • en fonction de la délimitation du territoire, chercher dans les banques d’images d’autres personnes à Genève s’il est possible de réutiliser / recycler des images déjà existantes pour le compte du projet. Cela permet d’ouvrir plus grande la fenêtre temporelle et d’améliorer la mixité des styles et des regards ; un grand soin sera porté sur la sélection pointue afin de coller aux exigences de qualité et de comptabilité avec les règles conceptuelles fixées en lien avec le fonctionnement du moteur de montage.
  • question ouverte : comment indiquer de manière concrète, physique, la présence du projet et du matériel audio-visuel dans les rues ? mettre des stickers, des tags, des symboles dans l’espace réel afin de renvoyer les passants à l’existence du projet ? (cf les invaders etc)
  • La délimitation de la zone de tournage et de placement des médias à Genève (c’est une zone de travail appelée à changer):

Le CMS – mise en route de la base de données

Après une première phase de tests techniques et ergonomiques, nous sommes maintenant en train de « métadater » les médias (que des vidéos pour le moment) pour mettre à l’épreuve le concept et pouvoir faire les premières simulations.

Voici quelques captures d’écrans de ce CMS (qui reste pour le moment privé, usage interne du groupe de recherche). Un grand merci à Lionel Tardy qui a travaillé depuis février sur la construction de cette solution personnalisée aux besoins du projet !

A télécharger, un PDF qui donne une vision d’ensemble des champs et listes, ainsi que le type d’analyse et de règles qui vont être appliquées par le moteur de montage. Également à télécharger, un PDF qui donne une idée du montage type, en simulant un montage avec les règles.

La page de départ:

Cette page permet d’importer des fichiers créés dans Final Cut: toutes les vidéos sont pour le moment préparées dans FCP, puis exportées sous forme de fichiers QuickTime natifs, puis compressés au format flash (quelques exemples dans ce blog). Puis, il est possible de paramétrer les thèmes, les listes, de gérer la structure et d’ajouter des utilisateurs. La partie la plus importante est « Gestion des médias ».

CMS HOME

La page de gestion des médias:

C’est dans cette partie que nous devons définir:

– le titre artistique du média (sera présent sur la carte du module embarqué);
– le statut du média;
– le type de média;
– il est possible de placer le média d’origine sur la carte google intégrée, puis – et c’est là que commence le montage (spatial, ou spécial, c’est selon) – de placer le média sur la carte en fonction de ses combinaisons souhaitées avec d’autres médias placés dans les environs. C’est principalement ce choix qui va déterminer le premier choix de média intégré au film…

CMS_GESTION MEDIAS

La page des métadonnées subjectives:

Ici c’est encore le chantier expérimental – c’est une partie importante (contenant les règles, les logiques d’analyse etc, ainsi que d’autres informations utiles pour classer / chercher / présenter les médias). Ce n’est qu’en expérimentant avec une certaine masse de médias la plus variée possible que nous pourrons tirer des conclusions et préciser les besoins réels – ce chantier là est en cours, autour de 300 médias sont à disposition.

CMS_METADONNEES

La page pour définir les thématiques et les « tags » libres:

Page importante également: c’est ici qu’on détermine l’appartenance au nuage – c’est le choix du visiteur qui va déterminer dans quel « étage » thématique le média sera choisi; son choix aura forcément une incidence sur le contenu et la forme. Nous sommes en train d’expérimenter la l’indexation multiple d’un média à plusieurs nuages en même temps – mais avec une « intensité » différence (cf les 30/70 dans l’exemple).
Il y a également les tags qui permettent de personnaliser le contenu du média, puis ensuite de pouvoir former un nuage supplémentaire dans le site web (nuage de tags les plus utilisés par exemple).

CMS_THEMATIQUES

Prochainement sera publiée la liste des champs et des variables utilisées, ainsi qu’un schéma expliquant la méthode d’analyse et les règles implémentées.

En parallèle, les collaborateurs de la HEIG-VD sont en train de préparer un simulateur du moteur d’analyse – cette application nous permettra de tester des premières combinaisons basées sur un itinéraire urbain.
Techniquement, il s’agit d’une application JAVA qui lit un fichier .csv venant d’un tracé GPS enregistré sur le module embarqué, puis analyse avec un certain nombre de variables ce tracé pour pouvoir ensuite exporter un fichier décrivant une playlist (le montage sous forme de suite de fichiers avec durée).

UF 12.06.2008