Mémo regex sur Notepad
- Détails
- Affichages : 1766
Les expressions régulières (regex) sur Notepad++ sont très pratiques pour standardiser un fichier de données avant import par exemple, récupérer des données, corriger des chaînes particulières, avec des conditions, etc...
Ici quelques astuces propres à mon usage personnel.
Regex tips on Notepad
- Détails
- Affichages : 230
Fix corrupted unwanted line breaks files
When you have to import files as text, csv, etc ... into an SQL database, non-desired line breaks (often from notes fields, text boxes, <BR> tags, tabs, or other misinterpreted HTML ...) are very painful. It may fail your import, or be a waste of time. Exploring one's file with Notepad is sometimes necessary.
Complete 4-step correction
How to effectively manage these line breaks?
In this standard example, we want to identify and fix lines that do not start with a double quote (caused by line breaks) within a file where healthy lines start with a double quote.
Recover names from anonymous email addresses avoiding errors
- Détails
- Affichages : 235
Many tools can retrieve names from anonymous emails. But to get something clean, avoid errors and keep a custom default value for generic emails, better to do it yourself.
First, description of the problem.
Tag name
Here we concatenate salutation, first and last names from a table called users, in a tag called name. This in order to personalize newsletters, example:
| Salutation | First name | Last name | HTML | View in mailbox and browser |
| Mr | Edward | Osborne Wilson |
<span>Dear [name]</span> |
Dear Mr Edward Osborne Wilson |
OK good. But sometimes we have not all salutation, first and last names. And may we get a strange value even with all 3 fields concatenated:
Lire la suite : Recover names from anonymous email addresses avoiding errors
Introduction pratique au géomarketing, au SQL spatial, aux graphes routiers et à l'isochronie
- Détails
- Affichages : 4857
Introduction pratique au géomarketing : découverte des mots-clés, des notions les plus courantes, des données classiquement utilisées en France et des pratiques récurrentes. Critique des méthodes.
Utilisation des fonctions avancées de QGIS (SQL spatial), introduction aux graphes routiers et à l'isochronie.
Le sommaire de droite et la navigation sous le texte vous permettent de vous déplacer dans ce tutoriel. Les images sont cliquables et contiennent des informations supplémentaires.
Prise en main d'un entrepôt de données sous Talend
- Détails
- Affichages : 20041
Talend est une suite logicielle ETL, dont l'une des briques existe sous licence libre et gratuite : Talend Open Studio for Data Integration (TOS), dédiée à l'intégration et à la manipulation de sources de données hétérogènes.
Téléchargez l'outil depuis la page officielle et installez-le sur votre machine. Il s'agit de dézipper le fichier fourni et de le placer près de vos programmes. Il contient deux exécutables (.exe), selon la binarité de votre machine, dont vous pouvez créer un raccourci.
N'hésitez pas à tester les deux exécutables en 32 ou 64 bits si besoin (incohérences constatées sur certaines machines sous Windows, mais sans problème fonctionnel).
Pour fonctionner, Talend a besoin d'une version récente de Java.
Ce tutoriel d'initiation suppose que soyez déjà familier avec les SGBD MySQL et/ou Postgres, et que vous en disposiez.
Les images de cet article sont cliquables et affichent des informations contextuelles supplémentaires.
Lire la suite : Prise en main d'un entrepôt de données sous Talend
Extraction de données géographiques et qualification
- Détails
- Affichages : 2482
Avant toute manipulation un peu tordue, on ne le répétera jamais assez : les SIG ne sont pas autosuffisants. Cependant, parfois, ils peuvent créer de la donnée seulement à partir d'autres données. De la donnée nouvelle, plus riche que la donnée d'origine ou du moins, valorisée à partir de croisement de données (data mining).
Mise en situation, dans le domaine de... allez, du géomarketing : vous êtes géomaticien, dans une société de géomarketing. Les développeurs ont déjà mis au point un programme accrochant les IRIS environnants à partir d'un point en entrée et selon plusieurs facteurs (géographiques, statistiques, données clients...). Il s'agit donc d'un programme de calcul de zones isochrones1, qui comme tous programmes de zones isochrones, peut être amélioré.
Le programme existe et marche déjà très bien. Il fait l'objet d'une application web facturée 15 000 € l'abonnement annuel (ou mensuel, je ne sais plus...). À ce prix là bien sûr, les indicateurs utilisés pour dessiner les zones ne prennent en compte qu'un nombre restreint de variables. Si le client veut plus de précision, ou une actualisation des données plus régulière, il doit souscrire un abonnement plus cher.
Lire la suite : Extraction de données géographiques et qualification
Page 1 sur 4