Aller au contenu

Je raconte my life dans la data


Messages recommandés

il y a une heure, Mathieu_D a dit :

@Prouic tu as vraiment besoin de comprendre un plan d'exécution pour faire ce que tu veux faire ?

J'ai pas l'impression. D'où le conseil de réfléchir en termes d'ensembles et de normalisation ; les histoires de dénormalisation et de méthodes d'accès et de jointure, c'est après, une fois que le SQL (DDL, DML et DQL) est écrit comme il faut. ;)

Lien vers le commentaire
  • 2 months later...
  • 3 weeks later...

Je viens de me rappeler pourquoi je détestais tant SSIS. Je veux dupliquer un package (parce que c'est chiant de tout refaire presque à l'identique), je change le nom et les paramètres, tout se passe bien. Et je cherche à rediriger le data flow depuis une nouvelle source (une table dans SQL Server) vers une nouvelle destination (un CSV, dans le même répertoire que le précédent). Et là, je passe une demi-heure à me battre parce que même avec une requête explicite (où je liste les colonnes une à une), je n'arrive pas à obtenir le bon columnset, j'ai toujours des metadata parasites provenant sans doute de l'ancienne table. La solution était : entre l'ancienne et la nouvelle table, il est bon de pointer vers une tierce table qui n'a aucun nom de colonne en commun avec l'ancienne ni avec la nouvelle. Pourquoi ? Pour faire chier, probablement. Je hais SSIS avec une telle force, même pour des packages simples c'est une merde gluante.

Lien vers le commentaire

Oh putain, et maintenant une dispute entre un collègue qui veut exposer le plus de paramètres possibles à l'extérieur, et moi qui veut en exposer le moins possible, avec ce pénible qui modifie la moitié de mon projet SSIS dans mon dos.

Lien vers le commentaire
On 10/1/2020 at 1:47 PM, cedric.org said:

C'est pas de la data mais un de mes devops, junior, 1 an d'xp tout juste, est en train de péter un câble en demandant une augmentation à 53k, en start-up qui grossit vite et avec des problématiques intéressantes et long terme. Je sais pas quoi en penser. Ça me paraît délirant mais en même temps le marché est délirant. Et il est bon.

Au fait est-ce qu'il a eu ce qu'il voulait ce jeune ?

Lien vers le commentaire
1 hour ago, Mathieu_D said:

Au fait est-ce qu'il a eu ce qu'il voulait ce jeune ?

Oui ! À 24 ans il est entre 50 et 55k. Il est super bon, je veux le garder. Il est en totale autonomie sur la moitié du périmètre de l'équipe et il me remplace sur plein de choses, c'est plutôt cool. Et comme je coûte autrement plus cher à la boîte, ce qui est bon pour moi est bon pour la boîte :D

  • Yea 1
Lien vers le commentaire
Le 21/01/2021 à 11:32, Mathieu_D a dit :

Tu as passé la certif' pspo ?

Sorry j'avais pas vu ton message.

 

Non, pas besoin évidemment dans ma boite de schtarbés. J'ai quand même demandé à la passer fin Mars, le scrum est moins con que les autres, comme si des gens avaient compris leur métier en fait.

Lien vers le commentaire

mouahahaha. Ca depend de ton referentiel. Le scrum a l'air moins con que les autres gens du train concernant le suivi de SAFe (heureusement bordel) mais je pense pas que ca gravite dans des sphères inatteignables, effectivement.

Lien vers le commentaire
4 hours ago, cedric.org said:

Oui ! À 24 ans il est entre 50 et 55k.

Quand je dis aux jeunes que maintenant c'est plusse hype de foncer vers la data engineerie plutôt que la data science ils ne me croient pas...

Faudrait que je switche de lead data scientist vers lead data engineer, il me manque juste les compétences...

  • Yea 1
Lien vers le commentaire
Just now, Mathieu_D said:

Quand je dis aux jeunes que maintenant c'est plusse hype de foncer vers la data engineerie plutôt que la data science ils ne me croient pas...

Faudrait que je switche de lead data scientist vers lead data engineer, il me manque juste les compétences...

Dans mon cas c'est un devops, c'est encore pire côté hype. :D

No data eng on les paye un peu moins.

Lien vers le commentaire
9 minutes ago, cedric.org said:

Dans mon cas c'est un devops, c'est encore pire côté hype. :D

No data eng on les paye un peu moins.

Tu as les rôles de data ops et machine learning engineer qui sont un peu au sommet de la hype de mon point de vue, et que je range abusivement dans la corbeille data eng'.

 

D'un autre côté les développeurs etl d'outils dédiés ( Talend et informatica par exemple) qui sont rebrandés "Data Engineer" et qui eux ne sont pas du tout du bon côté de la hype.

10 minutes ago, Lameador said:

Vous comptez les spécialistes cloud/AWS  dans les DevOps ?

Mmmh je dirais un architecte cloud c'est encore une catégorie à part.

Lien vers le commentaire
45 minutes ago, Lameador said:

 

 

Vous comptez les spécialistes cloud/AWS  dans les DevOps ?

 

35 minutes ago, Mathieu_D said:

Mmmh je dirais un architecte cloud c'est encore une catégorie à part.

 

Hm je dirais que la définition change en fonction de la boite.

 

On parle d'un mec

1/ capable de créer, comprendre et automatiser une plateforme compliquée

2/ d'accompagner et former les software engineers, data engineers, etc pour l'utilisation en autonomie de la plateforme

3/ avoir des notions d'archi logicielle plus ou moins poussée en fonction du poste

 

Appelle ça devops, cloud engineer, Site Reliability Engineer (Google), Production Engineer (Facebook), whatever, le fond du travail reste le même, même si la forme change. t'façon dans les faits tu fais du bash pour générer du yaml en CI.

 

Edit : c'est pour ça que j'ai pompeusement appelé mon équipe "Platform Team", parce que c'est pas juste "les mecs de l'infra".

Lien vers le commentaire
  • 1 month later...
  • 8 months later...
  • 2 months later...

Mmh je vais devoir modéliser une répartition de demande, je me demande comment je vais m'y prendre.

C'est à dire si je bouge les caractéristiques de cette case je peux m'attendre à avoir 3 % de demande en plus ici qui viendra de ces autres cases où la demande diminuera d'autant.

Lien vers le commentaire
  • 9 months later...

Bon, ce n'est pas de gaieté de cœur que je fais appel au public, mais est-ce que quelqu'un ici a déjà réussi un jour à faire marcher un serveur lié (donc depuis SQL Server) pointant vers Oracle, ne serait-ce que pour de la simple lecture ???

 

Points bonus si il s'agit de SQL Server 2019 d'un côté et d'Oracle 11 de l'autre.

Lien vers le commentaire
×
×
  • Créer...