Rincevent Posté 18 novembre 2020 Signaler Posté 18 novembre 2020 il y a une heure, Mathieu_D a dit : @Prouic tu as vraiment besoin de comprendre un plan d'exécution pour faire ce que tu veux faire ? J'ai pas l'impression. D'où le conseil de réfléchir en termes d'ensembles et de normalisation ; les histoires de dénormalisation et de méthodes d'accès et de jointure, c'est après, une fois que le SQL (DDL, DML et DQL) est écrit comme il faut.
Prouic Posté 21 janvier 2021 Signaler Posté 21 janvier 2021 Bon , back to business. Product owner (gngn) pour industrialiser des outils data avec pyspark sur le jouet palantir. C'est toujours mieux que 6 mois de dashboards
Rincevent Posté 15 février 2021 Signaler Posté 15 février 2021 Je viens de me rappeler pourquoi je détestais tant SSIS. Je veux dupliquer un package (parce que c'est chiant de tout refaire presque à l'identique), je change le nom et les paramètres, tout se passe bien. Et je cherche à rediriger le data flow depuis une nouvelle source (une table dans SQL Server) vers une nouvelle destination (un CSV, dans le même répertoire que le précédent). Et là, je passe une demi-heure à me battre parce que même avec une requête explicite (où je liste les colonnes une à une), je n'arrive pas à obtenir le bon columnset, j'ai toujours des metadata parasites provenant sans doute de l'ancienne table. La solution était : entre l'ancienne et la nouvelle table, il est bon de pointer vers une tierce table qui n'a aucun nom de colonne en commun avec l'ancienne ni avec la nouvelle. Pourquoi ? Pour faire chier, probablement. Je hais SSIS avec une telle force, même pour des packages simples c'est une merde gluante.
Rincevent Posté 23 février 2021 Signaler Posté 23 février 2021 Oh putain, et maintenant une dispute entre un collègue qui veut exposer le plus de paramètres possibles à l'extérieur, et moi qui veut en exposer le moins possible, avec ce pénible qui modifie la moitié de mon projet SSIS dans mon dos.
Mathieu_D Posté 23 février 2021 Auteur Signaler Posté 23 février 2021 On 10/1/2020 at 1:47 PM, cedric.org said: C'est pas de la data mais un de mes devops, junior, 1 an d'xp tout juste, est en train de péter un câble en demandant une augmentation à 53k, en start-up qui grossit vite et avec des problématiques intéressantes et long terme. Je sais pas quoi en penser. Ça me paraît délirant mais en même temps le marché est délirant. Et il est bon. Au fait est-ce qu'il a eu ce qu'il voulait ce jeune ?
cedric.org Posté 23 février 2021 Signaler Posté 23 février 2021 1 hour ago, Mathieu_D said: Au fait est-ce qu'il a eu ce qu'il voulait ce jeune ? Oui ! À 24 ans il est entre 50 et 55k. Il est super bon, je veux le garder. Il est en totale autonomie sur la moitié du périmètre de l'équipe et il me remplace sur plein de choses, c'est plutôt cool. Et comme je coûte autrement plus cher à la boîte, ce qui est bon pour moi est bon pour la boîte 1
Neomatix Posté 23 février 2021 Signaler Posté 23 février 2021 il y a 5 minutes, cedric.org a dit : il me remplace sur plein de choses, [...] je coûte autrement plus cher à la boîte Mmmhhh 1 2
cedric.org Posté 23 février 2021 Signaler Posté 23 février 2021 6 minutes ago, Neomatix said: Mmmhhh Caramba. Vite, le covid. Je vais faire un tour au bureau, je reviens.
Prouic Posté 23 février 2021 Signaler Posté 23 février 2021 Le 21/01/2021 à 11:32, Mathieu_D a dit : Tu as passé la certif' pspo ? Sorry j'avais pas vu ton message. Non, pas besoin évidemment dans ma boite de schtarbés. J'ai quand même demandé à la passer fin Mars, le scrum est moins con que les autres, comme si des gens avaient compris leur métier en fait.
cedric.org Posté 23 février 2021 Signaler Posté 23 février 2021 2 hours ago, Prouic said: scrum [...] moins con que les autres [X] Doubts
Prouic Posté 23 février 2021 Signaler Posté 23 février 2021 mouahahaha. Ca depend de ton referentiel. Le scrum a l'air moins con que les autres gens du train concernant le suivi de SAFe (heureusement bordel) mais je pense pas que ca gravite dans des sphères inatteignables, effectivement.
cedric.org Posté 23 février 2021 Signaler Posté 23 février 2021 (J'avoue tout, c'était un taunt purement gratuit)
Mathieu_D Posté 23 février 2021 Auteur Signaler Posté 23 février 2021 4 hours ago, cedric.org said: Oui ! À 24 ans il est entre 50 et 55k. Quand je dis aux jeunes que maintenant c'est plusse hype de foncer vers la data engineerie plutôt que la data science ils ne me croient pas... Faudrait que je switche de lead data scientist vers lead data engineer, il me manque juste les compétences... 1
cedric.org Posté 23 février 2021 Signaler Posté 23 février 2021 Just now, Mathieu_D said: Quand je dis aux jeunes que maintenant c'est plusse hype de foncer vers la data engineerie plutôt que la data science ils ne me croient pas... Faudrait que je switche de lead data scientist vers lead data engineer, il me manque juste les compétences... Dans mon cas c'est un devops, c'est encore pire côté hype. No data eng on les paye un peu moins.
Lameador Posté 23 février 2021 Signaler Posté 23 février 2021 DevOps, Data Science, Data Engineering. Les nouvelles compétences. Vous comptez les spécialistes cloud/AWS dans les DevOps ?
Mathieu_D Posté 23 février 2021 Auteur Signaler Posté 23 février 2021 9 minutes ago, cedric.org said: Dans mon cas c'est un devops, c'est encore pire côté hype. No data eng on les paye un peu moins. Tu as les rôles de data ops et machine learning engineer qui sont un peu au sommet de la hype de mon point de vue, et que je range abusivement dans la corbeille data eng'. D'un autre côté les développeurs etl d'outils dédiés ( Talend et informatica par exemple) qui sont rebrandés "Data Engineer" et qui eux ne sont pas du tout du bon côté de la hype. 10 minutes ago, Lameador said: Vous comptez les spécialistes cloud/AWS dans les DevOps ? Mmmh je dirais un architecte cloud c'est encore une catégorie à part.
cedric.org Posté 23 février 2021 Signaler Posté 23 février 2021 45 minutes ago, Lameador said: Vous comptez les spécialistes cloud/AWS dans les DevOps ? 35 minutes ago, Mathieu_D said: Mmmh je dirais un architecte cloud c'est encore une catégorie à part. Hm je dirais que la définition change en fonction de la boite. On parle d'un mec 1/ capable de créer, comprendre et automatiser une plateforme compliquée 2/ d'accompagner et former les software engineers, data engineers, etc pour l'utilisation en autonomie de la plateforme 3/ avoir des notions d'archi logicielle plus ou moins poussée en fonction du poste Appelle ça devops, cloud engineer, Site Reliability Engineer (Google), Production Engineer (Facebook), whatever, le fond du travail reste le même, même si la forme change. t'façon dans les faits tu fais du bash pour générer du yaml en CI. Edit : c'est pour ça que j'ai pompeusement appelé mon équipe "Platform Team", parce que c'est pas juste "les mecs de l'infra".
Mathieu_D Posté 31 mars 2021 Auteur Signaler Posté 31 mars 2021 C'est bête mais c'est drôle, can relate.
Mathieu_D Posté 2 décembre 2021 Auteur Signaler Posté 2 décembre 2021 Hé dites Amazon se lance dans le portage salarial et ne prend que 3% de commission : https://aws.amazon.com/fr/iq/ Vite vite passer des certif' AWS ! 1
Mathieu_D Posté 28 février 2022 Auteur Signaler Posté 28 février 2022 Mmh je vais devoir modéliser une répartition de demande, je me demande comment je vais m'y prendre. C'est à dire si je bouge les caractéristiques de cette case je peux m'attendre à avoir 3 % de demande en plus ici qui viendra de ces autres cases où la demande diminuera d'autant.
Rincevent Posté 12 décembre 2022 Signaler Posté 12 décembre 2022 Bon, ce n'est pas de gaieté de cœur que je fais appel au public, mais est-ce que quelqu'un ici a déjà réussi un jour à faire marcher un serveur lié (donc depuis SQL Server) pointant vers Oracle, ne serait-ce que pour de la simple lecture ??? Points bonus si il s'agit de SQL Server 2019 d'un côté et d'Oracle 11 de l'autre.
Mathieu_D Posté 29 mars 2024 Auteur Signaler Posté 29 mars 2024 Il y a du monde encore ici ? Je vous invite à lire ma prose : https://medium.com/adeo-tech/you-build-it-you-run-it-a-practical-example-from-a-data-science-team-2f4853854684
cedric.org Posté 29 mars 2024 Signaler Posté 29 mars 2024 4 hours ago, Mathieu_D said: Il y a du monde encore ici ? Je vous invite à lire ma prose : https://medium.com/adeo-tech/you-build-it-you-run-it-a-practical-example-from-a-data-science-team-2f4853854684 Mais c'est fort complet tout ça ! Tu fais ça toi-même ? (j'ai construit une stack similaire mais à base de argo workflow en lieu et place de vertex)
Mathieu_D Posté 29 mars 2024 Auteur Signaler Posté 29 mars 2024 5 hours ago, cedric.org said: Mais c'est fort complet tout ça ! Tu fais ça toi-même ? (j'ai construit une stack similaire mais à base de argo workflow en lieu et place de vertex) Non c'est une équipe hein. Mais oui je peux incrémenter moi même sur chaque aspect. (J'vais pas souvent moi même dans la CI.) Faudrait que je me trouve un petit side project pour repartir de 0 et vraiment tout faire moi même.
Mathieu_D Posté 29 mars 2024 Auteur Signaler Posté 29 mars 2024 Je relisais le fil d'ailleurs et le marché c'est bien retourné depuis. @Solomos trouverait plus facilement un jeune saser et le data eng' junior de @cedric.orgdemanderait de moins grosses augmentations. 1
Solomos Posté 3 avril 2024 Signaler Posté 3 avril 2024 On 3/29/2024 at 11:55 PM, Mathieu_D said: Je relisais le fil d'ailleurs et le marché c'est bien retourné depuis. @Solomos trouverait plus facilement un jeune saser et le data eng' junior de @cedric.orgdemanderait de moins grosses augmentations. Effectivement, j'ai été pas mal sollicité par les chercheurs de stage de M2 cette année à la période habituelle, et ils n'étaient pas en mode "on fait les difficiles"
Messages recommandés