HPC et Big Data en Europe - les nouvelles ambitions et initiatives en 2016 - ORAP
←
→
Transcription du contenu de la page
Si votre navigateur ne rend pas la page correctement, lisez s'il vous plaît le contenu de la page ci-dessous
38ème Forum ORAP
18 octobre 2015
HPC et Big Data en Europe – les nouvelles
ambitions et initiatives en 2016
Jean-Philippe Nominé
CEA – Direction des Analyses Stratégiques
ETP4HPC
Conseil Scientifique de l’ORAP
jean-philippe.nomine@cea.fr
jean-philippe@office.etp4hpc.eu
Christophe Calvin
CEA – Direction de la Recherche FondamentaleEn 2012, la Commission européenne affichait des ambitions claires en HPC (communication de février 2012), et la dynamique créée a permis de mettre en place dans Horizon 2020 un programme complet alliant technologies, infrastructures et usages du HPC. Nous ferons un rapide bilan de l’avancée de ce programme en 2016, et un ‘instantané’ de l’écosystème, à travers ses acteurs et les projets soutenus par H2020 (ETP4HPC, cPPP sur le HPC puis sur les Big Data, FETHPC et Centres d’Excellence, EXDCI…). En avril/mai 2016, la Commission européenne définissait des ambitions renouvelées et élargies en HPC, Big Data, cloud, quantum computing…. dans le contexte général du Digital Single Market. Nous commenterons notamment les annonces sur le « European Cloud Initiative » et l’IPCEI HPC-BDA, et leurs liens avec les programmes H2020 en cours.
• H2020 & HPC depuis 2012 Les projets en cours • Communications de la Commission européenne en avril 2016
Forum 36 - Novembre 2015
Forum 38 – Octobre 2016
• PRACE
• ETP4HPC, cPPP
• FETHPC: RIA & CSA
• CoEs, EXDCI
• EINFRA
• BDVA
• ECI, EOSC, EDI
• DEI (DSM)
• (HPC-BDA) IPCEIForum 36 - Novembre 2015
Forum 38 – Octobre 2016
• Partnership for Advanced Computing in Europe
• European Technology Platform for High Performance Computing,
contractual Public Private Partnership
• Future&Emerging Technologies-HPC: Research and Innovation
Actions, Coordination and Support Actions
• Centres of Excellence (for Computing Applications), European
eXtreme Computing and Data Initiative
• E-infrastructures
• Big Data Value Association
• European Cloud Initiative, European Open Science Cloud, European
Data Infrastructure
• Digitising European Industry (Digital Single Market)
• Important Project of Common European Interest (on HPC and Big
Data Applications)EC landscape until Spring 2016
High-Performance Computing
Europe's place in a Global Race
Neely Kroes, Commissionner for Information Society
and Vice-President of the European Commission
Communication of Feb. 2012
EU needs independent access to HPC technologies, systems and services
Infrastructure: PRACE (since 2010)
Technologies and Applications
a Private Public Parnership (cPPP = “structured dialogue”) between the EC and
ETP4HPC + now Centres of Excellence – 700M€ - 2014-2020
6 Big
SC15 Data
- Nov 21st, PPP
2015 (BDVA) – 500 M€ http://www.bdva.eu/ETP4HPC + other stakeholders
}
PRACE, CoEs, BDVA, EESI, EXDCI…
cPPP => H2020 Calls
FETHPC, CoEs
•
•
•
WP2014-2015 First call
19 FETHPC + 9 CoE projects running
WP2016-2017 call issued
WP2018-2020 under discussionH2020 funding rounds (WP)
• Work Programme 2014-2015 First calls
19 FETHPC + 9 CoE projects + 2 coordination actions
94 + 42 + 4 M€ resp.
• WP 2016-2017 call issued
FETHPC follow-up + coordination actions
40 + 40 + 4 M€
• WP 2018-2020 under discussion
Remaining of funding….
8 8Work Programme 2014-2015
9EXDCI Year 1 (revue de projet: 11 octobre 2016) L’action de coordination PRACE-ETP4HPC Impliquant les acteurs des 3 piliers En cours: recommandations globales
Work Programme 2016-2017
CLOS
11 11Work Programme 2018-2020 being prepared
Includes EsD proposition,
in addition to the continued
funding of HPC areas from the SRA
Extreme Scale Demonstrators would combine R&I
results into pre-production systems
EC-funded projects with consortia of HPC sites +
technology providers + application owners
Actively discussed with PRACE, CoEs,
the EC, BDVA
in the framework of the cPPP and with the
support of EXDCI
Centres of Excellence? Reflection on-going
- One CoE per area
- Add a couple of extra topics …
- Could be 70 M€ for 3 years (until next Framewrok Programme)Conclusion partielle
• Bonne dynamique HPC H2020 et construction ‘communautaire’
• Interactions accrues industrie-recherche
• Interaction accrues ETP4HPC/BDVA
• Financement infrastructures par l’EC?
• Machines: une première étape = PPI Public Procurement for Innovative
solutions – appel à projet clos en Septembre, 26 M€ pour co-financement
à 35%2015: different speeches Viola, Moedas, Oettinger Juncker…
"Our goal is for Europe to become
one of the top 3 world leaders in high-
performance computing by 2020."
Jean-Claude Juncker, 27 October 2015
April 2016: NEW EC communication(s)
Commissioner for
Digital Economy and Society
European Cloud Initiative
European Open Science Cloud
European Data Infrastructure
| PAGE 14PACKAGE…. COMMUNICATIONS FROM THE COMMISSION TO THE EUROPEAN PARLIAMENT, THE COUNCIL, THE EUROPEAN ECONOMIC AND SOCIAL COMMITTEE AND THE COMMITTEE OF THE REGIONS Brussels, 19.4.2016 • COM(2016) 178 final European Cloud Initiative - Building a competitive data and knowledge economy in Europe • SWD(2016) 106 final COMMISSION STAFF WORKING DOCUMENT Implementation of the Action Plan for the European High-Performance Computing strategy Accompanying the document European Cloud Initiative - Building a competitive data and knowledge economy in Europe • SWD(2016) 107 final COMMISSION STAFF WORKING DOCUMENT on QUANTUM TECHNOLOGIES Accompanying the European Cloud Initiative Building a competitive data and knowledge economy in Europe • COM(2016) 180 final Digitising European Industry Reaping the full benefits of a Digital Single Market • SWD(2016) 110 final COMMISSION STAFF WORKING DOCUMENT Advancing the Internet of Things in Europe Accompanying the document Digitising European Industry Reaping the full benefits of a Digital Single Market • COM(2016) 179 final EU eGovernment Action Plan 2016-2020 Accelerating the digital transformation of government • SWD(2016) 108 final COMMISSION STAFF WORKING DOCUMENT Implementation and Evaluation report Accompanying the document EU eGovernment Action Plan 2016 - 2020 Accelerating the digital transformation of government • SWD(2016) 109 final EXECUTIVE SUMMARY OF THE IMPLEMENTATION AND EVALUATION REPORT Accompanying the document EU eGovernment Action Plan 2016 - 2020 Accelerating the digital transformation of government
https://ec.europa.eu/digital-single-market/en/%20european-cloud-initiative
European Cloud Initiative
European Cloud Initiative
IPCEI
Widening use
eGovernment
fragmentation Adapting HPC & Big –Data to a cloud
and lack of environment
coordination Large scale test-beds
HPC + data centers + network
Procurement driving technology
2 pre-exascale systems in 2020
2 exascale systems in 2022
(within world top3)
Market JRC big data european center
asymmetry HPC technology Upgrade GEANT network
Open data by default Quantum Technologies Flagship
Interoperability
Governing structure
Cloud services for open science
| PAGE 19The Top Down view of the European Union
Boost European Economy by improving competitivness, growth and jobs
Targetting a fair share of the market
Crédit
J Gonnord
A single digital market
JP Bourgoin
A secured cloud equally accessible to all Europeans
Industry Research E-Government
Competence Competence
Centres Centre
European Cloud
A secured network of Computing and Data Centers
Procurement Co-Design R&D specs
European HPC & BDA TechnologiesIPCEI: HPC and big data enabled applications
Complément à H2020 et option pour dépasser
certaines limitations:
- Taille des projets
- Mixité des financements
- Réglementation sur la concurrence
- Ouvert aux états membres partageant les
objectifs
IPCEI
Industrial answer to
HPC technology the EC vison and strategy
with a strong focus on
| PAGE 21
technologyRetour sur l’EOSC - constat et propositions
C. Calvin
HLG on European Open Science Cloud
Constat : 50% des données de recherche sont considérées comme non
« extractables », et la grande majorité de ces données (80%+) n’est pas
préservée dans des « dépôts numériques » sûrs.
Le défi est donc d’améliorer l’accès aux données en Europe, de rendre plus
facile leur réutilisation pour tous les acteurs de la sphère privée et publique.
Propositions:
Soutenir l’émergence de l’expertise en matière de
gestion de données en Europe.
Un European open science cloud « agile » et
« léger ».
Utiliser les capacités déjà existantes : la majeure
partie des éléments qui constitueraient l’EOSC
existent déjà, mais ils sont trop fragmentés
Opter pour une approche décentralisée quant à la
gouvernance de l’EOSC, avec des standards
harmonisés minimaux, seulement là où ils sont
nécessaires.3 appels à projets de début de construction EOSC
INFRADEV-04-2016 – “ European Open Science Cloud for Research ” – Closed –
10M€
Création d’un Cloud Européen pour l’Open Science
Un maître mot : l’interopérabilité
Pas de financement pour le développement de nouvelles infra mais
consolidation des infra existantes
E-INFRA12-2017 – “ Data and Distributed Computing e-infrastructures for Open
Science” – March 2017 – 40M€
Secure and agile data and distributed computing e-infrastructures – lié à EOSC
Plateforme virtuellement intégrée de centres nationaux et régionaux HTC et
HPC
Develop prototypes and proofs-of-concept which will enable the agile handling
Develop and test services to help users to access large data sets and
of scientific data from future large scale facili0es and will allow data centres
heterogeneous compu0ng facili0es in a coherent and efficient way (also
with massive storage capabilities to par0cipate in a common data backbone
inspired by the indigoDataCloud project current achievements)
into a virtualized data infrastructure able to manage extremely large data sets.
E-INFRA21-2017 – “Platform-driven e-infrastructure innovation ” – March 2017 – 20M€
Développement de middleware pour étendre les capacités du cloud européenEOSC
EOSC Pilot – projet retenu dans le cadre du call INFRADEV-04-2016
“European Open Science Cloud for Research”
10 M€ - 2 ans - 33 partenaires – STFC coordinateur projet
WP4
WP5
WP6
WP1
WP2
WP3
INTEROPERABILITE entre infras data existantes
=> Logicielle ET organisationnelle…CALLS EINFRA-12 ET EINFRA-21
• Expand service portfolio: quantity
EINFRA-12 • Expand compute/storage/data service capacity available for existing and new
Proposition coordonnée par EGI et research infrastructures willing to establish long-term collaborations and with identified
medium-term requirements (SLAs and MoUs), eg. HEP, HBP, EMSO, ELIXIR, EPOS,
EUDAT ICOS, etc. and Virtual Research Communities (list selected according to NGI/EIRO
Extension des services de l’EOSC priorities)
• Federate national infrastructures and other relevant services not yet accessible to int.
communities
• Expand capacity of services in beta stage
• Expand service portfolio: quality Operate/Maintain/Support of new services
• New thematic services at TRL 8
• New federation services
• New services for data/software preservation
• New EOSC services (INFRADEV-04)
• Open access to national services of general interest
• Technical integration across different e-Infrastructures e.g. national data
infrastructures and commercial suppliers, EUDAT/GEANT/OpenAIRE, HPC
EINFRA-21 • Develop prototypes and proofs-of-concept which will enable the agile handling of scientific
Démonstrateurs ‘big data’ data from future large scale facilities and will allow data centres with massive storage
capabilities to participate in a common data backbone into a virtualized data infrastructure
Services avancés
able to manage extremely large data sets.
• Develop and test services to help users to access large data sets and heterogeneous
computing facilities in a coherent and efficient way
Espoir de croisement data/HPC (HTC+HPC)Conclusion
Une approche ‘bottom-up’ et de recherche: H2020
Une nouvelle approche ‘top-down’: ECI
Une approche ‘top-down’ et industrielle: IPCEI
…
A rendre “consistantes”…
| PAGE 26Annonce http://www-ccrt.cea.fr/fr/ccrt-day-2016.htm Contact Christine Ménaché Chargée d’affaires CCRT (33) 1 69 26 62 56 christine.menache@cea.fr
Vous pouvez aussi lire
