From acc9b9a5e84c30d44c3f9830b47b7dad4a0ce323 Mon Sep 17 00:00:00 2001 From: =?UTF-8?q?Jos=C3=A9=20Manuel=20Dom=C3=ADnguez?= Date: Mon, 17 Jun 2024 12:33:22 +0200 Subject: [PATCH 01/11] Update Grafana to version 11 Update Grafana to version 11 and switch from deprecated role `cloudalchemy.grafana` to the official Grafana role from the `grafana.grafana` collection. Update `usegalaxy_eu.grafana_matrix_forwarder`. Instead of disabling firewalld on the Grafana host, open the nginx ports. --- grafana.yml | 106 +++-- group_vars/grafana-gitter-bridge.yml | 4 - group_vars/grafana.yml | 48 ++- requirements.yaml | 27 +- secret_group_vars/all.yml | 591 ++++++++++++++------------- 5 files changed, 431 insertions(+), 345 deletions(-) delete mode 100644 group_vars/grafana-gitter-bridge.yml diff --git a/grafana.yml b/grafana.yml index 3c32d0f29..3b7f53200 100644 --- a/grafana.yml +++ b/grafana.yml @@ -1,54 +1,96 @@ --- - name: Grafana hosts: grafana - become: true - vars: - hostname: stats.galaxyproject.eu vars_files: - - group_vars/grafana-gitter-bridge.yml - secret_group_vars/all.yml - # This shouldn't be necessary? but if certs fail, then do this. This is - # *supposed* to be properly handled by the nginx role, but the permission - # change is likely only applied if a change is detected since it can't figure - # out if the rule is there or not. - # TODO: make the nginx task check if the rule is in place, rather than a change in path. - # pre_tasks: - # - name: Put SELinux in permissive mode, logging actions that would be blocked. - # selinux: - # policy: targeted - # state: permissive pre_tasks: + #- name: Put SELinux in permissive mode, logging actions that would be blocked. + # # Putting SELinux in permissive mode should not be necessary. But if + # # certs fail, then do it. It is supposed to be properly handled by + # # the `galaxyproject.nginx` role, but the permission change is likely + # # only applied if a change is detected since it can't figure out if + # # the rule is there or not. + # # TODO: make the nginx task check if the rule is in place, rather than a change in path. + # become: true + # ansible.posix.selinux: + # policy: targeted + # state: permissive - name: Set default version of Python - alternatives: + become: true + community.general.alternatives: name: python path: /usr/bin/python3 - name: Install Dependencies - package: + become: true + ansible.builtin.package: name: ['python3-virtualenv'] + - name: Ensure git is installed. (hxr.monitor-ssl) become: true - - name: Disable firewalld service - ansible.builtin.service: - name: firewalld - enabled: false - state: stopped + ansible.builtin.package: + name: + - git collections: - devsec.hardening + - grafana.grafana roles: ## Starting configuration of the operating system - role: usegalaxy_eu.handy.os_setup + become: true vars: + hostname: "{{ grafana_domain }}" enable_hostname: true - enable_powertools: true # geerlingguy.repo-epel role doesn't enable PowerTools repository - - geerlingguy.repo-epel # Install EPEL repository - - usegalaxy-eu.autoupdates # keep all of our packages up to date - - influxdata.chrony # Keep our time in sync. + enable_powertools: true # geerlingguy.repo-epel role doesn't enable PowerTools repository + - role: geerlingguy.repo-epel # Install EPEL repository + become: true + - role: usegalaxy-eu.autoupdates # keep all of our packages up to date + become: true + vars: + hostname: "{{ grafana_domain }}" + - influxdata.chrony # Keep our time in sync. + ## Monitoring - - hxr.monitor-ssl - - hxr.monitor-email + - dj-wasabi.telegraf + - role: hxr.monitor-ssl + become: true + - role: hxr.monitor-email + become: true - - galaxyproject.nginx - - cloudalchemy.grafana - - pgs - - hxr.grafana-gitter-bridge + ## Grafana + - role: galaxyproject.nginx + become: true + - grafana + - role: pgs + become: true + - role: hxr.grafana-gitter-bridge + become: true - usegalaxy_eu.grafana_matrix_forwarder - - dj-wasabi.telegraf + + post_tasks: + # The `[unified_alerting]` section of grafana.ini is not populated by the + # `grafana.grafana.grafana` role yet. It will be when PR [1] is merged. In + # the meantime, it is populated with this post-task. + # + # References: + # - [1] https://github.com/grafana/grafana-ansible-collection/pull/215 + - name: Write Grafana unified alerting settings to grafana.ini (grafana.grafana.grafana) + become: true + community.general.ini_file: + path: /etc/grafana/grafana.ini + section: unified_alerting + option: "{{ item.key }}" + value: "{{ item.value }}" + state: present + owner: "root" # copied from `grafana.grafana.grafana` v5.2.0 + group: "grafana" # copied from `grafana.grafana.grafana` v5.2.0 + mode: "0640" # copied from `grafana.grafana.grafana` v5.2.0 + loop: "{{ grafana_unified_alerting | default({}) | dict2items }}" + + - name: Open nginx ports + become: true + ansible.posix.firewalld: + port: "{{ item }}" + permanent: true + state: enabled + with_items: + - 80/tcp + - 443/tcp diff --git a/group_vars/grafana-gitter-bridge.yml b/group_vars/grafana-gitter-bridge.yml deleted file mode 100644 index d54f06db6..000000000 --- a/group_vars/grafana-gitter-bridge.yml +++ /dev/null @@ -1,4 +0,0 @@ ---- -# ggb Deployment -ggb_create_user: true -ggb_create_group: true diff --git a/group_vars/grafana.yml b/group_vars/grafana.yml index 0bdd29e68..9e41a509e 100644 --- a/group_vars/grafana.yml +++ b/group_vars/grafana.yml @@ -35,13 +35,10 @@ nginx_conf_ssl_certificate: /etc/ssl/certs/fullchain.pem nginx_conf_ssl_certificate_key: /etc/ssl/user/privkey-nginx.pem # Grafana -grafana_data_dir: /data/monitoring/grafana_data -grafana_instance: "{{ hostname }}" +grafana_version: 11.0.0 + grafana_address: "127.0.0.1" -grafana_url: "https://stats.galaxyproject.eu" -grafana_server: - domain: "{{ hostname }}" - root_url: "https://%(domain)s/" +grafana_url: "https://{{ grafana_domain }}" grafana_users: default_theme: "light" @@ -72,14 +69,36 @@ grafana_auth: grafana_image_storage: provider: local -grafana_environment: - GF_PANELS_DISABLE_SANITIZE_HTML: 'true' +grafana_panels: + disable_sanitize_html: "true" + +# This setting is not yet used by the role `grafana.grafana.grafana`. It will +# be when PR [1] is merged. +# +# References: +# - [1] https://github.com/grafana/grafana-ansible-collection/pull/215 +grafana_unified_alerting: + enabled: "true" + execute_alerts: "true" + +# Legacy alerting was removed in Grafana 11 [1]. However, the Ansible role +# `grafana.grafana.grafana` still populates the [alerting] section [2] unless +# `grafana_alerting` is empty. The setting can be removed from this file as +# soon as PR [3] is merged. +# +# References: +# - [1] https://grafana.com/blog/2024/04/04/legacy-alerting-removal-what-you-need-to-know-about-upgrading-to-grafana-alerting/ +# - [2] https://github.com/grafana/grafana-ansible-collection/blob/2e7fd0591d8ad1700186174213b8142047525b88/roles/grafana/templates/grafana.ini.j2#L116-L127 +# - [3] https://github.com/grafana/grafana-ansible-collection/pull/215 +grafana_alerting: {} grafana_plugins: - grafana-worldmap-panel - grafana-piechart-panel - natel-discrete-panel +grafana_dashboards_dir: "files/grafana" + grafana_datasources: - name: Galaxy type: influxdb @@ -219,4 +238,15 @@ galaxy_nagios_urls: url: "https://usegalaxy.eu/phinch/index.html" code: 200 -matrix_forwarder_resolve_mode: reaction + +# Grafana Gitter Bridge +ggb_create_user: true +ggb_create_group: true + +# Grafana Matrix Forwarder +grafana_matrix_forwarder_version: "0.6.0" +grafana_matrix_forwarder_user: centos +grafana_matrix_forwarder_group: centos +grafana_matrix_forwarder_homeserver: https://matrix-client.matrix.org +grafana_matrix_forwarder_port: 6000 +grafana_matrix_forwarder_resolve_mode: reaction diff --git a/requirements.yaml b/requirements.yaml index 4e3e4b08b..3db741956 100644 --- a/requirements.yaml +++ b/requirements.yaml @@ -11,10 +11,29 @@ collections: version: 1.9.0 source: https://galaxy.ansible.com type: galaxy - - name: community.grafana - version: 1.2.1 + - name: grafana.grafana + # This collection has dependencies + # (https://github.com/grafana/grafana-ansible-collection/blob/5.2.0/requirements.yml) + # that have not been defined as they should + # (https://docs.ansible.com/ansible/latest/dev_guide/developing_collections_shared.html#listing-collection-dependencies). + # Therefore, they have to be included in this file. @kysrpex opened an issue on the repository of the Grafana Ansible collection + # https://github.com/grafana/grafana-ansible-collection/issues/222 + # notifying the developers of this issue. + version: 5.2.0 source: https://galaxy.ansible.com type: galaxy + # - name: community.general # required by `grafana.grafana` (already specified above) + # source: https://github.com/ansible-collections/community.general.git + # version: 9.0.1 + # type: git + - name: community.grafana # required by `grafana.grafana` + source: https://github.com/ansible-collections/community.grafana.git + version: 2.0.0 + type: git + - name: ansible.posix # required by `grafana.grafana` + source: https://github.com/ansible-collections/ansible.posix.git + version: 1.5.2 + type: git - name: community.rabbitmq version: 1.1.0 source: https://galaxy.ansible.com @@ -82,8 +101,6 @@ roles: - name: usegalaxy-eu.dynmotd src: https://github.com/usegalaxy-eu/ansible-dynmotd version: 0.0.1 - - name: cloudalchemy.grafana - version: 0.16.2 - name: galaxyproject.tiaas2 version: 2.1.3 - name: usegalaxy-eu.autoupdates @@ -130,7 +147,7 @@ roles: - name: usegalaxy_eu.tpv_auto_lint version: 0.2.1 - name: usegalaxy_eu.grafana_matrix_forwarder - version: 1.0.0 + version: 2.0.0 - name: geerlingguy.redis version: 1.8.0 - name: artis3n.tailscale diff --git a/secret_group_vars/all.yml b/secret_group_vars/all.yml index ae1f391a0..e0a223583 100644 --- a/secret_group_vars/all.yml +++ b/secret_group_vars/all.yml @@ -1,296 +1,297 @@ $ANSIBLE_VAULT;1.1;AES256 -30313031373164313063323738313861333665653035336361383938356535366565373764656137 -3234303933363562626462653930386238643134643834300a343633626431326362336234363935 -65653931393637303065636335383830613736623661633533376665303533633939356539613937 -3935646461623930310a316336383430316363663837303763653463393234363836333562616533 -34363131623566616164353538366261613863636336636133323663393235393636373766393939 -33663434626233343066323464373636313766323735386366616239396637643135386439363763 -34393339303436393234306666343534386433626165393838393331653238646530623232313331 -34663364323135323137613165633866613331326431373030366631643333623366653739656361 -64316338353833623962306531613164623234653866323038613632376439646161303535613238 -38626164313232393462613261356463386436363130323566353862643835623937353939623532 -34333464643665313136306136303633633137343737323938646261633833663862366136633466 -32303830353234656638323066646436663632303966613164306466633239386165313135663865 -62303664626233663162323632356263363065643538623161363534613864366432376638393735 -30383935343837636237666135393930343138306433383965396235623539306563643663356363 -31336162383237636261613762303938656538306435323336613461656131373965303638356661 -33323838303732643930343530373131666361356339626135383536653832303561383165663336 -62666564353132653530336530303331353063326161393362303264356364356334363365333137 -62666561323562373038346135373935643231333138383138333932303131316437373063346463 -65316233396236663962646264333261626335376531353638346538363637643632363132343563 -33643730616533343438643330353934343063396232363631386661333561333065646466666433 -38376163656530663934363964633338333137366135616166346261316538626137646136363234 -37313066383862306465656138316138383561623236373762393439383737356638666439623134 -35376261303939386666363365326139666164356262363130316563376236303964613261313938 -38313266653231353165303264653630373630623636336136643231326166333063313165663138 -36323937373166663265343435316362333261306133366332313038346538383332373339363663 -32323564356533643132323233643165356530646630663334326439383936313234356139306361 -62626562366361626430623738636238383564373561383762353063633839666633323530653965 -30336561643961313061636430643933386134366635633136613632623263666232366130633539 -66663632356565366131653939306562363361343966663730313266393564616330313936623861 -63393434363836326239626338303262323763393432613766323539303563316432343938336666 -32613636353637373031363439663164383062396632636363353963633564363635323965353465 -66653037336363363335336666616662323430613434343464636238633461313665316631393434 -64653831356463653530376135613838663165323532323862363564386635363865303836383662 -61643133643634383233656361303964333334663932343230316365643536646363356137343962 -31656366333363323535663931356238333832666433346564663964313466343462623537623561 -30333862656463363539383061313863623237363538386565386562666262613431623365643630 -36373238383038373264636238666433313530333130323463366332393164336637383532356435 -63306634343464353564346630623531396562363336306661343263363338336165353335663666 -30623463646534666430386263373633393862333663643435346635343933633836666564653865 -32643736393732386437383935353862663537333735373262373266346239343331376530643461 -62343961326463346636303864653631636130646330643832373838636231346232653334363362 -30333161303563643061666532313738316635343263663436373463353262383337363539363636 -63663966653231633537653262393465383935313964613737663130383661613738613462663764 -35613236633664306264363434313134663632613432323462356436393230356337303862343739 -31333832313963363836343138633637363134373866666232356232376333383934623061663238 -31643137626462663363343131643839316131363835376237353730303738353035623462316439 -62366630396335636436623735323837393465616235623263323438616532396166326635323134 -31333736326532353661643666333137613239653566303566386139376239303832343261313863 -39353538343938316232363737633233393234643934386236343735626236656135643962346162 -35343032376637383133383833313937643230633639653234646163393866333762323430363261 -35366534363135376336633563663765303734626533336630313364633638326339656264653836 -35303432326663333264313836616431343130393533346430346263313866323635316530386133 -30666136306334366637343231313962306464356164666632636435326461336532373161313738 -33653932336133363336376461313130383365343261333064313830656663333964353238343766 -35323762313262623464333939363531663464613166363463306463323536373935356430313538 -30333138363031653666346463376536616333653166376430633233376139646464633865376331 -37626537346166626438323539653466333937623538363463663739656665373131373165316465 -65353638383461383564663166653561663765616431343763613963663462343635333237383538 -33393234373332616634643034323662326534666431326138363039343735393263333532393138 -36353834653337666162333135616431323764323763376432383861393063306261643136613331 -66303534313265626530333834353338613163646161643637353936366264653636376333323161 -39613363313036306463313632343031353232353562623134396262313139353738643139353162 -35303436393730613936363037663233633832323234616166633337336136383964633830636238 -39383730663030323130343138666134326635383832343737356138333335623830356132393066 -65353061386137356235383837666561386534613862393665663435366537646339323632336566 -62633033636661643437333863356365386338386437396338353933393338623666383063353330 -63373865633035333539636430623364393137636338313130333362636330626162633266333231 -32626131363931393366323538353238653934323237326563323866636564616330346636383863 -66346237643937616332383764663931353132343563386538373535643839336566656539626631 -63396462653566396364353133343962303239323136353461363135326263643835373463613236 -64613935323136623466333664646666383662636264373330393966613233626532383832346432 -35643366366635633333653937306635393434646531393861336565623165386337353634643539 -30346133653330653134313632663534323137336336313662323361666465333533316631363932 -63336466313530363566383431353135633661323639653637353539386133313365666334626464 -30366565323664393739663233396235653439373531316566336362353866343238373562643430 -61663536663731346639393038393363636332393838656565353833333033386464366138666339 -34616666626261616530333230393363613237653038653139363333656533373135663465353338 -37316238633538333064636132633332356366383739653733623061633435346662343665633332 -33363230373238656262343039653961396338346539653766333231376465636262393466393334 -33343437346132373964323262623336376532373335363766353866633564383838333036303664 -31623865386635643834323038306131336338313962613062373865316536336537373161663361 -33666339333261376464343234353339656139376262373635303536373330333764303234656438 -35346465653263643138353338356663643061383436616435366233343962373734623033326365 -39613664386136343435653432393733353639316262376436613630363433323065323764333565 -63636131336237396565393533633466313734653538623433666233383638663263336131356334 -34616630366366336464393236363332343532303634353633303864643665623437323562383033 -64306161613234643632656139316661326235326134343336383836316231326434343733653263 -36393261333534353636396462303561396163663737316432663030376131383963353037636232 -33383230313062316432376532383831656466333166666537663439353438323164396138336361 -33343432613365346231346261386534353264336439316136343630333366333562386137393435 -65343430346437383332353864636430636333386461353736313963366139363661333134643938 -35663163363738343032653962633132303265626235396238376361623234626333373261386134 -30653961333436363531393363656435656136353839633432313335316432353032333036633436 -36663434616133326636663134663130646335373766623535326430633432633164393932666634 -30656163333564663439663934373362383734376231343037643961386133363862316664643363 -63393466323365326634306638653164343530356636643233333533383966633034393066623939 -62376632373031316639373139336131396166653839343130316336663531656131653666306361 -65613734326233396366613935663862663038346538623864316562333237313164643131303564 -61643765383639373630653539643466383666653232343236613165623936626566373466356464 -32316565646237343039373734303063376363636164323862313731383934343539643530643462 -32396263393763326233626332356439366439616638326536383662316630363164663734386135 -65633434343430393931376430343965383766616663353561303439303138633363323137323632 -39626432636136666664653761616665653030633961616235613663333735383661333532363334 -35663332386430363965336163363561366339393332626332356531303432323962316235353334 -31326433393233643838313065333033366339633737343531373834353464356336643663373435 -65396130656536383162366665616638643463333631353262333537613935613533373361333032 -30386330316239373433316165383365383661393637666233633961316135316536313635626236 -33383839666465313762373264383437333564393739303761323630653839623164613162393464 -32343232653464643631363564323365333164623234313231643666633737353064613732653864 -35376433346233386166383331356166653236326132356239306666653034323834316364646264 -64633637643166316439633463333830316434333131353530653663323039343066613461633565 -31623866343939663031323031333836343165326133336439376435656162323661373038613466 -30333936636637613266623532333166396531313036363537373938626265323039623033306233 -34643138623633343034316133366238623638643038613265356161373330396263383362313363 -35616462666231353764643330396134613534343363663766663932353034656334623566316632 -66353737656163326532663063396330366562393366396661393434356161626538616266326661 -64613838636361336262363737623134633636326530633865326562316236343465386464623263 -33396430613264313532663962613262396161346365613331326365633636613032323930353163 -63636365383964393062323239663039326438306466353965613966323939343633633439656633 -65396461326336393762646232353430633932373532646331326563623664633434653933653438 -63613531336233663030366639626139623535323163623164343437666565363238333136646131 -62383531393639643834666634663938663938386464313734363836386531643838653064306134 -66393062303538313837383935383966373739323366633936633965333461653262613534386261 -64376565353233316261393933613765346463346565376237303037363432366261396637313938 -34393935356630643463343562353363343832653731653732616564663062306664323534303331 -62326436626365323038633765326363323565373863626532633961333061616330653935326164 -37383566376266326535396234383366333035393164303832663337323532653835383831313833 -30663764633431333566386233663566323531326562303762653232663733333039393935333236 -33636238626534303039363430646264363663303566643637663330316363386236323039326331 -61363137653337353266343966613631666133363963383630316665336234363461373262363033 -34383430316539303230663738613133313639393366653565643062616661323838633733303232 -31303030363730396461306230326266656365316333313061613061633333636664653637323664 -61643635373536343138363864383439303233363564636335656631633630653736356533326266 -32363039653133643939616136336634666565333037613265633633313064643465633336626232 -61613933313061343737346532363031356530663136633432343238323363373934366662346136 -33633036636363623436383337633838633137326630333332643162393934653237363735656436 -37393935663665376134646165303166613737653062363261366664346435363965356132323264 -38663930653536393637363536653339613335343033316338366333366138343334623434636532 -38396432313539663331626262626133653838356138323037643830643339316138646239343731 -34383362346666323334373634376634613265373331373064626637366663333838626465353638 -61353137353533653831626237323830353764623138616137313232623735646465623866353964 -30663663613662376334653330633932363337306438383362313535613763666461626466383363 -37373166303562356635633664623562383562303735393533633665353435343939353764666163 -33333637356633313638623863663832376562653337663131393039613864643430346663356131 -62643637396235653363336336323936346232343166306534616239626461333334383837636564 -64383263643465383165303265656165623438316465616566623264333931303862326231646634 -62383436353861663938353836663230366265636435373662646163666361313061333637373030 -35363965663533663731356631336664656265353432393835313331383735363034356361663836 -35633239316363343566373039313462626366353336663961646236306664656437316434393763 -35333833366239386433616563393634306161303031343634353764333862646135613930343730 -65646565373439653633663533316133643166356436633863396366353965366130396435373338 -65326261613633646630666161376439366637383662333932626437636664303736633334613838 -65363661316166613333623032633130323464623831353065373465386132366261613536356138 -66313164363033353165323335646634393434343464313030653036373935356430356331373231 -36343661653830643033663632626330623862636530313261663061626133623532623938613739 -31636463323036666464356264303631313662336638613964326636333030303566353730346165 -31656433656332356531306364303161323232363361353465396434643931653139313732376336 -39363765646165326166323063356436353239323862393666373863643165303435373935633262 -66326264623639633638376230616334323734393261363464343939343064333665333835646234 -62346233326664383039343634366337343465303338326635643737623030303261306563663534 -31363336663364353034653932646638313139623738636338656434383535336137626465353231 -31663438646334323832363133326664613337343231623932353764666239373866313231633733 -34656236623261626530346336343536363930393338366163663236323064386633316230333665 -66623236613663623361346230383163333966363935656266393535366137346261333166623363 -33306162623434323332363538636134326336373031393966333236633436636231373334373163 -39386132396530636462346134323933376566653963333630616136383530306536623936653436 -36633238353838386535303330393139623435323437633732656436353131633462653333626632 -35633935636462373133626666316231646434323431646636316462636166366262336638363737 -64396564393363613534656433396333383366336565383537313165363938623732316162363464 -33373835636631316465343862323031653833396366643438653136383637313536303432653836 -30646634643732313662343064366333343338653865663331343535383563363735643234366662 -37346436366361313234393564633532653238656639653766613362623030373039363135363136 -34303663613261626461656635613132626663666635306564303466636665646465643466616238 -31303563313833383635393834316435333364363761393836396437363961393535333038346161 -35626163376165616435303838333034656533363265363939386334613836343839373663613763 -37653130313035313836656365376332353439633735663166646666333261383434336263333863 -30653237336139343038306439613064643361303639396662633465386135323536336134643132 -37653962393862383831646361386364303932626339346633343233383830623237623862653632 -34353037303430386635363361393432323962333663343030336465663739663135656632313162 -62303038643861366561353238333863303036643832386631313266653664363439613961666636 -39353237363639383133656261383735383131613561326434643837653130383335366136333534 -63396436323632636536656136303532346666373863613737616638636562373835633637393063 -30636562363963326331613462646634393365366362373239333061393866343262363162366130 -61303034356631646266653130306235343563306566623237393236363230626131373965366439 -34346432333362376433343963393634656131613162393035336566333736653531313037653435 -65613237626430653034353337656534313964366434323137633831333264373062323135326664 -38633730356663343331393461323661383831346536313330643265323934356339393530303661 -33623136626262323365393466623730393638303932313162363830653833393534363664613637 -32353237356338353831653563643166373363663061326436316336653235316535313830373464 -62326637383365626433353735643234666462393832636636313730616638363131613435653336 -64313337303139383861373134353464303864393534316430616230633732646435383535623931 -32653466343334643831663062623038643231306365623638353565383334333964646662316230 -37303332323566626366343030323762336661376337363330363136386230663932393739663038 -38353963396464346562653238366362356137313232343661653039653536663538363035393865 -33643530353431333361663438386365316465613164366264613666306366353733616335663063 -65303939636333623032333839313261646365376636323761353338613766393839303066323035 -61643637376331363834386530316637393765633333623664613964623238343736666136353962 -61383532653637306265636264303166376437386134353137376630393031643432356461386630 -64643931663862623461633363643830303837626663366662313539613465616639666630373433 -32333737383566323331373361356237613164616133316265623838636264303366373830346336 -30646332633066616461346531613031353565646137316637323564353663313065383730316635 -31636266346439366336306231633266633832646561386663656537623334343631636435336630 -31306236336135643533373562616139356537386339336361383066356363636439373039313162 -38633239396665383065316339323662363136633061373962616562313732356333323564343764 -31356162636563663435653664326339623535363534633733626334356133643139663666313132 -37653461313365663639373836653232643738653565663831386539313061376339313263326362 -66366434313862323965626266373165646339336134623163363466623838303439346530663461 -30393639333039343930383931666132643665633135366633633539663563303837666535653737 -36383738353331313732623430393531613337383865643636643130323637633964333163363231 -34666364616239366439346266613930303262383664383033623131303762666263663162326365 -33323462396233643765653166376633663338373866306262633637393435616334376232663865 -30663038623037666539623261666565303632336332363932646532333731376137336535363664 -65366335343539393537353238653865613935656563356462386432323764316336633431396561 -33376630363262613162636636613666643331376462636265306631376139343833653038313163 -35643139366264666531346562633436383434336162653361356563376661323132366533373161 -31663737346365613061383461353231306533303961653863353437373464316132326635363036 -63353430643563343330353134316135623461366436663163633132353062313833386531313862 -31663762393564633037643964303763326331303831323363656331663237613131313734356662 -63363337666230356566643539363039643537343065646138343237393033353731346337336532 -62313839316437633961346336363633303534313365363035363534656632363366386465366265 -61366532346365613232376136623435613932363161336262643834656136323266656364666466 -34353133383566613331386632663733633239373137646431626537386366393962613832306364 -38303063636662636335643039323262613739663939663838636265613538336562646663613536 -62366165353636393064356230626137393131656433393636393330366331613239653962383732 -63343034373733393865353734636434373662613633323262643766666439313035303432643865 -32333735336165613737613737633666643735366436313835626666643437646461396237663964 -39386137343238356530383030623433613861613362336531623433653536363830313232633030 -64646335633538633831613830656234386261353936656137366165636630626336353363636135 -37303862333761376334383939393866313430336537636331663762643738383234393765626533 -38323462373238656235343334313131363131393865616630393265313566653439646561663565 -38653833326334346262353833623264316133303139643931306164343662316261623631363166 -30306333653164313432376565306439313035633839323561376237356536653339636164316436 -39353262323636356662643461346234653836386263646161666131386137343337613839313339 -32616237656366346136623065386365373735323337303962313034396464623565626232636237 -62346335373262303637373562653137396139666439383231613738643161333636303939373533 -33303066623630346465636236653131663265393038666366326637616133356231363431373038 -36623538383538316666386638656463396332396235613931386361393735666539343731353063 -31613166376563343339666461643339663865306531616262663531653066613939333161663934 -32396639633465376562636131396339613738393365666362306362373231643165303565323932 -62643438613437613065663062396638303638393333386233303038343631386132653066666335 -63623534373137373837333731363261393362313138313663643166666139633235663034383333 -31663862393664323033303232316662613335313766383138613938626334363636323264613137 -65383131306363626637653964613366636232613031376261326434643463373061323534613963 -62656433653064386536323561336233613138323435343537646133373163386462333634386236 -30363334633138316366366531333234323262343632393537623436343533383164613933303335 -38343836656337343262373136323437373634383365633765613332653435366239363133376536 -65326436616630663833663831666235626662623664396532353564613862653434646564316233 -30653533616131326563383031373734393236383962303661623138376234646666633133623337 -31636163383866306531353363343362626566653435633439633837306161646132643630623765 -39663734623234346364373862383338376633396131313464613465616335373730343063623666 -64336362383961663332333766626233646635623038653437363565646339616430633466363732 -37336163653366666236333734303738376666333230373837343162303063373363613966326634 -35386461353335633634323162353730653663613332393830346234396636666531393139343664 -33643633366564393336396438323334303132346532616138653662353831366636626138336139 -36363834373035383233623965663264353531343062626233313665623930633263373661346361 -38346566386437306638643336626434626335336633636137383138313333633631326339306239 -36623161373130646362323235663064333963383431386238663131623332346566323432336231 -39353764613061306639643432333264653739373435646561623136646134663138366639353865 -34393033613764346364313630376265303634616635383462353365343736303838623935663934 -33313837313064323935346565376465396663386235633537646437343035303366663737396237 -39636633316365626435333536633066663161373035666564306461326364303266656166303862 -38653036623037623639376338373161636637353130643964643864633338393631303263323964 -63373034623531396165396264663738653234383464393137643963363962323437643561626537 -31383035353061303231353965326232363334396538353130336135336636346532323330313838 -36656166336439336239316361376262353739626462666661306538356138336131383835626530 -61373630646261626336326266653265333430306336653739353639373466643335346162643530 -64333463626562353830666630623739613764646638333761353537353133356433373761663562 -37323637333137313133393262376434633764386262383938383533306434633734323634396636 -35336635323464333663623464323063663436366132636563663730323565356431643463323061 -63616465643262303630633730386461336433663433613266326239306235633364363737356239 -65363730613466656630353665313266613135663466326234646138326632336465663964376365 -31623237336339383564383064363431666530616664636638376137626162333539643931366233 -36376235613133313630366430636632656561313630376239353037323936643136306163383234 -38373736623539386635333039393330636238653366316465376430363736656434323631626635 -39376634643132363634356334643335393737306436303463623566626636306464383133633031 -33626631326131386335386135653262373565373238643939616339666534323631336438363139 -61653130373432656463643236663766393432653731623838336466626263373066663463376435 -30346661363939646439626666336361366339616639333039306236333934323137383834353636 -37353539333236363062643663623066386638333936653735393363363461626261666365353930 -35336537623731653732643134333639366562306265646365313935656633363565333036343234 -64303933613330616461363039376331663635663135303538316533393061396433653239386430 -63373534333865633038663465326232326337386434323839643939386435346531393734333161 -64393931666334333562373732313564333338643038633136376361303864396230343663653635 -37393530353733313864303938376539346465323865353332393436633430303438333937353830 -35656437616661373165346135396335333532633665326364383538323633336664333735326666 -33616331626232363632383130653139626638383234373734366566336263323262306166623931 -61323963356237363032383935333832613564643130633632656566646636633133356237643233 -35306637613533323965343035623761363362353164393835626434316631353663393731616135 -61363030666266356566653966643861346136636132343937616234346465643865633631393538 -62386433396164363436316331326364333265666662373765626461653038643466333133613363 -31316266313636653265336164363737363666336135636533323566653235363838306466653832 -63616561336262666664343638656237666239313033633432646135643437613763373263356634 -66336236316234363335326533636538636363666264386333663564353230366637336561356539 -62643132386335376662343335316638633862333862303539313537353332356564626535326337 -396434396163636361333637633962343738 +35383935623535336433363532613939646338663433393063356264343437626364653164323339 +6530316261343034633764663163623863313061653666610a633831616538386564653337386335 +65633330613137633261653465383533636537663763616163623961353333626463343834333135 +3964396331343866320a306664656137646236376139386133613533626566343264633735336165 +62323664303935393031646661393930663730646633306635396463613037366332626632333730 +36613263333037336232393763656133626136373064653765323431613333356133303133383638 +36643965366336626261363034666330653632393733333233616439303566343663323631613533 +64613234353663303764313830646138363438653233666630333666373739666338656562356333 +64303866363562633831663830306132363062643864393438343861626362623739353763343065 +38376334323830623865303830386437643166373530353635636334363964303963303030346636 +31373962613132656436363539383462363433653636303038336132316435326538636539323363 +34326337616638383231636330313766613932366630653730323439666130616238623132333630 +36303335353262346330353763653638326436393538623963376137393866303939666238616532 +35653734346130363731333834663938663535353332363535343832663730306565323439396662 +35613462633031636436656535623038333235616530313066343031633133356163373263366238 +65383432393663633765643130626635376632623765396438396632303530353162353863383861 +61383330613639656638333763636436656365303738323038613862376432613530623138313039 +66633966333337633230353736623465643062323463333338643439373236616337316338313364 +37363233363934666439383431326566313962363638353833333835626638643239366232663331 +61613838366537616563663161336432616634346361643461376131383233313534353663363939 +32396664316231373465353830303136316465663438663763363431366332313736306365313332 +36353030643466653934306333353465393432613365633735636565626431633537323764646462 +65366261653332356130366463393263396330633964376263643666396231663733306131366465 +31313835373861663962623532356662333339636636396335656434356561323631316365326432 +31623033346265646162333830343661313039646531326233643364366564326630336331353036 +64653262396631376339383334303733656331333733346163396165356163646435396635623931 +37623439393965383663336232646361356261623564616664343064346131313732393130613036 +64663862633636313938313633636334366266623838336338636533383266313665313636666233 +32373263333138366232376532626563306230303863646436313862666262323961613563653031 +65663137313933663638316439353264663366333938633363636339623635383336363333396138 +39333064306665353965346465323038356562643737636263323235326164306261646263343364 +37313262336434303831636464356166646432386431363332313539646334316436613030653232 +35303063383839323363303838336361336139343463396365376166313533626238613132636662 +30663463316365666138346431313561373065396638626338323866626338613031663635323338 +35633433663438636136393936396162326363643664376531326662653939646130326639363630 +66303461623339323861663664333636393962343032666436373936346337666132663161383733 +61303930363261633134623138316135646266656236333166353339626438306433346364643939 +35613435393136326633326236383865626232396339653763653635663933313734343631623933 +66623531393532653961613232386563313261613838346430373037383264343036323363623732 +38393839646432336538313538303665333435356337303431633366386639626330643639346433 +62303236393463613733326664623236323932616533653839353535646464336435636134396630 +64653735343365353066373636643236326139383163373136616565306531373132383161333637 +64616136643063353661653662343135393635636232366431373535363565376465386433613465 +30646538386664316666393066373931633264333134303064633737613632313134656262383063 +37323534383439343635313536616235323033653136343766656333646231363738396263303637 +62656439666261656662656439316131326166643635366530306237626230323764326166643633 +62326335646166353234623334323030383831356334323937326663333863616132656333646162 +38376132633563333764376665313863343433646531623039323633316330383065393934313732 +64303836313433373866363864613334303633323234663134323732366566663934366365613835 +32623565623138343937656563396564646437333961383934343662363336363534363430363832 +36376461333237616530383831353864393332323330336566326632616439613664303561626532 +62383237373663353463633238613433616336383233336139333334363833346263326234643264 +63313637633765623639396561653939373538663266653139353661623333386466643839646566 +64313434376466353136623434633835366561393538633565656262326231366532353533613731 +34616634396632646666343136363936393462623234623239333434623233643465643463656535 +35373537376637623664386232353632306236336664303963636639303061396230326431633538 +39623465643730383765656136616165396431393030626139623136333864386231346464646232 +32393462306265366266626239313539633366396236336264333835323139363961643632623764 +66333538636236626438646431383730313963616238333761663863326334656164646539383932 +64666466653839626433313961376265613139666338336630343034386166623536386439326531 +39626337653736396265643934396338306330636430366234643138336564373963656133356438 +66383136616134623864303532376361313164303833343133353139396532656636626330333831 +66336633306661653161646632643037313031636435366233623731323831633339316361366336 +62616664663432386362653761333839646132653466353764386465653866356435663937336133 +63326432623065616163376334663664326332353832313664643537633766633633366234336531 +66393766333134343930656130613532626433393566643134333935383562376337343630653131 +62393261646331326135393366376363386633633532376239626163616165313935333137663465 +61643965323036366533626435326530353839646466666631303734623962386563323631313766 +62323732636539303263393765373862333231613235356335356330313633366638376533366430 +66316232303764356233306635373437633339666231646135366133623234306239366434613266 +39326232623562376639303832346464393235336634313736386630323534383266313838323365 +61363531316435316632333431303333376265623736326230633939353033646130343639663133 +34633561306432336332306262303934633233323130616134376433396636303037616561633832 +64366534636166663330653034663631333365373065393631646133376664396561323265396639 +35373166326334353237663363613934653232326238363865616365306465633139303732393730 +34666165313132623336343833376365643862353762633166383332343734373833313862633866 +30306339666630396138663264383661316365376263633466306665363962626365346336393034 +66633263383032643936346338313765366461353333353430333538343665323066633337613039 +66666137323333353266336335333430346135356232363531383563356666336332616661393364 +61396663663165353332643330323965393464353239316363393539656230333830366639613635 +36363362323466363637363039393563306262363730336431313238636665313164656266323662 +30323832386434643934356163373736663533636363656465393964303936636233393537346234 +37383533383338363463633066313163643836303266363966356335653637346239333639323336 +63306139643861623365323263316661663834316230663839326633396166636563656434653564 +38313338366630653364303739616136633131626437636438303837656637613436313335646536 +61336236336265343866656363313737393934373562326535626365643034636333366436396138 +64393937633531623836383763336666356637343762373061363738366665326265366163653032 +63666564346163326361363836336336343036353064363737353062643435656233363161656536 +35333663343035313034363062313630633165336365343061613262633533373635306366356438 +35376262326633343563343538653363663236636433623561396530346330306235313135626364 +66373538343438306362666539343732613230333464623031323266646534353231356262356434 +63666565616435646462393536653166323236343563613066666635653865313531376435633064 +35663731363762626233353134383637353033366135343035626230323733336361366663363036 +65343262323264633233646535616564336134303230393265323834626532623835303561616437 +31666238613737353665326434383865616134663962343763373432633536393939386439613066 +30643463396166663334646431653333613862363633383532323539663666646262316561336639 +32336662633161653463663132353562376538363865666561383232356636663934376266383235 +38666139356231623063653966613666656363313434343839653833623338323962376163393861 +61376637393262326461633534346137376264323038386263303133613231663630363662623664 +39306432383739636336666532623734393536653835313262313362613335633534626363393063 +33303062373437353733643831363664366564373831336535373239363336383235336136626433 +31383563663630383036343534643538623631393437366162373931386565653435656634626131 +39303166343661363334656664363937323764313339323039353266656163626366373335643434 +38383965353130343363323233316532333862333232393337646461326630393733313339616165 +62373134336131643731633433336633643031326432303531663231316631363138373261643063 +39623963343365326538356162336265666238396366356336623132656366616535363731353837 +66653133613535653431623331336332316235346262643535623631366363626532306331373365 +34313065303837653036666631346466363436613636376634613661626335646135363963636434 +37336338633139666562636230336339386262393563623431383363343636333639313530343334 +32623830306265643635656464393237326263623630373938386262646266336363653635656131 +36373162646665663865613030303661356161376461333462646335366232653961336139376463 +32653366393831386263623031363134666430393236393732363066376239393433613938393466 +66646164626438623061653663323234323061616636626436303065326338313636656564373539 +33336461346338616661646262366530396266383864306335396533656332356137623666353331 +30313864643630396138373038346535336534323966396664363664393331376666336164623964 +64326666353066346137626337376639653530343734373939643964323734326365343564323239 +62326339386365363634613630363864323638643830623032626363303632303234633238633834 +35326332363535336530623935633164613563346630356431333933376637386165343262663039 +36316665653661336438663631373766656239613531633134386435323634626436633330323565 +32323263373437353364656538643732396666666161316336333364353831613839306661616338 +39613661666261626436626165363265386235393630306163346437373965383731653134633730 +64323261326536623231396330623661626330353830643238636361616363326263363031643137 +62656530306539636261623134333066303638353064646465396233363330636339383336656136 +33323237383661306538336633316134316630343566643533313330663031306432393133653563 +36343839633834313530663939366230656339666136326664366233343331303666336564366464 +30663832353962336534313766336662333363396131623538313631346233303336623833636631 +34653966386637363933393331366139643036643339316430363262383461633831623466313538 +32623039336165376431626262343833323637343334316238353464363239346164363163616365 +66646566323636643731363736666637386339303433613234646233623162333731356566356239 +36383062343136353031643464633433363034613232633731353865386637343337343037623635 +30326130343733306236633266323430626563323163613265626565656131366364313430356537 +63643534613666393737333064376430343639303733316533626637383832666561336135306634 +31666165643165663566643066383530626337353333306639376637313663316462323563666532 +30343435313532363563623033343635343863633931373933663739323734386338313765613039 +65346634333663303064646232643361616132646664656337653464636263663735616265616237 +66383732643964616662663039663839353232616236613264636634343934363037353134306635 +64323832306135383366336437363462616434653431336637303166663464333138666236626330 +33376237623633356130303130343637376130303962373338306638306166643132616234316630 +61316331376563623263613336383731336136353036303833643037343338323936343062636436 +63346665333931356332333032353730343736663532643362343863623933396365616665646163 +38393434346664666632393531393930323630383833626365323636383430643339393362663135 +36313663306163323363646438653366306164363665363431643139366438376136313833653134 +64646334376136393364626162646466633266373936656132383635666361353838353163613737 +62346631353836353430333162663130393965666363313561366264613533643266323832363038 +34626264343235336537386163626334306438393838316433616235616664346531303561393633 +62316261326563356334386534393665323735326563396430353233383564646563656566313635 +63313739616665633438653033333035393836303561316231323537363065663030383538663430 +63376262346539343761383961393939613564653634323838383138376430613338383332353262 +38643562313061363732353033336232393234636339656666303361323231653138616332343833 +37646638356432326664313764626234363733363466363139653061386132396362303534643231 +36346535633838373038363836353833396432636134623033616666663266303533666164386530 +32626262373938623366356235666364363135373462363231306137346466303133643135386234 +38316233383865353365363265373337393732663432326264376534626430346365613135396333 +38653161643030643037636330363231666436323535313166353639663764366534613334666364 +64323234303336653564343434613136353631356236626334303131303333333666363335653664 +61656436323931666434643838653261656465366164323638366237636162366662316461653238 +34383663306331616437666261636465326233306135343432646639613032303366306234336130 +66333534646139306461333439363966386165613736613632383139393631306662666533326362 +62363438623132333037336665653238323964316338323539323732306334396462363631303165 +32393038613938343366363432306439363839336261653861386634303664663330333065626335 +36383038313062343334326363653762616364363036633061366637326462626639376237326638 +66326235313039646663643239623539343538316133306461646639353464323631386538363839 +61396265353137313766663065386437376136643961663761343466306435326636313736353266 +65633962313334353632373364326133303432653761336666623135346564383361386465346235 +63386266663931303962386132323561336632663334616661353139366133306333623537313035 +61353061373237386333623138653636656165646238633939356138613930346564623966343763 +36346337383839303463386336633262333031356263613234353533363562373333303935363630 +37663766353237313266633236303765616531643362613266393666636462306164656361613166 +38646337373666313930623061653130636430323366623934333736656562346333623061326335 +63353632343763363462393361616265663636316130613065616164313663306538333834653566 +39303666396233643938656562346131643062366164393533623666333236343733663064646166 +31623336393163346133623237306538333662656434333662656339656664643234306638323761 +34313861643234393435663766616130353862623061653562613266373965376331633030633233 +66633333646134636231323066363766643562373363626265333164313161616237393231636465 +66623465643664663766383431666164303633333234356538313664343133343732336261333538 +34383631383330373633383765313464353538353739653262653836636533656361373661613061 +33613831313430646161613135626237396235393433376232376431656437326633613063616536 +62643030363664653064336366653062383864323436666139643133663035343339666662373835 +33346630653933326333323065353236636237303366623034376662323332383766363035376633 +64316435613330643333333636633838313364346561613930336334656131316233613231323430 +61643766636566323132366561633761346336623366373138316237323833376464396137633865 +34373962653935313864643262336538363338663263623937356166343061356465383938353534 +35343863326132393636313365623763306438323738383365356437356337366662303036316430 +32653665373462613863643964306332666665386533383433303764383635363537333963373937 +38333539323166323332373434613861383134373935333037373963626130346532313733366132 +39396239626136363838353663646130313164353437623933383063353061633735313731613338 +31643732346131313631633036333362376431623434396364666236646461336362326563346130 +65346564316665313865323530353037626137333430633764346665313565363766376335643133 +66646536626561326436363661303939356461306534613135393863316438343765333638363636 +39623435303462366463356539333465633331373730663438343462313235333934353433663335 +64616135653036373934303666306332303766336431306334633636363463613337333839656664 +61313830633636363164613463626366626433303932326362383066313830613137343635656636 +66376535663761616634386630303137386463316661646135633731626133643262626534383438 +65323464303934373839313461656233376630393532313130613165643436363138383835366562 +37303333396331663032623466643038656439633531636435653739333665376137653833633637 +61303566303732616261636634383663363565383233373739653933376135306134306435306634 +33656363303739343235373436303437633561653339353634306266613265623365303562306531 +36343464613262323430363063663338343666343238346662306630633265386537366437393336 +35666263656161313039626131323761646439306235316637636263306337393238323737376463 +62306633353235303465636336643730666266333032373561376335653363323863313233333737 +64373864376533313462343535396134396239363464316639363738366461663034316263633832 +61613030363866653261336337373535336261663835356234386462643731643231386561396264 +65303234643432326533346234393435353766383861346566646666623262366639623731323766 +31663734633130366165626466666530653837353135336339373065306339613839313265353461 +37366430623734366266363337643833313465613633343761373930393062396430336533613934 +65383135316463646564623431393966346564366538383662663633306130353130326235626138 +31383262363366373639316436653230356331626330363832653164376662303665633430306263 +33373436336333366361656334663266613432346438633734306661386235636330666435376565 +34343133323237386630386466303264356664333738323033613331656362643733323131353964 +38303564396631313163343662333737396266343639343839393530336439386436356163363666 +61623432323362363562346637363633343362313130613835336364633066396162646562633335 +63306237376538346361663539653731363536386631613166616361323530616664306362383966 +33623235626466326162353637306235316564393731623531373338646465353064313262313238 +31343861346431616266613939326231383763646463366131323031396438633938356666383638 +64313732633533353630643733643061613262313530663032373237343439353635333732613263 +39636661326162643165343166306339333933356538346534626438376137373864663966666661 +66313065333434333637356438333235363136316530393832663435663336663262326430383665 +37383639396130623936343964336132356235313563376235626336623064643466616232376564 +61653736333961346265323935303066633632626530313837343936303235303862653836346137 +36376631613335356134653131626165636634366263666237666133326264636636643239333466 +32663731613234393262633237333232623539633936366538626566633833386639386362373731 +39303264363334356233333363643964613031613835303930356461613132333462383438323138 +65646632343433643863383337636263323166666430393363353466666336363133303135363062 +31396464613934333139343532376437386333643864316530323633633135663731323662313265 +63306532393035323564323063626530323836336239326231653162623839663263363134616135 +66643735333731333734383363303437656162366135656664333566313161663230313761373837 +36323337363431396436323364323434353366666565353333393436623130333330633464616464 +63623632346336623238373335323936656463303636366230613536633136383037313766643934 +63643565653066643039326336366233623331666463636561343937323232306364323630333462 +39653133393964303734373535663933356461383635663661396563656533656465393631636466 +65393362653634366637366332626539353930396531386532376330313131356233373939643465 +33353562636161356238633433336663323930353933633366616137386639336134376234303763 +37663438343438383832323463653535366430643137656634343335393836386261633131383737 +34646332356263356661323431393733623638623963383432333437616430303332653833633462 +39393532326337373632633330306665663837306539333364313365323365636638626435636431 +63663032313930306565633064643134366266386363343261393330613337326430376164633962 +31633664316331333237633066633731313331353833343336336264363536353037386132346636 +30626537643339633133393661666539313861396137313531636266616430356536376434666236 +36356165393630363635323539363363313637313162663232316334376135386362376436353936 +33346266383939666332323934633731616534373337643636353836616562316136323366356163 +33616262626634373661643432396662303335343864663261613363653338303866306230656136 +37623337386332633430343333313234353337316137646535646531333031303832393738643664 +64326266363430316131636338636361626632303064326131613939366564366164353764363162 +39633362346531323261356436623432343639653364623331323834306363313363353361383362 +62623731366162306162363339613733363633613862316432333564376365623134336333643866 +36346638623432626436346138363639313364313236313133666166646634346339613237303338 +61326563626138653963386663666465326164356133363035366138346330343230336164623333 +32653731646163303465633337383039353836323634633236393935636137623730386432323035 +66643738626239373735616635323034646135373932393666656264326234626330373237393366 +66646234333664343766633135653865623736623830366234626439383361323131663635383832 +32326337653064653235333237373036663363633566623138646133393635303765653166613639 +30376661356336383738336234323436356464646465343032383066623834666466333439643034 +35393865336665623536633266633434303730316461326661323038336339366238353635663135 +33376664333565366435373038336565396261386265363738343138336535306534613461333337 +33653032393665653265356165343231343636616430303639643038333239383933613031303339 +61376632613235363361363162346232363431373265396430373634613866336639313230353539 +64333033353439313732626261646434303734663439396439323465636532306537623261376266 +33343230613634313366313737656538343331336534323262376431623336643335373866653638 +38303735636263376164326564383333353230393262373463363632393166663734333966623131 +33613636383734626364363138373038376461663165363435653736616438353266356533313832 +65623236616239316533326634363630303539663834383862383262626638313534636631616539 +39646239323931393238363461623363643832356261653936333737366632333835396365323363 +32323832326163333430663466623965653838653834633831383961343366343261623663363630 +65636436303665663066303339356535373031623135646636373331646533353230313939353834 +61386332323663646138323862373938653730316135643230646662306561333165336164613065 +39393935303739393439373836363962353865363466363837313263613865666564336632653633 +61633938306632373562393139313238313932336363363831666436643766313761323066636462 +35653437623838633661333332323762663136323334313637663262303461313363303035333061 +62663438663138373837346239313734396563316466303561616433333766303037323934313562 +30306661613465383336373938316266356137386565616562353363326439366639373031303336 +61323265363736386633646233623364396233653531636364366232656166616130656564353736 +61616366343766366435303033663331313539313964333465663232313033383365653363613732 +64336439333332383534373662373630323539653664363762313538356166353766336634363662 +33633238653766663936373137663838663434656136343332363436343231313364666135366461 +66616437663230646539623037356135373935316236636430643138323332323264383239626232 +34656266626463663433633931653832303434346632313662613263363230353764633334646263 +33353938313664613536356531363565323539386331396262356132353132373038363337656639 +38663438323435656137396233656663396238356565653366373136356361633331376130633931 +65616362343930393866303135643535623731316634363634656266373431356139383230353364 +61646637326139316163633462373435336131643364393436633538616135316335616237373531 +64363336323237363839313430656663373338623731303539313230623333323066313433323236 +37616662363437356466303562396535656662643236623165626465333035633565343236393066 +30346637303663643533313932643332626162346561366232663337626564313637643636363931 +32633865323361623933643536393030346635373066353838313433633339363236626131383961 +38616139643833616565313938613232306538343433343234363534623965343534636661346662 +61363963386164666566326135313761303231333630396264643765623932306234383465666230 +65343163393638333631613034363532653235343531626439663765643361353265373164363838 +35623762353638613239663639383163653137613361663062663532306337333561636234653730 +34343837363936313639623832626436633562383533623239616535643932353137633361323435 +63643563643963393965643138353735656665363061643133346161653831613337353866663836 +63353535666362343231623331313839393930633761383866663365666430616233663331663532 +37396665363439343764366264383234316665656266303964343538353934313238653734353931 +30396363373937306264393837326536366535666462623531356365356230666238643633313965 +39356438313534356231656633393136303833313733393534313131353532663564383930333963 +65643636663033613363626266323138393434633036663937663539656265373966306533643732 +35396633363531616439 From ec5391ce9b78cb4bbdf20e2518acddb911651e23 Mon Sep 17 00:00:00 2001 From: =?UTF-8?q?Jos=C3=A9=20Manuel=20Dom=C3=ADnguez?= Date: Mon, 17 Jun 2024 14:49:49 +0200 Subject: [PATCH 02/11] Provision dashboards from usegalaxy-eu/grafana-dashboards Add usegalaxy-eu/grafana-dashboards as a submodule so that the Ansible role `grafana.grafana.grafana` can provision the dashboards from this folder. --- .gitmodules | 3 +++ files/grafana | 1 + requirements.txt | 1 + 3 files changed, 5 insertions(+) create mode 160000 files/grafana diff --git a/.gitmodules b/.gitmodules index 0547b52c9..540cf4ce7 100644 --- a/.gitmodules +++ b/.gitmodules @@ -1,3 +1,6 @@ [submodule "mounts"] path = mounts url = https://github.com/usegalaxy-eu/mounts +[submodule "files/grafana"] + path = files/grafana + url = https://github.com/usegalaxy-eu/grafana-dashboards.git diff --git a/files/grafana b/files/grafana new file mode 160000 index 000000000..3aabd4385 --- /dev/null +++ b/files/grafana @@ -0,0 +1 @@ +Subproject commit 3aabd4385e7866d54c545046a695ae5824eb2d55 diff --git a/requirements.txt b/requirements.txt index d5e900aa9..762438d19 100644 --- a/requirements.txt +++ b/requirements.txt @@ -1,2 +1,3 @@ ansible-core==2.14.5 boto==2.49.0 +jmespath>=0.9.0,<2 # (grafana.grafana.grafana) From dea78eaf1a18944b1082c5616072e31653897ca3 Mon Sep 17 00:00:00 2001 From: =?UTF-8?q?Jos=C3=A9=20Manuel=20Dom=C3=ADnguez?= Date: Fri, 21 Jun 2024 14:30:40 +0200 Subject: [PATCH 03/11] Move grafana group vars to a dedicated group folder --- group_vars/{grafana.yml => grafana/vars.yml} | 0 1 file changed, 0 insertions(+), 0 deletions(-) rename group_vars/{grafana.yml => grafana/vars.yml} (100%) diff --git a/group_vars/grafana.yml b/group_vars/grafana/vars.yml similarity index 100% rename from group_vars/grafana.yml rename to group_vars/grafana/vars.yml From df0d1d88368a736e0196ba9146b17303a8bbadb6 Mon Sep 17 00:00:00 2001 From: =?UTF-8?q?Jos=C3=A9=20Manuel=20Dom=C3=ADnguez?= Date: Fri, 21 Jun 2024 15:15:37 +0200 Subject: [PATCH 04/11] Move grafana secret group vars to the dedicated group folder --- group_vars/grafana/vars.yml | 17 +- group_vars/grafana/vault.yml | 45 +++ secret_group_vars/all.yml | 559 ++++++++++++++++------------------- 3 files changed, 320 insertions(+), 301 deletions(-) create mode 100644 group_vars/grafana/vault.yml diff --git a/group_vars/grafana/vars.yml b/group_vars/grafana/vars.yml index 9e41a509e..cfcd2d74d 100644 --- a/group_vars/grafana/vars.yml +++ b/group_vars/grafana/vars.yml @@ -45,9 +45,10 @@ grafana_users: grafana_security: admin_user: admin - admin_password: "{{ grafana_auth_admin_password }}" + admin_password: "{{ vault_grafana_auth_admin_password }}" allow_embedding: "true" cookie_secure: "true" +grafana_security_secret_key: "{{ vault_grafana_security_secret_key }}" grafana_auth: anonymous: @@ -58,13 +59,14 @@ grafana_auth: github: enabled: "true" allow_sign_up: "true" - client_id: "{{ grafana_auth__github_client_id }}" - client_secret: "{{ grafana_auth__github_client_secret }}" + client_id: "{{ vault_grafana_auth__github_client_id }}" + client_secret: "{{ vault_grafana_auth__github_client_secret }}" scopes: "user:email,read:org" auth_url: "https://github.com/login/oauth/authorize" token_url: "https://github.com/login/oauth/access_token" api_url: "https://api.github.com/user" allowed_organisations: "usegalaxy.eu galaxyproject" +grafana_auth_admin_password: "{{ vault_grafana_auth_admin_password }}" grafana_image_storage: provider: local @@ -191,9 +193,9 @@ telegraf_plugins_extra: #galaxy_test_url: https://usegalaxy.eu #galaxy_test_user: - #api_key: "{{ galaxy_test_user__api_key }}" + #api_key: "{{ vault_galaxy_test_user__api_key }}" #username: bot@usegalaxy.eu - #password: "{{ galaxy_test_user__password }}" + #password: "{{ vault_galaxy_test_user__password }}" #handlers: #- "handler0" #- "handler1" @@ -242,6 +244,9 @@ galaxy_nagios_urls: # Grafana Gitter Bridge ggb_create_user: true ggb_create_group: true +bridge_token: "{{ vault_grafana_gitter_bridge_token }}" +gitter_auth_token: "{{ vault_grafana_gitter_bridge_auth_token }}" +gitter_room_id: "{{ vault_grafana_gitter_room_id }}" # Grafana Matrix Forwarder grafana_matrix_forwarder_version: "0.6.0" @@ -249,4 +254,6 @@ grafana_matrix_forwarder_user: centos grafana_matrix_forwarder_group: centos grafana_matrix_forwarder_homeserver: https://matrix-client.matrix.org grafana_matrix_forwarder_port: 6000 +grafana_matrix_forwarder_username: "{{ vault_grafana_matrix_forwarder_username }}" +grafana_matrix_forwarder_password: "{{ vault_grafana_matrix_forwarder_password }}" grafana_matrix_forwarder_resolve_mode: reaction diff --git a/group_vars/grafana/vault.yml b/group_vars/grafana/vault.yml new file mode 100644 index 000000000..a93fb4435 --- /dev/null +++ b/group_vars/grafana/vault.yml @@ -0,0 +1,45 @@ +$ANSIBLE_VAULT;1.1;AES256 +39343831343338376266646363366538353237663739613935326238663230663964303738343936 +6230383739373939653363396266656135353338656265300a393934656132343233303361306262 +32616637656232333736333930353633393931666665636337326232306563303166653864343730 +3231363731623736610a636235666461633663306337353533613534333566306539666261383161 +32653663336131656363386632333739353237303138343866336337323066313962393238306438 +33326434386264663830663734326466613561343132666538623636303431626133653265393030 +33393962353032666263343566313236626138353835646262353662373338613731373563333063 +64633036373837666262616564343533623666366433313163666362663865663062373235636137 +38616631333632393662386535366264313934666664616164633430353865393765656236393332 +31616330393438333062396636656563343333313636623833356131656135383935346561393939 +61376539633164636561616165343865353636366166613536383036363630653362306435306165 +35653965346363383865343633303739346339336138343735613536316363623631316433633662 +37643265323735626234653538656532626336366230396166343039656635336633633730316463 +30323237346231333663323061356131646339343961336164636635393133386530376239303437 +61303531646433316562373863656362316139306237646339333439316235303934363031323164 +64303035343031353739323864623963356363393633346563373662373563626531633032666531 +31613730663036313431373738656430376337313930656163383437666133356466623065363264 +39373736343862653666323537323137326331386334303139343964373331353134613238303839 +62326437323633383036613038333038633139653264313464623263316536326539663933396331 +61353738366237353931393135663633303034343930643765316635663833323630656137366639 +38623831346330363837306338343938643735633130623437623032383339303561636631353333 +65343730633535316430663334323031303864383834643830663632646366356338613330313334 +65646539643633656131303265396462393462636333653230353466393964643031313033616331 +34626562353638333839616464323432326664373562356131633638353337383761393930366463 +32343735616334366637343535623037373231643538633430323130626332373537376265343666 +32333138326534333266356164393164366563666632346461346639633964643632643864376663 +30343332323230376530636561373666613163316332396438636234316665303766396432323635 +37393161386265393639653532666237616165616662303536373061383166633031336330636234 +32663031636138353266653033323030666635316133356161623934353661383638643963656234 +65393333343532623866643064306363653161643032646262363037626239633635343830383133 +62303761633830303733623661613532663633303431626138656264306663353563633863333938 +65396430633465386130383630333963313438666335323834616566323366386430356435323765 +36633863323337616639373133653436333838653461633864303130653365643632376533386263 +34383933303734366131373665386362626236663063616564383461643438393237623133303035 +31616232343536373438316234636332333566346263336431643936653037613837363235336564 +30363130636539326566633634383164353538383033333436633639303533663361623262633063 +64353663373965613963666334666166346234636461656166663863613733303061646664643631 +64653562353738323935303737306164386332343062616462373133303266376466373830616539 +63613639323631653461616334663130346535636436643166353331333832386266363531363765 +64653364653339653565613738613631383738346566316631613365656666396363326362306563 +38303735386566643163353661623865323934646363303336343438366464303837633966393164 +33323866393132303037613163356335366262363664333435633139376130346562373661613536 +38633561343931393061363830623935343534643062643963353762633665616661633763663434 +66386237656138383261 diff --git a/secret_group_vars/all.yml b/secret_group_vars/all.yml index e0a223583..f54301c11 100644 --- a/secret_group_vars/all.yml +++ b/secret_group_vars/all.yml @@ -1,297 +1,264 @@ $ANSIBLE_VAULT;1.1;AES256 -35383935623535336433363532613939646338663433393063356264343437626364653164323339 -6530316261343034633764663163623863313061653666610a633831616538386564653337386335 -65633330613137633261653465383533636537663763616163623961353333626463343834333135 -3964396331343866320a306664656137646236376139386133613533626566343264633735336165 -62323664303935393031646661393930663730646633306635396463613037366332626632333730 -36613263333037336232393763656133626136373064653765323431613333356133303133383638 -36643965366336626261363034666330653632393733333233616439303566343663323631613533 -64613234353663303764313830646138363438653233666630333666373739666338656562356333 -64303866363562633831663830306132363062643864393438343861626362623739353763343065 -38376334323830623865303830386437643166373530353635636334363964303963303030346636 -31373962613132656436363539383462363433653636303038336132316435326538636539323363 -34326337616638383231636330313766613932366630653730323439666130616238623132333630 -36303335353262346330353763653638326436393538623963376137393866303939666238616532 -35653734346130363731333834663938663535353332363535343832663730306565323439396662 -35613462633031636436656535623038333235616530313066343031633133356163373263366238 -65383432393663633765643130626635376632623765396438396632303530353162353863383861 -61383330613639656638333763636436656365303738323038613862376432613530623138313039 -66633966333337633230353736623465643062323463333338643439373236616337316338313364 -37363233363934666439383431326566313962363638353833333835626638643239366232663331 -61613838366537616563663161336432616634346361643461376131383233313534353663363939 -32396664316231373465353830303136316465663438663763363431366332313736306365313332 -36353030643466653934306333353465393432613365633735636565626431633537323764646462 -65366261653332356130366463393263396330633964376263643666396231663733306131366465 -31313835373861663962623532356662333339636636396335656434356561323631316365326432 -31623033346265646162333830343661313039646531326233643364366564326630336331353036 -64653262396631376339383334303733656331333733346163396165356163646435396635623931 -37623439393965383663336232646361356261623564616664343064346131313732393130613036 -64663862633636313938313633636334366266623838336338636533383266313665313636666233 -32373263333138366232376532626563306230303863646436313862666262323961613563653031 -65663137313933663638316439353264663366333938633363636339623635383336363333396138 -39333064306665353965346465323038356562643737636263323235326164306261646263343364 -37313262336434303831636464356166646432386431363332313539646334316436613030653232 -35303063383839323363303838336361336139343463396365376166313533626238613132636662 -30663463316365666138346431313561373065396638626338323866626338613031663635323338 -35633433663438636136393936396162326363643664376531326662653939646130326639363630 -66303461623339323861663664333636393962343032666436373936346337666132663161383733 -61303930363261633134623138316135646266656236333166353339626438306433346364643939 -35613435393136326633326236383865626232396339653763653635663933313734343631623933 -66623531393532653961613232386563313261613838346430373037383264343036323363623732 -38393839646432336538313538303665333435356337303431633366386639626330643639346433 -62303236393463613733326664623236323932616533653839353535646464336435636134396630 -64653735343365353066373636643236326139383163373136616565306531373132383161333637 -64616136643063353661653662343135393635636232366431373535363565376465386433613465 -30646538386664316666393066373931633264333134303064633737613632313134656262383063 -37323534383439343635313536616235323033653136343766656333646231363738396263303637 -62656439666261656662656439316131326166643635366530306237626230323764326166643633 -62326335646166353234623334323030383831356334323937326663333863616132656333646162 -38376132633563333764376665313863343433646531623039323633316330383065393934313732 -64303836313433373866363864613334303633323234663134323732366566663934366365613835 -32623565623138343937656563396564646437333961383934343662363336363534363430363832 -36376461333237616530383831353864393332323330336566326632616439613664303561626532 -62383237373663353463633238613433616336383233336139333334363833346263326234643264 -63313637633765623639396561653939373538663266653139353661623333386466643839646566 -64313434376466353136623434633835366561393538633565656262326231366532353533613731 -34616634396632646666343136363936393462623234623239333434623233643465643463656535 -35373537376637623664386232353632306236336664303963636639303061396230326431633538 -39623465643730383765656136616165396431393030626139623136333864386231346464646232 -32393462306265366266626239313539633366396236336264333835323139363961643632623764 -66333538636236626438646431383730313963616238333761663863326334656164646539383932 -64666466653839626433313961376265613139666338336630343034386166623536386439326531 -39626337653736396265643934396338306330636430366234643138336564373963656133356438 -66383136616134623864303532376361313164303833343133353139396532656636626330333831 -66336633306661653161646632643037313031636435366233623731323831633339316361366336 -62616664663432386362653761333839646132653466353764386465653866356435663937336133 -63326432623065616163376334663664326332353832313664643537633766633633366234336531 -66393766333134343930656130613532626433393566643134333935383562376337343630653131 -62393261646331326135393366376363386633633532376239626163616165313935333137663465 -61643965323036366533626435326530353839646466666631303734623962386563323631313766 -62323732636539303263393765373862333231613235356335356330313633366638376533366430 -66316232303764356233306635373437633339666231646135366133623234306239366434613266 -39326232623562376639303832346464393235336634313736386630323534383266313838323365 -61363531316435316632333431303333376265623736326230633939353033646130343639663133 -34633561306432336332306262303934633233323130616134376433396636303037616561633832 -64366534636166663330653034663631333365373065393631646133376664396561323265396639 -35373166326334353237663363613934653232326238363865616365306465633139303732393730 -34666165313132623336343833376365643862353762633166383332343734373833313862633866 -30306339666630396138663264383661316365376263633466306665363962626365346336393034 -66633263383032643936346338313765366461353333353430333538343665323066633337613039 -66666137323333353266336335333430346135356232363531383563356666336332616661393364 -61396663663165353332643330323965393464353239316363393539656230333830366639613635 -36363362323466363637363039393563306262363730336431313238636665313164656266323662 -30323832386434643934356163373736663533636363656465393964303936636233393537346234 -37383533383338363463633066313163643836303266363966356335653637346239333639323336 -63306139643861623365323263316661663834316230663839326633396166636563656434653564 -38313338366630653364303739616136633131626437636438303837656637613436313335646536 -61336236336265343866656363313737393934373562326535626365643034636333366436396138 -64393937633531623836383763336666356637343762373061363738366665326265366163653032 -63666564346163326361363836336336343036353064363737353062643435656233363161656536 -35333663343035313034363062313630633165336365343061613262633533373635306366356438 -35376262326633343563343538653363663236636433623561396530346330306235313135626364 -66373538343438306362666539343732613230333464623031323266646534353231356262356434 -63666565616435646462393536653166323236343563613066666635653865313531376435633064 -35663731363762626233353134383637353033366135343035626230323733336361366663363036 -65343262323264633233646535616564336134303230393265323834626532623835303561616437 -31666238613737353665326434383865616134663962343763373432633536393939386439613066 -30643463396166663334646431653333613862363633383532323539663666646262316561336639 -32336662633161653463663132353562376538363865666561383232356636663934376266383235 -38666139356231623063653966613666656363313434343839653833623338323962376163393861 -61376637393262326461633534346137376264323038386263303133613231663630363662623664 -39306432383739636336666532623734393536653835313262313362613335633534626363393063 -33303062373437353733643831363664366564373831336535373239363336383235336136626433 -31383563663630383036343534643538623631393437366162373931386565653435656634626131 -39303166343661363334656664363937323764313339323039353266656163626366373335643434 -38383965353130343363323233316532333862333232393337646461326630393733313339616165 -62373134336131643731633433336633643031326432303531663231316631363138373261643063 -39623963343365326538356162336265666238396366356336623132656366616535363731353837 -66653133613535653431623331336332316235346262643535623631366363626532306331373365 -34313065303837653036666631346466363436613636376634613661626335646135363963636434 -37336338633139666562636230336339386262393563623431383363343636333639313530343334 -32623830306265643635656464393237326263623630373938386262646266336363653635656131 -36373162646665663865613030303661356161376461333462646335366232653961336139376463 -32653366393831386263623031363134666430393236393732363066376239393433613938393466 -66646164626438623061653663323234323061616636626436303065326338313636656564373539 -33336461346338616661646262366530396266383864306335396533656332356137623666353331 -30313864643630396138373038346535336534323966396664363664393331376666336164623964 -64326666353066346137626337376639653530343734373939643964323734326365343564323239 -62326339386365363634613630363864323638643830623032626363303632303234633238633834 -35326332363535336530623935633164613563346630356431333933376637386165343262663039 -36316665653661336438663631373766656239613531633134386435323634626436633330323565 -32323263373437353364656538643732396666666161316336333364353831613839306661616338 -39613661666261626436626165363265386235393630306163346437373965383731653134633730 -64323261326536623231396330623661626330353830643238636361616363326263363031643137 -62656530306539636261623134333066303638353064646465396233363330636339383336656136 -33323237383661306538336633316134316630343566643533313330663031306432393133653563 -36343839633834313530663939366230656339666136326664366233343331303666336564366464 -30663832353962336534313766336662333363396131623538313631346233303336623833636631 -34653966386637363933393331366139643036643339316430363262383461633831623466313538 -32623039336165376431626262343833323637343334316238353464363239346164363163616365 -66646566323636643731363736666637386339303433613234646233623162333731356566356239 -36383062343136353031643464633433363034613232633731353865386637343337343037623635 -30326130343733306236633266323430626563323163613265626565656131366364313430356537 -63643534613666393737333064376430343639303733316533626637383832666561336135306634 -31666165643165663566643066383530626337353333306639376637313663316462323563666532 -30343435313532363563623033343635343863633931373933663739323734386338313765613039 -65346634333663303064646232643361616132646664656337653464636263663735616265616237 -66383732643964616662663039663839353232616236613264636634343934363037353134306635 -64323832306135383366336437363462616434653431336637303166663464333138666236626330 -33376237623633356130303130343637376130303962373338306638306166643132616234316630 -61316331376563623263613336383731336136353036303833643037343338323936343062636436 -63346665333931356332333032353730343736663532643362343863623933396365616665646163 -38393434346664666632393531393930323630383833626365323636383430643339393362663135 -36313663306163323363646438653366306164363665363431643139366438376136313833653134 -64646334376136393364626162646466633266373936656132383635666361353838353163613737 -62346631353836353430333162663130393965666363313561366264613533643266323832363038 -34626264343235336537386163626334306438393838316433616235616664346531303561393633 -62316261326563356334386534393665323735326563396430353233383564646563656566313635 -63313739616665633438653033333035393836303561316231323537363065663030383538663430 -63376262346539343761383961393939613564653634323838383138376430613338383332353262 -38643562313061363732353033336232393234636339656666303361323231653138616332343833 -37646638356432326664313764626234363733363466363139653061386132396362303534643231 -36346535633838373038363836353833396432636134623033616666663266303533666164386530 -32626262373938623366356235666364363135373462363231306137346466303133643135386234 -38316233383865353365363265373337393732663432326264376534626430346365613135396333 -38653161643030643037636330363231666436323535313166353639663764366534613334666364 -64323234303336653564343434613136353631356236626334303131303333333666363335653664 -61656436323931666434643838653261656465366164323638366237636162366662316461653238 -34383663306331616437666261636465326233306135343432646639613032303366306234336130 -66333534646139306461333439363966386165613736613632383139393631306662666533326362 -62363438623132333037336665653238323964316338323539323732306334396462363631303165 -32393038613938343366363432306439363839336261653861386634303664663330333065626335 -36383038313062343334326363653762616364363036633061366637326462626639376237326638 -66326235313039646663643239623539343538316133306461646639353464323631386538363839 -61396265353137313766663065386437376136643961663761343466306435326636313736353266 -65633962313334353632373364326133303432653761336666623135346564383361386465346235 -63386266663931303962386132323561336632663334616661353139366133306333623537313035 -61353061373237386333623138653636656165646238633939356138613930346564623966343763 -36346337383839303463386336633262333031356263613234353533363562373333303935363630 -37663766353237313266633236303765616531643362613266393666636462306164656361613166 -38646337373666313930623061653130636430323366623934333736656562346333623061326335 -63353632343763363462393361616265663636316130613065616164313663306538333834653566 -39303666396233643938656562346131643062366164393533623666333236343733663064646166 -31623336393163346133623237306538333662656434333662656339656664643234306638323761 -34313861643234393435663766616130353862623061653562613266373965376331633030633233 -66633333646134636231323066363766643562373363626265333164313161616237393231636465 -66623465643664663766383431666164303633333234356538313664343133343732336261333538 -34383631383330373633383765313464353538353739653262653836636533656361373661613061 -33613831313430646161613135626237396235393433376232376431656437326633613063616536 -62643030363664653064336366653062383864323436666139643133663035343339666662373835 -33346630653933326333323065353236636237303366623034376662323332383766363035376633 -64316435613330643333333636633838313364346561613930336334656131316233613231323430 -61643766636566323132366561633761346336623366373138316237323833376464396137633865 -34373962653935313864643262336538363338663263623937356166343061356465383938353534 -35343863326132393636313365623763306438323738383365356437356337366662303036316430 -32653665373462613863643964306332666665386533383433303764383635363537333963373937 -38333539323166323332373434613861383134373935333037373963626130346532313733366132 -39396239626136363838353663646130313164353437623933383063353061633735313731613338 -31643732346131313631633036333362376431623434396364666236646461336362326563346130 -65346564316665313865323530353037626137333430633764346665313565363766376335643133 -66646536626561326436363661303939356461306534613135393863316438343765333638363636 -39623435303462366463356539333465633331373730663438343462313235333934353433663335 -64616135653036373934303666306332303766336431306334633636363463613337333839656664 -61313830633636363164613463626366626433303932326362383066313830613137343635656636 -66376535663761616634386630303137386463316661646135633731626133643262626534383438 -65323464303934373839313461656233376630393532313130613165643436363138383835366562 -37303333396331663032623466643038656439633531636435653739333665376137653833633637 -61303566303732616261636634383663363565383233373739653933376135306134306435306634 -33656363303739343235373436303437633561653339353634306266613265623365303562306531 -36343464613262323430363063663338343666343238346662306630633265386537366437393336 -35666263656161313039626131323761646439306235316637636263306337393238323737376463 -62306633353235303465636336643730666266333032373561376335653363323863313233333737 -64373864376533313462343535396134396239363464316639363738366461663034316263633832 -61613030363866653261336337373535336261663835356234386462643731643231386561396264 -65303234643432326533346234393435353766383861346566646666623262366639623731323766 -31663734633130366165626466666530653837353135336339373065306339613839313265353461 -37366430623734366266363337643833313465613633343761373930393062396430336533613934 -65383135316463646564623431393966346564366538383662663633306130353130326235626138 -31383262363366373639316436653230356331626330363832653164376662303665633430306263 -33373436336333366361656334663266613432346438633734306661386235636330666435376565 -34343133323237386630386466303264356664333738323033613331656362643733323131353964 -38303564396631313163343662333737396266343639343839393530336439386436356163363666 -61623432323362363562346637363633343362313130613835336364633066396162646562633335 -63306237376538346361663539653731363536386631613166616361323530616664306362383966 -33623235626466326162353637306235316564393731623531373338646465353064313262313238 -31343861346431616266613939326231383763646463366131323031396438633938356666383638 -64313732633533353630643733643061613262313530663032373237343439353635333732613263 -39636661326162643165343166306339333933356538346534626438376137373864663966666661 -66313065333434333637356438333235363136316530393832663435663336663262326430383665 -37383639396130623936343964336132356235313563376235626336623064643466616232376564 -61653736333961346265323935303066633632626530313837343936303235303862653836346137 -36376631613335356134653131626165636634366263666237666133326264636636643239333466 -32663731613234393262633237333232623539633936366538626566633833386639386362373731 -39303264363334356233333363643964613031613835303930356461613132333462383438323138 -65646632343433643863383337636263323166666430393363353466666336363133303135363062 -31396464613934333139343532376437386333643864316530323633633135663731323662313265 -63306532393035323564323063626530323836336239326231653162623839663263363134616135 -66643735333731333734383363303437656162366135656664333566313161663230313761373837 -36323337363431396436323364323434353366666565353333393436623130333330633464616464 -63623632346336623238373335323936656463303636366230613536633136383037313766643934 -63643565653066643039326336366233623331666463636561343937323232306364323630333462 -39653133393964303734373535663933356461383635663661396563656533656465393631636466 -65393362653634366637366332626539353930396531386532376330313131356233373939643465 -33353562636161356238633433336663323930353933633366616137386639336134376234303763 -37663438343438383832323463653535366430643137656634343335393836386261633131383737 -34646332356263356661323431393733623638623963383432333437616430303332653833633462 -39393532326337373632633330306665663837306539333364313365323365636638626435636431 -63663032313930306565633064643134366266386363343261393330613337326430376164633962 -31633664316331333237633066633731313331353833343336336264363536353037386132346636 -30626537643339633133393661666539313861396137313531636266616430356536376434666236 -36356165393630363635323539363363313637313162663232316334376135386362376436353936 -33346266383939666332323934633731616534373337643636353836616562316136323366356163 -33616262626634373661643432396662303335343864663261613363653338303866306230656136 -37623337386332633430343333313234353337316137646535646531333031303832393738643664 -64326266363430316131636338636361626632303064326131613939366564366164353764363162 -39633362346531323261356436623432343639653364623331323834306363313363353361383362 -62623731366162306162363339613733363633613862316432333564376365623134336333643866 -36346638623432626436346138363639313364313236313133666166646634346339613237303338 -61326563626138653963386663666465326164356133363035366138346330343230336164623333 -32653731646163303465633337383039353836323634633236393935636137623730386432323035 -66643738626239373735616635323034646135373932393666656264326234626330373237393366 -66646234333664343766633135653865623736623830366234626439383361323131663635383832 -32326337653064653235333237373036663363633566623138646133393635303765653166613639 -30376661356336383738336234323436356464646465343032383066623834666466333439643034 -35393865336665623536633266633434303730316461326661323038336339366238353635663135 -33376664333565366435373038336565396261386265363738343138336535306534613461333337 -33653032393665653265356165343231343636616430303639643038333239383933613031303339 -61376632613235363361363162346232363431373265396430373634613866336639313230353539 -64333033353439313732626261646434303734663439396439323465636532306537623261376266 -33343230613634313366313737656538343331336534323262376431623336643335373866653638 -38303735636263376164326564383333353230393262373463363632393166663734333966623131 -33613636383734626364363138373038376461663165363435653736616438353266356533313832 -65623236616239316533326634363630303539663834383862383262626638313534636631616539 -39646239323931393238363461623363643832356261653936333737366632333835396365323363 -32323832326163333430663466623965653838653834633831383961343366343261623663363630 -65636436303665663066303339356535373031623135646636373331646533353230313939353834 -61386332323663646138323862373938653730316135643230646662306561333165336164613065 -39393935303739393439373836363962353865363466363837313263613865666564336632653633 -61633938306632373562393139313238313932336363363831666436643766313761323066636462 -35653437623838633661333332323762663136323334313637663262303461313363303035333061 -62663438663138373837346239313734396563316466303561616433333766303037323934313562 -30306661613465383336373938316266356137386565616562353363326439366639373031303336 -61323265363736386633646233623364396233653531636364366232656166616130656564353736 -61616366343766366435303033663331313539313964333465663232313033383365653363613732 -64336439333332383534373662373630323539653664363762313538356166353766336634363662 -33633238653766663936373137663838663434656136343332363436343231313364666135366461 -66616437663230646539623037356135373935316236636430643138323332323264383239626232 -34656266626463663433633931653832303434346632313662613263363230353764633334646263 -33353938313664613536356531363565323539386331396262356132353132373038363337656639 -38663438323435656137396233656663396238356565653366373136356361633331376130633931 -65616362343930393866303135643535623731316634363634656266373431356139383230353364 -61646637326139316163633462373435336131643364393436633538616135316335616237373531 -64363336323237363839313430656663373338623731303539313230623333323066313433323236 -37616662363437356466303562396535656662643236623165626465333035633565343236393066 -30346637303663643533313932643332626162346561366232663337626564313637643636363931 -32633865323361623933643536393030346635373066353838313433633339363236626131383961 -38616139643833616565313938613232306538343433343234363534623965343534636661346662 -61363963386164666566326135313761303231333630396264643765623932306234383465666230 -65343163393638333631613034363532653235343531626439663765643361353265373164363838 -35623762353638613239663639383163653137613361663062663532306337333561636234653730 -34343837363936313639623832626436633562383533623239616535643932353137633361323435 -63643563643963393965643138353735656665363061643133346161653831613337353866663836 -63353535666362343231623331313839393930633761383866663365666430616233663331663532 -37396665363439343764366264383234316665656266303964343538353934313238653734353931 -30396363373937306264393837326536366535666462623531356365356230666238643633313965 -39356438313534356231656633393136303833313733393534313131353532663564383930333963 -65643636663033613363626266323138393434633036663937663539656265373966306533643732 -35396633363531616439 +36333863363061356265316438363432323661393364626232363936366136653434666438663861 +6530653330313061346433623730373163303431336131380a633465343430353365386339643363 +30636165323738326663316232613338333534663134656233383136653065346237316565356234 +3366646632346265660a393664653264306561323536633530356335316135396463656566366364 +39626263303839383634646163363662316537303739336433343036313739346634663135633361 +65356461386433383166663062306239313835643163346230626465666638313537336461616639 +65653666653166373433343136633963616666623366346538363231663138323538643731646464 +62343636376662323766643130623239613661386138303139636361323164666537633265323337 +62323661656536626334363432343337386532623030316436366263366239303631363234383136 +66613735666431323266646565336365396537313133383266356430663662613732386232316338 +39613163376630636537356366666537663239663237626465313332666465346539633763346265 +32306133343966663334646532656235333064306132663331613036336262323964643538656137 +61303764386434636533633238323066656134386163363734623362666439643663313632636566 +66383238623731323238656461636165633662623733653162623130336663306335323136396137 +31613765303938663635326162343933613137623233376666643862356134316163633337313434 +39623635343665326331613436306334613231303037393163326130346163653263343062306639 +30626661666132393734623232613337366433363465366661343836623731316531366130336437 +32653165316331376265626364623238626335303334623935303534323762323865373831386262 +66303731396365376632336636636338666333303735626165336239363563383966323565313332 +64336463616163373031313461393531323137663934303764343461336363623931346537343166 +62303634316436613135313338336666663462623238616663306162383231663662356231346434 +37636232336139623965623366346162636264313933353761386565336437663138346165386630 +66613839396632363231313464356566396163306162623761623564346431633335336530393332 +35333532343666646337643365623638396132623235646236346632376637366530663564373333 +32613830383835396463663433336465653336336537646437383262366165643631346438666132 +30356465653131346264623835646430323637306131396534636635623934313166323036663039 +64323338353834333365333931353939623530616366303439653864383961336332646233373662 +30396236363464343237363463666630666136353336636565386663623835333339363836353333 +34353666383039356538626335616134626330616266353838626637336439643163626633303732 +39336536363133653230396334356337663831646662663837376263643766393730343633353363 +34373538316433666165323863396635633835613861613737393366643063646163336462366566 +66663533633938366665633066316231663061363734363664646531643336623231396265623832 +65346336616235303464353162633863633235303761343566316130346539356165353264636535 +62343531303666363732366363353036633431313065343736306435353432623466333461643464 +32343935666261326636333339393666616138626361376662383335366566343732616664346438 +33646337666532333037373131623635633537383463376637303966393133306237353732383334 +37633536383237666465323063393430363332643734356633653864393766366363663338323436 +35663166343039613136663465326532653834366563363063366339373830396561653463313464 +32393933306134383361393239363539373765616339623663663039643463393735636635383230 +62646137626164393963353138366262333538386664303731376162393265373566613864373561 +33313531306435313562626334376331623836363863373466633735303437353063356437313830 +35616564373864303461363363633639613264336431393032633537306438356531353334663133 +31333564386632643232333338666166396337656135666662333434386639306236626535383130 +34313034366436666236373465363631636335623530373666636335613633303030363538663464 +62303037356134653966353762313832383530383634333666356538386263336563323439313538 +30656534316361613261613663316237393234666465396463396136303730633235643834336336 +37643037623936333664633735343038323862336665323934393437363964383438306465313338 +66326335663064343935373034653036643961336364323733323664376463373539323633663036 +36393062363039383836346531363963346637616437376536616630663036353436373938623936 +65313931333131356238646336633966363965613234366137386434636563383230356130616564 +62626131356265313261396231343134636133326331316164386434383832373935386666326364 +64626439316230373035366235306636383933656439303837633263353731666164626131313165 +31366166613437303031326337373738336266653166666263626537663064333230653466633336 +66353731333961666364386465363639656636343161306434333736663830356639613438343665 +65353831363737363666643731393330323763346337343963366564633734373434353731326337 +36323638383237303365353066663634343038393864383064346265613066353265323462613737 +66393832313061303637306366333362663438316433343137356238363662326134346630343135 +32396233323962653836396631653738653234306332653833373130363139643636626339346665 +34623966616232633834656263316135366661356530353535353163326339346536323964633830 +63656138633139373737303133393863343162633166346137323461626461393336613938633539 +33636438646263646164336232633732366233326163636337356139313531333763323338656639 +33323166343165336231393566383632353263363339363636323561313038313537383465336433 +66616439373134393230383733326231363137666563386361633830613962306133613838323739 +65316232613432666266376431656534343766363232313239623232303133616663663436623361 +30383564313664663664343831333365353666643830623334383936323339303038663939633037 +32643734636131343063353366346661613133326465336639343630373264653962356433363931 +62353934336161386537396238323461363537323535393931613465653835316165396633313365 +37663365636532636463656139316564643339613465313336333037303361306264363264336631 +38306134393165323335373964393761643930393461376465646130343565666232616662666564 +64646365303837646236623437663933396634343561653863643734633131656430333062303232 +62636666386463356464613536353463643265366138316333373637666433643365653631643939 +30353964623437356364386531366630663136663662396365633063386138646138663862346361 +64373638336339383532323438643735323737343039386439386134303132376532633738306435 +64666462623231353032343134383861323766303138663337373830373537656664623564396635 +66616439653237386134613437353430613335636266633039643865653331633431386233636330 +34383833313035336461383566376136353931393038366162633534323036663764613165303638 +38633864356138326165363064313238353661366439353830376138643133643639366232613164 +36383435353435376132383437643264306665303066656638383031643763613834306438633861 +38323933323964316337326562333630653265643434353835383063623134353763396334353164 +32626633646563353630363530623533323733633562373563613832383934386634613432613261 +66316562346663616534346435343264326362316262333534353665383366623837333036373435 +64353630616462393761383237623362393935633236383235316131323133653531333235343461 +61393338313963656436393839343761636532656663653937343032653838373633386630643064 +38623365636238633831653030386137346531623732336161633063663538326362616664623861 +66363836333462613937646334353535323238626163633336663563616332303639623161346239 +32633436646462303063356139353461626638343936313165353765616535373333646361376461 +32366430393039313764623832386136313431303736643865656163383861353731353134333635 +32333566393536656562366361633862636533333933316462353537363961653539363732643263 +66333131646531343430633634383733396634616237376631356631333565363766356363356461 +34333136303962663662343936643861303362316235303765323133616231356563623333356330 +62396261313166616264353633646332313332646133396363666331303930656435633165663261 +30313066343061316136306338326363343663353232643032633464313466663962326636653931 +33396634646161646535363236626664333162616130633835613839353761643963646165386134 +33383766653261343363376634653039376462623937376536623031356464333435363235313639 +63633532383738306134646331333361316534613163363636313463303734653938616565393231 +61636530643035313866353239373263663836396235306431613364333562333064393533663561 +37313536633233623538323335323838343839313337383565383563326462656266316466346139 +30663235333532616632303064373537303631313265386663373665353961383730653963653836 +61373564653632656132613262643232653836366566343965643039663037633333666236373539 +61643164663563633866326136326237613261313139663163386633363163643165306536633361 +64623432323837363366623539316634653637303632303333626131306236383632376262313330 +62313233336437373536313862303836623064363436623164333762663765373062653262363832 +63333638376262346531386366326361383336613434353439303039666239386537333464646564 +62356539653937383431623539393264656264373662383735613832663936383462383062663265 +36373938373665303434396635653032616436363436656163396262333865313862643934666338 +39313032666439353736336366353835316566636162376236363336396339343632376438373336 +32643361383830636336383638646563336438623764643833333437633565356165313331393432 +39383233346462373538343039616230653230643963633766343138323437363234633762396664 +38663935623436636530313731636238313839663365613865636132323464336533303830646539 +36633565373837393164616663393336316538396136373834666663356136323332626232363861 +34356331356433306133343736663666373734663864343261323833663364303539346339336537 +39653363613936613565366266663064386461623061386466613239663162613139343863626235 +37626231613639316235343533303736623937313032316464623161343236613439393365353437 +30666531363665383031656635323939333933316366376238306131643564663766346634313239 +66623663643430333233623137376332303437316434343337376637336537653462373030373137 +34623263323166343434613039383934323539333462633461313566316135313531663536646464 +64386236353339393833336130326231376239363864346661616664376436306632333638336262 +39323034633438646234313838326131643364386632313730376262653365623061333661326464 +61323663303435343537636231383932336565393630373937376436303432643433303535316237 +37343166636664393535313563623832666666613464373664623535313937326131383433613832 +63343235613862663134616162616662323531613536666637336239343233353264376130336362 +36316530393764623938633031663630633035623733626430366335643062376339613139303633 +66353331663233396639663262376630666636313731623064393964396333373363656532623261 +35646466336537373063333832356262323933376463333766666230663162323537333165393963 +65336366303034353634396630613331633339613563643239346135383561626163346432323735 +30663162373637363764313966633861666233393262653063376331636664373832623439323531 +35336565383339646639333036336133643334646138313434653139636361623035653530373637 +39306638313963366461303866386634616239396661303636356561303365646362393036396133 +30326331356239313234633839386262653631363931396264363566333035663463613430383836 +39306132623338356333613130303637613566633735316563383466633564666664636165356239 +35323834376465636366323033353661623939393266363761396361396437333537643031333661 +64373464653863393839663530323238623061323664633065366432626430366664363837653835 +62323837656331366138323537323861353231333032623530646466613162356664316534376632 +36343238356364316161383562353833346465313930383930663064393763393131366339373366 +66636630353035633165393038633530363435383835653462643739303363646231623931363431 +63303961663630393536386539346364643338633331656564336632636432353534373861396664 +30666465373538323931313534656163343061353664353062333431653634653464336263363465 +63366534353534366565393632333332333463396361653763656163396535616237393532346133 +31346463356330336132373039356366323863316533316466346666643935316263363035666633 +35313665646534393839346463366138353734646437383333613866613934313862333062383764 +37656636343332323933633365346339666130356631373832383732353162643965346631613066 +62306564663166323063663063303261313033636565313934633663643066636161303266373664 +64643764643338353731323136623732666336323232656263306434303365393139663132383561 +31653836643433646537346363613333613965373966333332656333323138383330636535303363 +65633562326363646137396665623830383939316566393562613561333965616135613636373438 +61333038393434613062323763626137383837366630653837393635393639666539346332393532 +62346630346432376432663334313832333633326166333733383266323431643538626131356665 +37386635643539643134376536373061343937633235353063333733303431336630316562373633 +39643661343161666464363332306137633865303435346263653465616137333131383738376563 +32386534386234613761613966393936633335656233616236623963353563646264626230383065 +30303137666165303238623230313534633732653233373832373131386563333430663963383137 +66303031336266656366326332396163396131386339396232623439613966393566353839646461 +61393431326530363739646233383831643365643231393130313234383430303336333763633431 +37356333623963656333653762303232323034616366616230386530306230353136306235383964 +65383636363632653632373631613036323732373233323737366266383631356565393432383135 +36363766663231383961353835633332393735306334393535356361646338326633643134323630 +66383466643436383036396464653866356431613266653535393934393964313061336230326331 +30363739343731643565333536343366613666346461663133336665643935366266393035373136 +33366334316230393838643863656664663465666636653535633031396662666537303364363831 +62623961336466626636363333366332316266333063363862373163613836316364373165306436 +64386330336561353263383130306661366265643662653963393763666132313632336435396639 +66623465626463353863366566653233396563323836373835306636323166326465633933626533 +35336439623132323737356435353032303337383139663731373464313864366631356535633737 +35353664323433623233316434383336636164666561613736303332653639333066306335636664 +39323761623436623138326237386566343132646336663266663331616430393331666638376234 +37623134376265643032646565306533653335663839636161666164383265376334376231623565 +64613865643432306431363261653936373761303262323132316664646264646466393037313937 +30343962313237303864356163613162386230393434303939653634333962363866633033313263 +35376134383934656431323336656465383566353930313234356539653362396535313461623931 +30643735363733363231656337316365366565343139316637363239346332663636303538383036 +31663738346539343361616534376230373062663931313233353962663336333730383233333730 +32663730313537306561643937613366623432633734353464313936363931303062636235316364 +66663037366332333266666632333164363435353364393730313733323237326432383235393466 +35346532653562613463373966356633313463626363663234386363363562373865366430323464 +39313062656466316161373134626164333366623232313062353864356330383137303136376131 +65646466613332643435336563393038623336646164666433313038313535353234303831653366 +38393038313866633130633130626162333431313436316636353264336338323331666566306461 +65356564613830666639393235653863303837643763353538363635343637353662646638613639 +65653035326366373736666665323633376435396466336439623761356335656439623432653161 +33366663383632386331363366383530316134303461666237623034393737343064303031613662 +35306236313531613666316135373931663037366466333463633665623364656333393432643531 +61303363303536333234393639363364623133303561363765636632303932313430313065356236 +63626163656165376230333430613465343039373037316334663335396637376339366263613830 +31373639306561363530356238633265623837663433326436663037633430613933313365343431 +30643530653736653530633831343230626630653966363936633631383931376138373736646437 +30363936323437646661386665386564393865313362623831343539393063313135306532333136 +33666462623537373931373133653336353665303738626261313436666535396333633563346132 +65346536386337333637656661643563643834623335643863646430333861323165643764623237 +36616362363564633865363832326233323566626532656632346138623863343430653835376534 +63616664303963346662626464346265363031646138333936646635396565626161656437313964 +65653833376234336665323266393630383334383631303262393531323639623962373433353033 +32393866636239333832613237366566343235663935616130356639333834666663376264643136 +35393266636565623337383161376461323231383536353438366262323365376362393731313663 +64353065386436663733313439353739616235643466323932633131663135626439643264623764 +30333036616339653335383365393339396630363630393531323830653139306363346165373432 +37626162316338633462356461346434323265636337373632636265356635323336346264623930 +30613335656462663564373338323937323534653530666531343630363435323331663133313762 +33383635343536373432376530623233356133316162323266323865323833623763653561336331 +66346332373739656439613836333734613236316536366565316531663933366464356165393564 +38653436396566313334356339363736343437616230613339613639313236393463663365623931 +66323331323965326634376361663331353937393132393636313134366462613366356335373637 +61303561313532396631336335313334376532356338343632616539383539333039626638306136 +30373662373461333265353565343462623961356639333133353234653563383635366131336463 +32353939333061356231666434663464613430333639303838353531643038333866643838646130 +31313135333166653331343366353365376165623339343337646236346632396265373432633035 +63393539343934353934313030643131386534653164356331646630376233333539323333326263 +61396531386337306530633139636136633163656534346362636530396139633332383363313232 +34653336356330646562373337323138626530663038333132323233323234616262646365323330 +65636134613365636231383730373035393232393635666239653235316562636334316563336266 +32653565393164636366653765316637353332386130623030383261636438646132316434333637 +33383939333439393432636161316634623663623733393936613266303636643739323736366439 +63333238326563346435396662353334393961343832646162316535636138626562323533326233 +62376362313439366432653464646234623561313339303634646635303064393332356361376639 +38313265363836326562396162646565313461393334333433626463356461313339656530303638 +31393765313532356661313931623936343932353734373430386434616561656536396236383937 +31333231366230353039326633633431323563663135333966663532383661363863626336643230 +37303331363339343933356563366233323431643739623831333461623366353464303431383037 +66343832356362336338633031343662643066613836386330353130663435383630646236303661 +64663036366230333662353839323766353935373765343562613438306265396637316530663763 +35336134383135323636333661393730306166653738393339623231303862663534373837346133 +31383763333765306232356164363438303735393564613266306364343236376464313235633866 +37366665363230623932356566346338636135656638643663663035336638333365623232303936 +62666439616464646130306232306330663730623334366532353331326566383337636135646161 +64373831306464356431336133326564666237616531393161353063656238326630626436643935 +37353163623262393466303835663262386631353464323534363637356235373938306436316634 +64306566333239313363613763633766376531626533343137633566336631643531316438613130 +62643164666634613732633066373633303938326166633039623031636239303330323666343361 +31646161653837386261646536656165343638333037613631386539613438346537653938656133 +33646664346464396631346263373237333336316236346239396239386263346634613763306435 +35396536636230306330396364343061376530613037313439346663643635316330666331356366 +36613863623066613266333366326565623838633463353066666536663532646232316263626462 +61656236396336316566303362383835356332353239353732323737623263346664663962383864 +32343833656461366365373639353733613964376534316139376364383039396239376639396632 +66366630663164656566316337633534613732363132663135316165393463393763346134306532 +37616433336535313430306137353531353763306266616536343836353530353533633961656135 +66336364396131653639663863323463616132326633313962323930333837396233326635366433 +32356237633561633861643664393166343932666333383734666235653639333463363935613438 +30613638363062663135626565323765306531376334353038396237316561386363346537646434 +66326663613165616438303834656363373761376434383439393831323835663165306633386563 +39346236306335646561386539343761326530353130616636393361316563353663353635303235 +66643437653933366665613531356165613239373932633332386430646562353131623463333865 +64303136353866363465393664643030326232333561343438346436363530633234353363656563 +38326531323361373730643336343166323565663231363137666238303033316330333534663361 +65663137306432613438346664656130303033356437333936666435373530336166363566353466 +38663630656264656562333930393361636138663162363764306433363562613638626266333365 +65383238643834346436383332343864333239343735656539613961663336663964303535356535 +36386330316233396634383733653234323439373163316461636130616338333035636337353731 +38646263643137623038373131383930343832386361333834346535376164633437656639646137 +63313337663932386537306434633431336439393838653766623661303666613433646337616464 +64383536313662323430356138633661336564666235656435613961353334323830643433356664 +31333830383565343536363961646433633031323134666535313833383131303462366234643764 +30336339613234376634313965653863613231316536336431666333313261356564373730316538 +37643731323965366164313036316134636565366430663165656136353766633336376466396230 +36323861613230663963653764653637653163393963626130626162393737626638343764316438 +36356366396534613966653632386437643264636434663430376335373635633563366538376536 +66323833326661366364373430663634643938653265666666626338303265653366346264316261 +37356262376338363562386265643961363030353031616135663332626236353963333038383637 +63636436643932353562636131626232353561353333306664306165373563313939653265386662 +37383635316333323235343635363264333838633038616566346566333162613662663861363962 +64663738396138616235306166316130363136303939623131313866666261623231303264303636 +64396530346436353737663162616334656639383565363531303331623463653966323530623636 +66363361353366363731643130303532333237306563356436393234663763326139623639303239 +636364616165336530343233383565636562 From e2f4e87bf43a391f7c253f2cfca5f79771c2d121 Mon Sep 17 00:00:00 2001 From: =?UTF-8?q?Jos=C3=A9=20Manuel=20Dom=C3=ADnguez?= Date: Fri, 21 Jun 2024 15:34:41 +0200 Subject: [PATCH 05/11] Import Grafana dashboards instead of provisioning them Grafana dashboards will be imported to Grafana's database and loaded from it rather than provisioned from a folder. --- group_vars/grafana/vars.yml | 2 ++ 1 file changed, 2 insertions(+) diff --git a/group_vars/grafana/vars.yml b/group_vars/grafana/vars.yml index cfcd2d74d..28d7baa75 100644 --- a/group_vars/grafana/vars.yml +++ b/group_vars/grafana/vars.yml @@ -40,6 +40,8 @@ grafana_version: 11.0.0 grafana_address: "127.0.0.1" grafana_url: "https://{{ grafana_domain }}" +grafana_use_provisioning: false + grafana_users: default_theme: "light" From 40585ae42d374ba180c857a0de5fd716e00dd16b Mon Sep 17 00:00:00 2001 From: =?UTF-8?q?Jos=C3=A9=20Manuel=20Dom=C3=ADnguez?= Date: Fri, 21 Jun 2024 15:38:20 +0200 Subject: [PATCH 06/11] Persist Grafana's data to dedicated PostgreSQL database --- group_vars/grafana/vars.yml | 7 +++ group_vars/grafana/vault.yml | 94 +++++++++++++++++++----------------- 2 files changed, 57 insertions(+), 44 deletions(-) diff --git a/group_vars/grafana/vars.yml b/group_vars/grafana/vars.yml index 28d7baa75..43fd193b8 100644 --- a/group_vars/grafana/vars.yml +++ b/group_vars/grafana/vars.yml @@ -52,6 +52,13 @@ grafana_security: cookie_secure: "true" grafana_security_secret_key: "{{ vault_grafana_security_secret_key }}" +grafana_database: + type: postgres + host: sn05.galaxyproject.eu:5432 + name: "{{ vault_grafana_database_name }}" + user: "{{ vault_grafana_database_user }}" + password: "{{ vault_grafana_database_password }}" + grafana_auth: anonymous: enabled: "true" diff --git a/group_vars/grafana/vault.yml b/group_vars/grafana/vault.yml index a93fb4435..a7d76de35 100644 --- a/group_vars/grafana/vault.yml +++ b/group_vars/grafana/vault.yml @@ -1,45 +1,51 @@ $ANSIBLE_VAULT;1.1;AES256 -39343831343338376266646363366538353237663739613935326238663230663964303738343936 -6230383739373939653363396266656135353338656265300a393934656132343233303361306262 -32616637656232333736333930353633393931666665636337326232306563303166653864343730 -3231363731623736610a636235666461633663306337353533613534333566306539666261383161 -32653663336131656363386632333739353237303138343866336337323066313962393238306438 -33326434386264663830663734326466613561343132666538623636303431626133653265393030 -33393962353032666263343566313236626138353835646262353662373338613731373563333063 -64633036373837666262616564343533623666366433313163666362663865663062373235636137 -38616631333632393662386535366264313934666664616164633430353865393765656236393332 -31616330393438333062396636656563343333313636623833356131656135383935346561393939 -61376539633164636561616165343865353636366166613536383036363630653362306435306165 -35653965346363383865343633303739346339336138343735613536316363623631316433633662 -37643265323735626234653538656532626336366230396166343039656635336633633730316463 -30323237346231333663323061356131646339343961336164636635393133386530376239303437 -61303531646433316562373863656362316139306237646339333439316235303934363031323164 -64303035343031353739323864623963356363393633346563373662373563626531633032666531 -31613730663036313431373738656430376337313930656163383437666133356466623065363264 -39373736343862653666323537323137326331386334303139343964373331353134613238303839 -62326437323633383036613038333038633139653264313464623263316536326539663933396331 -61353738366237353931393135663633303034343930643765316635663833323630656137366639 -38623831346330363837306338343938643735633130623437623032383339303561636631353333 -65343730633535316430663334323031303864383834643830663632646366356338613330313334 -65646539643633656131303265396462393462636333653230353466393964643031313033616331 -34626562353638333839616464323432326664373562356131633638353337383761393930366463 -32343735616334366637343535623037373231643538633430323130626332373537376265343666 -32333138326534333266356164393164366563666632346461346639633964643632643864376663 -30343332323230376530636561373666613163316332396438636234316665303766396432323635 -37393161386265393639653532666237616165616662303536373061383166633031336330636234 -32663031636138353266653033323030666635316133356161623934353661383638643963656234 -65393333343532623866643064306363653161643032646262363037626239633635343830383133 -62303761633830303733623661613532663633303431626138656264306663353563633863333938 -65396430633465386130383630333963313438666335323834616566323366386430356435323765 -36633863323337616639373133653436333838653461633864303130653365643632376533386263 -34383933303734366131373665386362626236663063616564383461643438393237623133303035 -31616232343536373438316234636332333566346263336431643936653037613837363235336564 -30363130636539326566633634383164353538383033333436633639303533663361623262633063 -64353663373965613963666334666166346234636461656166663863613733303061646664643631 -64653562353738323935303737306164386332343062616462373133303266376466373830616539 -63613639323631653461616334663130346535636436643166353331333832386266363531363765 -64653364653339653565613738613631383738346566316631613365656666396363326362306563 -38303735386566643163353661623865323934646363303336343438366464303837633966393164 -33323866393132303037613163356335366262363664333435633139376130346562373661613536 -38633561343931393061363830623935343534643062643963353762633665616661633763663434 -66386237656138383261 +36613934353635356239613433626262353136393732346330383338316335656361306332653465 +3864666638366335346431316261643762333531363434350a333061613863353038633938376638 +32653139363938616234626463643734336366666334643031306530353162653937393865303161 +6463356666333862660a303364623139366235633661333864383034393366363036613064396435 +61613031663165613439343934633338383261626531396137626564323862363935666535633637 +32393065386135663566623231333761386434373238363434393930333334633330333366613638 +31326133383065376461653165303533333836323230643264316634626231613436343932383038 +66653562666333346338363736316430613630393563383538373037613533653037633833633832 +39363738646335646232306431626336613738653630306232313361643536356233346330643837 +33376437636637383637656531316238303132376136613536323736333161316334366234383331 +32373431323463363330633966346137626533613633663431656162306436393263376264343062 +36636136656135356666313531346331373461663236663432333166363836636432653836663231 +66306264663931336131383832396631616331306466653362313232346365626236616262646336 +33396235396435393638373666363261316265663431396462313130386561363461666532343265 +31626631623839306338363438656565393830623362653235363964313962663361626664396436 +30636331343835633430633633366162643364643136626161336663393939333539386361663064 +38303363363138623361353866396563336335663965656333353937633235623563363433316637 +64313566386464346434643135303061373361616431396630613934646161646130326132373831 +31363330303132633936353166303635336337626535613139376537386363373537346238636339 +36643039346637356336633738323966346666316164343339633864303331613230323965633463 +38303436336139303663333866363961663862356465616533663563313666646532363835653935 +38653665356231373161613036316537333166373934343365653536653933666336396461656230 +31633330393232626164343365313765303837393164613232626339656234313430643565613465 +37656432393866336465623461356131393966343130326232373639366264313966623733373739 +30393966663931613430636333343537316337666162333537323861303762386261383739656639 +30636564353130666162353037666633656336306337336238353936303135336530343436653134 +65643665366564383264333734636234393562323934633731363961626132306337313335323662 +37353066636161303761316364636164326636333532623966343339323665643438313833316538 +61346163633661356561353335333739393333666162396661623662633461323535383633663538 +30303364346466393165626264303331313730336433306233356532643533373266333338336534 +36313061636665666334356238386131353938363031653662303764376537333635306262383432 +63353034343038653137303564643465626136383135333831663334333362613632303332663536 +36633961393862313864363262353866353733643735326131303563386563303236353262646633 +37326236333466643834636633663630646264643265653263653330346638653663343566313264 +35626631326231386265333763316532313439636339386633363535626233633830636661613965 +30646337343430376563313665386431613034333734383231363134393132643938623931666365 +61303635653062343664653135323934323564303933343037383632363231336533323038333666 +34393438326635643837366232663362313536633634323962663637366630313438336131623135 +35646662393431336538376637363962393266336664383265343034653662623161336166343366 +33346262666138386630656331613331666539343865303936613138343537633666613861616139 +61663533383066323137323161376464336663373131303566373734363238336565623665316165 +32656465336333363161356164663734656362663135666237633364306339313537363032303435 +36336130616330343838663431376561343562393438313134616133343237643363396532353338 +36343266326462313336396461353033643838613438366637633837653638336237626633356339 +32306431663336383461646236636433623639363732353838356431353832663434343566326564 +64313836393139323038616435343266313261373833663034633733316161343739326531393437 +66323961383262636333616363373565393837623330303630383132373338383066383764666365 +61366165666263396263613462646535643031663863323764613139623630653231636239386634 +31663463353835373561653964346434346662373661646465633339323238653861666332663036 +3964356164653164626236376335613430643562666639323136 From 001aed8aa065b63592dbd8889a58ebe563a3c769 Mon Sep 17 00:00:00 2001 From: =?UTF-8?q?Jos=C3=A9=20Manuel=20Dom=C3=ADnguez?= Date: Wed, 3 Jul 2024 12:21:02 +0200 Subject: [PATCH 07/11] Use useGalaxy.eu's fork of the `grafana.grafana` collection --- requirements.yaml | 6 +++--- 1 file changed, 3 insertions(+), 3 deletions(-) diff --git a/requirements.yaml b/requirements.yaml index 3db741956..e14e6e010 100644 --- a/requirements.yaml +++ b/requirements.yaml @@ -19,9 +19,9 @@ collections: # Therefore, they have to be included in this file. @kysrpex opened an issue on the repository of the Grafana Ansible collection # https://github.com/grafana/grafana-ansible-collection/issues/222 # notifying the developers of this issue. - version: 5.2.0 - source: https://galaxy.ansible.com - type: galaxy + version: cc9f61c0ae30c12eecf2af4696d95a84ea4565e1 # (from branch `main`) + source: https://github.com/usegalaxy-eu/ansible-grafana-collection-grafana.git + type: git # - name: community.general # required by `grafana.grafana` (already specified above) # source: https://github.com/ansible-collections/community.general.git # version: 9.0.1 From e8590368ad46483947668f02306b91d854627f56 Mon Sep 17 00:00:00 2001 From: =?UTF-8?q?Jos=C3=A9=20Manuel=20Dom=C3=ADnguez?= Date: Wed, 3 Jul 2024 12:23:45 +0200 Subject: [PATCH 08/11] Enter datasource passwords correctly --- group_vars/grafana/vars.yml | 15 +++++---------- 1 file changed, 5 insertions(+), 10 deletions(-) diff --git a/group_vars/grafana/vars.yml b/group_vars/grafana/vars.yml index 43fd193b8..873acc991 100644 --- a/group_vars/grafana/vars.yml +++ b/group_vars/grafana/vars.yml @@ -120,8 +120,7 @@ grafana_datasources: editable: false database: galaxy user: "{{ influxdb.grafana.username }}" - secureJsonData: - password: "{{ influxdb.grafana.password }}" + password: "{{ influxdb.grafana.password }}" - name: Galaxy Historical type: influxdb access: proxy @@ -130,8 +129,7 @@ grafana_datasources: editable: false database: galaxy_stats user: "{{ influxdb.grafana.username }}" - secureJsonData: - password: "{{ influxdb.grafana.password }}" + password: "{{ influxdb.grafana.password }}" - name: GRT Tool Usage type: influxdb access: proxy @@ -140,8 +138,7 @@ grafana_datasources: editable: false database: grt user: "{{ influxdb.grafana.username }}" - secureJsonData: - password: "{{ influxdb.grafana.password }}" + password: "{{ influxdb.grafana.password }}" - name: InfluxDB - internal type: influxdb access: proxy @@ -150,8 +147,7 @@ grafana_datasources: editable: false database: _internal user: "{{ influxdb.grafana.username }}" - secureJsonData: - password: "{{ influxdb.grafana.password }}" + password: "{{ influxdb.grafana.password }}" - name: Notifications type: influxdb access: proxy @@ -160,8 +156,7 @@ grafana_datasources: editable: false database: notifications user: "{{ influxdb.grafana.username }}" - secureJsonData: - password: "{{ influxdb.grafana.password }}" + password: "{{ influxdb.grafana.password }}" hxr_monitor_ssl_expiry: # A couple of usegalaxy.eu subdomains. From bbe09a8ee1a8965572482800d17dd0bbe0fad5f1 Mon Sep 17 00:00:00 2001 From: =?UTF-8?q?Jos=C3=A9=20Manuel=20Dom=C3=ADnguez?= Date: Wed, 3 Jul 2024 12:25:54 +0200 Subject: [PATCH 09/11] Enter datasource uids Datasource uids must be provided so that the imported dashboards can reference them --- group_vars/grafana/vars.yml | 5 +++++ 1 file changed, 5 insertions(+) diff --git a/group_vars/grafana/vars.yml b/group_vars/grafana/vars.yml index 873acc991..80bae14d9 100644 --- a/group_vars/grafana/vars.yml +++ b/group_vars/grafana/vars.yml @@ -121,6 +121,7 @@ grafana_datasources: database: galaxy user: "{{ influxdb.grafana.username }}" password: "{{ influxdb.grafana.password }}" + uid: P9B81C0353945995B - name: Galaxy Historical type: influxdb access: proxy @@ -130,6 +131,7 @@ grafana_datasources: database: galaxy_stats user: "{{ influxdb.grafana.username }}" password: "{{ influxdb.grafana.password }}" + uid: PEBD82B4560F292BD - name: GRT Tool Usage type: influxdb access: proxy @@ -139,6 +141,7 @@ grafana_datasources: database: grt user: "{{ influxdb.grafana.username }}" password: "{{ influxdb.grafana.password }}" + uid: PA4245ACF5D5D4D2B - name: InfluxDB - internal type: influxdb access: proxy @@ -148,6 +151,7 @@ grafana_datasources: database: _internal user: "{{ influxdb.grafana.username }}" password: "{{ influxdb.grafana.password }}" + uid: P97EDD1499B7D2981 - name: Notifications type: influxdb access: proxy @@ -157,6 +161,7 @@ grafana_datasources: database: notifications user: "{{ influxdb.grafana.username }}" password: "{{ influxdb.grafana.password }}" + uid: P788011833A5A0F22 hxr_monitor_ssl_expiry: # A couple of usegalaxy.eu subdomains. From 00e8fc10fda0dd44f542a5ac873c74cb95ae943a Mon Sep 17 00:00:00 2001 From: =?UTF-8?q?Jos=C3=A9=20Manuel=20Dom=C3=ADnguez?= Date: Fri, 12 Jul 2024 13:30:57 +0200 Subject: [PATCH 10/11] Revert "Import Grafana dashboards instead of provisioning them" This reverts commit e2f4e87bf43a391f7c253f2cfca5f79771c2d121. --- group_vars/grafana/vars.yml | 2 -- 1 file changed, 2 deletions(-) diff --git a/group_vars/grafana/vars.yml b/group_vars/grafana/vars.yml index 80bae14d9..7925290fb 100644 --- a/group_vars/grafana/vars.yml +++ b/group_vars/grafana/vars.yml @@ -40,8 +40,6 @@ grafana_version: 11.0.0 grafana_address: "127.0.0.1" grafana_url: "https://{{ grafana_domain }}" -grafana_use_provisioning: false - grafana_users: default_theme: "light" From 8eef755a2e4a357ec6b7d11684230280f1e44660 Mon Sep 17 00:00:00 2001 From: =?UTF-8?q?Jos=C3=A9=20Manuel=20Dom=C3=ADnguez?= Date: Tue, 23 Jul 2024 15:34:07 +0200 Subject: [PATCH 11/11] Explicitly declare `grafana_domain` in group_vars/grafana/vars.yml Workaround for certbot error below. ``` The server will not issue certificates for the identifier :: Invalid identifiers requested :: Cannot issue for "stats-galaxyproject-eu.novalocal": Domain name does not end with a valid public suffix (TLD)", "Ask for help or search for solutions at https://community.letsencrypt.org. See the logfile /var/log/letsencrypt/letsencrypt.log or re-run Certbot with -v for more details. ``` --- group_vars/grafana/vars.yml | 1 + 1 file changed, 1 insertion(+) diff --git a/group_vars/grafana/vars.yml b/group_vars/grafana/vars.yml index 7925290fb..bd8034e94 100644 --- a/group_vars/grafana/vars.yml +++ b/group_vars/grafana/vars.yml @@ -38,6 +38,7 @@ nginx_conf_ssl_certificate_key: /etc/ssl/user/privkey-nginx.pem grafana_version: 11.0.0 grafana_address: "127.0.0.1" +grafana_domain: stats.galaxyproject.eu grafana_url: "https://{{ grafana_domain }}" grafana_users: