<html>Hi All,<br /><br />Unfortunately, I don't think I'll be able to attend tonight's meeting, sorry!<br />I've had a bit of a cough and funny-feeling throat that's gotten slightly worse over the course of today, so it's probably a good idea that I don't visit the clubroom today.<br /><br />Regarding the Proxmox stuff that I volunteered to research in the last meeting: I haven't done as much reading into this as I'd like as of yet, however:<ul><li>It looks like we can put Ceph into a sort-of "maintenance mode" for the cluster using `ceph osd set noout`, which will prevent OSDs (essentially just physical disks) that are down (e.g. due to a host rebooting/upgrading) from being marked as "out", which would otherwise result in a lot of data re-replicating around the Ceph cluster. See <a href="https://forum.proxmox.com/threads/what-is-the-right-procedure-for-doing-maintenance-and-upgrade-to-pve-and-ceph.56082">https://forum.proxmox.com/threads/what-is-the-right-procedure-for-doing-maintenance-and-upgrade-to-pve-and-ceph.56082</a>.</li><li>With that said, I'd be keen to test (again) whether or not "vmstore-bigssd" goes read-only again if any of the three "hdd" SSDs backing it go down. I will look at doing this tonight or tomorrow, with a separate email accordingly.</li><li>Finally, if I actually manage to progress this a bit more in my free time, I'd be keen to work on upgrading the hosts to a supported version of Proxmox/Debian.</li></ul><br />--<br />Thanks, and kind regards,<br />Dylan Hicks [333]<br /><br />On Monday, April 10, 2023 18:30 AWST, tech-reminder@ucc.asn.au wrote:<br /> <blockquote type="cite" cite="20230410103000.6B9BA20019@motsugo.ucc.gu.uwa.edu.au">Tech/Wheel Meeting Agenda - Tuesday 2023-04-11T18:30<br />====================================================<br />- VENUE: UCC Clubroom<br />- and online at https://meetings.ucc.asn.au/b/tech<br /><br />*Meeting opened HH:MM*<br /><br />## Attendance<br />- Present<br />- Apologies<br />- Absent<br /><br />## Next meeting<br />- Schedule next meeting<br />- *day 2023-mm-ddTHH:MM<br />- ACTION: [???] shall be this meeting's secretary! This entails recording minutes for meeting n (beware mid-meeting glitches) and ensuring meeting n+1 reminders succeed:<br />- Checklist follows:<br />- Clone a new issue from [[https://gitlab.ucc.asn.au/UCC/tech-todo-list/-/issues/32]]<br />- Preferably immediately; then reopen it and assign it to yourself<br />- This issue is to keep track of any async secretarial duties detailed ahead<br />- Type `/clone` into the "Write a comment" box as a "quick action"<br />- Update the title to match today's date<br />- [ ] ACTION: Save and commit the minutes of today's meeting, during the meeting; and at the end<br />- [ ] ACTION: Set and (later) verify reminders of next meeting:<br />- [ ] Promptly update `agenda.next` with the TIME/DATE/VENUE<br />- [ ] Perform initial curation of `agenda.next`, and move any previous or longstanding action items out of it and into GitLab (see Action Items section below)<br />- [ ] Update the crontab: `motsugo# crontab -e`<br />- [ ] Check at T-7days that the notice really went out, fix for T-4days if needed<br />- [ ] Everyone, before next meeting: Curate `agenda.next`, and move any items you think should be tracked as GitLab issues into GitLab issues, as above<br /><br />## Optional items - choose at the start of the meeting<br />- [ ] Ethical guidelines<br />- [ ] Monitoring<br />- [ ] Backups<br />- [ ] Password rotations<br />- [ ] New members<br />- [ ] Quick check of ChangeLog<br />- [ ] Lessons learnt<br /><br />## Current Action Items<br />- ACTION: [333] Research Proxmox Backup Appliance - should fit in well with our existing PVE environment.<br />- ACTION: [MPT] and [BRD] draft an email about IPs.<br />- ACTION: [MPT] organise meeting about Guild Subdomains and drag [GPO] and others along for the future<br />- ACTION: [I2N] will add libcrack/haveibeenpwned API to `ucc-adduser`<br />- ACTION: [MPT] and [BRD] to email UWA IT about unfirewalling firewalled IPs, as they're not blocking anything useful, it's just inconvenient at this point.<br />- ACTION: After O-Day (April), do network shenanigans. (next wheel meeting)<br />- ACTION: [333] and [GPO] to read up on Ceph shenanigans and PVE in-place upgrade documentation.<br /><br /><br /><br />### Boilerplate<br />- Now maintained in GitLab at [[https://gitlab.ucc.asn.au/UCC/tech-todo-list/-/issues/]]<br />- Briefly discuss anything in here that's worth discussing, but don't spend too long rehashing unresolved issues that have already been discussed ;)<br />- Going forward:<br />- New actions: when new ACTION items arise, put them in the minutes once, but add to GitLab<br />- Ongoing actions: don't keep them in the agenda, unless they definitely need to be discussed in the next meeting<br />- Completed actions: mention in the agenda that it's been completed, and and briefly discuss if need be<br /><br />### Action items to discuss<br /><br />## Known Broken Stuff<br />- Debian upgrade kills mailman<br />- Mailman is dead, long live mailman3<br />- We should look into upgrading to mailman3, and look at porting our homebrew patches for mailmail3.<br />- We shouldn't be using things that use python2 now that it is no longer supported either.<br /><br /><br />## Matters arising previously<br /><br /><br />## Extra items (rename/refile as appropriate)<br /><br /><br />*Meeting closed HH:MM*<br /><br /><br />----<br /><br />```<br /># https://demo.hedgedoc.org/Hlsapf47RsqpgIjqLVfMUw<br />cd /home/wheel/docs/meetings<br />HEDGEDOC_SERVER=https://demo.hedgedoc.org /home/wheel/bin/hedgedoc export --md Hlsapf47RsqpgIjqLVfMUw ./$(date +%Y-%m-%d).txt<br />git add ./$(date +%Y-%m-%d).txt<br />git commit -m "Tech meeting minutes $(date +%Y-%m-%d)"<br />```<br /><br /><!-- vim: tabstop=2 softtabstop=2 shiftwidth=2 expandtab<br />--><br /><!-- Local Variables: --><br /><!-- tab-width: 2 --><br /><!-- End: --><br />_______________________________________________<br />List Archives: http://lists.ucc.asn.au/pipermail/tech<br /><br />Unsubscribe here: https://lists.ucc.gu.uwa.edu.au/mailman/options/tech/dylanh333%40ucc.asn.au</blockquote><br /> </html>