Group Selection Page HELP Controls Group Data Analysis Group ITDM WP76 DET Vacuum EEE WP78 WP74 FXE SCS SPB MID HED SQS SXP Sample Environment Operation PSPO XO TS Migrated2Zulip
OPERATION-2025 OPERATION-2024 OPERATION-2023 OPERATION-2022 OPERATION-2021 OPERATION-2020 OPERATION-2019 SASE1-2018 SASE1-2017 Experiment data
  OPERATION-2023 logbook, Contact: F.Wolff-Fabris, A.Galler, L.Samoylova, H.Sinn, Page 17 of 24  Not logged in ELOG logo
Entry   SA1 status, posted by Jan Gruenert on 21 Sep 2023, 09:24 
Info by R.Kammering (mail 20.9.23 18h25), related to the SA1 intensity drops during large wavelength scans:

"We found some problematic part in the code of our wavelength control server.
After lengthy debugging session we (Lars F, Olaf H. and me) did find a workaround which seems to have fixed the problem.
Entry   SA1 status, posted by Jan Gruenert on 22 Sep 2023, 00:56 
As agreed beforehand, PRC and SPB/SFX re-assessed the SA1 EPS power limit based on actual performance, required number of pulses and rep rate, at the
agreed SPB photon energy of 7 keV.
The actual lasing performance is on average 1.3 mJ / pulse at the current 7 keV.
Entry   Status, posted by Jan Gruenert on 22 Sep 2023, 17:46 
SASE3 gas supply alarm

SCS called the PRC at 17h04 due to a loud audible alarm in XHEXP1 and contacted also TS-OCD.
It turned out to be the gas supply system for SASE3, an electrical cabinet on the balcony level in the SE-corner of XHEXP1.

Actions taken by PRC:
Entry   Issue, posted by Jan Gruenert on 23 Sep 2023, 07:31 
7:23: RC info:
an electrical power glitch interrupted beam operation, machine down. DESY has power back
and accelerator is recovering beam towards TLD, but no beam possible into TLDs, apparently power issues in Schenefeld.
Entry   Issue, posted by Jan Gruenert on 23 Sep 2023, 08:50 JG_2023-09-23_um_10.28.37.pngJG_2023-09-23_um_10.43.59.pngJG_2023-09-23_um_12.46.35.png
Updates on power glitch

8h50 No feedback from TS-OCD (still not arrived at SASE3 / SCS ?). Phone is busy. Apparently they are busy working on it in the hall (confirmed
at 9h00).
Entry   Status, posted by Jan Gruenert on 23 Sep 2023, 14:49 
Update of power outage aftermath

Achieved by now / status


SASE1

​beam delivery and FXE operating fine (beam back since about 11h30)


SASE3

SA3
getting beam since about 11h30, again difficulties / no beam between 12h30 - 13h34, currently ok.
SASE3 Optical PP laser issues since the morning.
Entry   Issue, posted by Jan Gruenert on 23 Sep 2023, 15:35 
SASE2 :
The unavailability of karabo and possibly missing cooling water is a problem for the tunnel components as well.
XGM in XTD6 : server error since about 11am. We don't know about the status of this device anymore, neither from DOOCS or karabo.
Entry   Attention, posted by Jan Gruenert on 24 Sep 2023, 07:19 
Again: power outage !

As yesterday, at around 7am, power was lost in Schendfeld at SASE3. No beam permission, accelerator in TLD mode.
SASE3 has no power, TS-OCD informed and on the way. BKR informs MKK to check cooling water pumps.
Entry   Status, posted by Jan Gruenert on 24 Sep 2023, 08:05 
8h05 Beam is switched back on in SASE2. HED ready for taking beam.

8h45 BKR is having problems to turn on SA2 beam. Not due to any 

Beam actually went down in all beamlines today at 7:02 (for the records).
Entry   Status, posted by Frederik Wolff-Fabris on 14 Oct 2023, 09:48 
Machine went down overnight (4AM and 6AM) and could not be properly restarted by BKR.

Ongoing tuning is proceeding with RC onsite since 6AM; Instruments are informed and in direct contact to BKR.

Status 09:45AM: SA1 ~3mJ; SA2: ~500uJ; SA3 being restarted
Entry   Issue, posted by Jan Gruenert on 30 Oct 2023, 14:36 
The EPD reading system at the turnstiles of XTD10 entrance were not working this morning.
A necessary ZZ access to XTD10 could not be performed in the morning and had to be postponed.
Resetting the system by Michael Prollius was not sufficient.
Entry   Status, posted by Jan Gruenert on 30 Oct 2023, 23:18 JG_2023-10-30_um_23.15.36.png
At the end of the MON late shift, the tuning status and obtained lasing pulse energies (ATT#1) are as follows:


SA1 at 19 keV : 660 uJ +/- 23 uJ
SA2 at 18 keV : 1073 uJ +/- 55 uJ
SA3 at
1.2 keV : 4330 uJ +/- 122 uJ


SD for a stable 2 min interval, fast XGM train average (INTENSITY.RAW.TRAIN)
Entry   Status, posted by Jan Gruenert on 02 Nov 2023, 19:37 JG_2023-11-02_um_16.35.54.png
Typical delivery status during daytime during the week:


SA1 at 19 keV : 841 uJ +/- 41 uJ
SA2 at 18 keV : 990 uJ +/- 80
uJ
SA3 at 3.0 keV : 2900 uJ +/- 138 uJ


SD for a stable 2 hours long interval, fast XGM train
Entry   Issue, posted by Jan Gruenert on 04 Nov 2023, 08:15 JG_2023-11-04_um_09.34.41.png
Beam down for SASE1/3: SASE1 XTD2 vacuum issue

Vacuum interlock of the SA1 / XTD2 solid attenuator area triggered closing beamline gatevalves.
VAC-OCD is investigating. No beam possible for SA1/SA3 since 7h18.
Entry   Issue, posted by Jan Gruenert on 04 Nov 2023, 13:49 
(Temporary) solution for the vacuum incident in SA1

This morning at 7h18 the vacuum interlock of SA1 closed the beamline valves and thus stopped the XFEL beam delivery for SA1 and
SA3.
Entry   Issue, posted by Jan Gruenert on 05 Nov 2023, 12:18 
Accelerator down 9h23 - 12h

RC / BKR informs (10am), that due to a quadrupole power supply failure in A21 a tunnel access to XTL is required.
After the XTL intervention finished, BKR started beam in SA2 at 12h09.
Entry   Issue, posted by Jan Gruenert on 05 Nov 2023, 12:47 
North branch down : another e-beam magnets problem

RC informs 12h45 that the linac and the south branch are back in operation and performance is as before the issues with the A21 quadrupole.
However, during the access to XTL, additional manget problems occurred in the T4 and SA3 section.
Entry   Status, posted by Jan Gruenert on 05 Nov 2023, 16:14 
Finally, we're completely back in operation,
and the performance is recovered in all beamlines.

See also ttfinfo, e.g. https://ttfinfo.desy.de/XFELelog/show.jsp?dir=/2023/44/05.11_a&pos=2023-11-05T16:01:25
Entry   Issue, posted by Jan Gruenert on 18 Apr 2024, 23:19 
22h55:
HED informs that they have issues with the HED pulse picker in XTD6. It affects the ongoing experiment, but not to an extent that they cannot continue
the beamtime.
Entry   Shift summary, posted by Jörg Hallmann on 11 Feb 2023, 01:09 
sucessfull data taking for user samples

beam loss for ~15 min and a small issue with scannerX of the FSSS (could be fixed without support) but otherwise smooth operation

contact with ITDM since the data collection speed could be too high for the transfer speed from SDD to HDD - should be kept under investigation....
ELOG V3.1.4-7c3fd00