السلاسل والتكرار والحشو

sequences = [[2, 3, 99], [4, 99, 99]]
lengths = [2, 1]
for sequence, length in zip(sequences, lengths):
    state = 0
    for t, value in enumerate(sequence):
        if t < length:
            state = state + value
    print(state)

5
4

يمنع قناع تحديث الحالة دخول الحشو غير الصفري إلى الحالة النهائية.

losses = [[1.0, 3.0, 100.0], [2.0, 100.0, 100.0]]
lengths = [2, 1]
numerator = sum(sum(row[:n]) for row, n in zip(losses, lengths))
valid_count = sum(lengths)
print(f"valid-token mean={numerator/valid_count:.1f}")
print(f"example mean={sum(sum(row[:n])/n for row,n in zip(losses,lengths))/2:.1f}")

valid-token mean=2.0
example mean=2.0

يتساوى المتوسطان في هذه القيم فقط؛ ولا يجعل ذلك قاعدتي الوزن قابلتين للاستبدال.