根据熊猫中的列值进行分组和减少

Question

如果标题不清楚，我深表歉意，但是我很难措辞标题。如果我只显示我想做的事，那可能是最好的。

我有一个数据框，其外观如下

基本上，列名和该特定列中的值是相同的。

现在我正尝试通过以下方式减少数据帧：

我尝试按ID分组并按列回填，并删除重复项，但是由于我有大约1000万条记录，因此计算效率不高。如果能为以下问题找到更好的解决方案，我将不胜感激。