要制作元宵节小灯笼，首先需要准备彩色纸、剪刀、胶水和细绳。

将彩色纸按照要制作的灯笼的大小裁剪成长方形，并将长方形对折成两半。

接着，将对折的部分以及另一面分别向内折一定的距离，形成灯笼的上、下两个口，用胶水粘合。

再在灯笼的四周留出一定间隔，进行多段部分剪裁，形成小窗户。

最后，用细绳做成灯笼吊环，即可完成小灯笼制作。当然，还可以在纸上添加自己的创意，如写上祝福语等，更具个性。