วิธีหนึ่งที่นิยมใช้ในการทำ panoptic segmentation คือการนำผลลัพธ์จาก semantic segmentation และ instance segmentation มารวมกัน ลองพิจารณาภาพถนนในนิวยอร์กต่อไปนี้

street image

โจทย์คือการแบ่งส่วนภาพแบบ panoptic โดยระบุให้แต่ละแท็กซี่เป็นวัตถุแยกจากกัน พร้อมทั้งแยกแยะพื้นหลังที่เป็นถนนแอสฟัลต์ออกจากอาคาร

ขั้นแรก จะเริ่มด้วยการสร้าง semantic mask โดยใช้ U-Net ที่ผ่านการ pre-trained มาแล้ว ซึ่งเรียกใช้ได้ผ่าน UNet() โมเดลนี้ควรสามารถแยกแยะพื้นหลังทั้งสองประเภทได้ (แต่ยังไม่สามารถแยกแท็กซี่แต่ละคันออกจากกัน)

Semantic Segmentation ด้วย U-Net

Create Your Free Account