Název Skull and Bones pravděpodobně pochází z tradice věšet si na dveře kaple v kampusu, kde se zpočátku klub scházel, lebku a dvě zkřížené kosti na znamení, že si nepřejí být rušeni. Lebka a zkřížené kosti měly původně znamenat řád smrti.