Skærbæk har en befolkning på 3.151 og et areal på 3,0 km2. Byen har sit udspring i området omkring Skærbæk Kirke. Hvor Storegade bliver til Jernbanegade, gennemskæres byen af den snorlige Ribevej‑Tøndervej, ad hvilken der er 20 km til Ribe og 26 km til Tønder; ad Åbenråvej til Aabenraa er der 54 km, og Hjemstedvej fører mod vest ud i Ballummarsken. Efter Rømø dæmningens fuldførelse i 1948 er der nord om byen blevet anlagt en omkørsel, Rømøvej, der udgør en hurtig forbindelse fra Østkystens byer, herunder Flensborg, til Rømø. Skærbæk Station ligger for enden af Jernbanegade.