Kan man nekte å inngå en tariffavtale?

Spørsmål: Jeg er en arbeidsgiver som eier og leder en mindre bedrift med halvindustriell produksjon, men også produksjon med et visst innslag av håndverksmessig arbeid. Jeg har hittil ikke vært organisert, hvilket de fleste ansatte heller ikke har vært. Nylig klarte en organisert ansatt å overtale flere kolleger til å melde seg inn i sitt forbund. Nå har jeg fått krav om tariffavtale fra det samme forbundet. Forbundet er tilsluttet LO. Kan jeg motsette meg å inngå en slik tariffavtale? Hva er i tilfelle konsekvensen, hvis jeg har rett til dette og gjør det?