床面に適したキャスターを使っていないことが考えられます。

ナイロンキャスターはカーペット床に、ゴムキャスターはPタイル、コンクリート床などの硬い床に適しています。
ウレタンキャスターは木質のフローリングなどの床の汚れが気になる場合にお選びください。キャスターの交換については、こちらをご参照ください。
また、転がりが悪い場合は、キャスターにゴミ（髪の毛・糸くずなど）が絡まってる場合もありますので、掃除してみてください。