Do đó, quyền tự do ngôn luận và biểu đạt có thể không được công nhận là quyền tuyệt đối và những hạn chế chung về tự do ngôn luận liên quan đến hành động phỉ báng, vu khống, sự tục tĩu, khiêu dâm, xúi giục, kích động, ngôn từ gây hấn, thông tin bí mật, vi phạm bản quyền, bí mật thương mại, nhãn dán thực phẩm, thỏa thuận bảo mật thông tin, quyền riêng tư, quyền được lãng quên, an ninh công cộng, và khai man. Các biện minh cho việc này bao gồm nguyên tắc gây hại, được đề xuất bởi John Stuart Mill trong tác phẩm Bàn về Tự do (On Liberty), trong đó có nêu ra rằng: "mục đích duy nhất mà quyền lực có thể được thực thi một cách chính đáng đối với bất kỳ thành viên nào của một cộng đồng văn minh, ngược lại ý chí của anh ta, là nhằm ngăn chặn sự tổn hại cho người khác." [3]

Ý tưởng về "nguyên tắc xúc phạm" cũng được sử dụng trong việc biện minh cho các hạn chế về ngôn luận, theo đó các hình thức biểu đạt được coi là ảnh hưởng xấu đến xã hội có thể bị hạn chế, tùy theo các yếu tố như mức độ, thời lượng, động cơ của người nói và mức độ dễ dàng trong việc tránh được nó.[3] Cùng với sự phát triển của thời đại kỹ thuật số, việc áp dụng tự do ngôn luận càng gây tranh cãi khi ngày càng có nhiều các phương tiện giao tiếp cũng như các hạn chế mới, ví dụ như Dự án Chiếc Khiên Vàng (Golden Shield Project), một sáng kiến từ Bộ Công an Trung Quốc để lọc dữ liệu có nguy cơ gây bất lợi từ nước ngoài.