所有在中国境内进行互联网信息服务的网站都需要进行备案登记，并获得备案号。
这一制度旨在对互联网信息进行管理和监督，以保障互联网信息的合法、安全和有序。
与之相对，icp许可证是指互联网信息服务提供单位在备案登记后根据需要获得的一种许可证。
icp许可证具有行政管理性质，是对具备备案条件的网站经过书面审查并符合相关法律法规后颁发的证书。
持有icp许可证的网站，可以对外提供经营性的互联网信息服务，比如网站建设、网页设计、游戏平台和在线购物等。
总的来说，icp备案和icp许可证都是对互联网信息进行管理和监督的制度，但备案号是各个网站都需要进行的登记，而icp许可证则是备案登记后经过审核批准获得的证书，是对具备经营性的互联网信息服务提供单位的授权。
同时，备案和许可证的取得都需要符合相关法律法规的要求，以确保互联网信息的合法性和安全性。