要利用WordPress主题自定义器创建可定制的侧边栏，可以按照以下步骤进行操作：
1. 登录到WordPress后台，然后点击“外观”>“自定义”选项。
2. 在自定义器中选择“侧边栏”或类似的选项，这取决于您使用的主题。
3. 根据您的需要选择或创建一个侧边栏的布局。您可以选择单个、双列或多列布局，或者根据需要创建自定义布局。
4. 根据您的需要选择或添加小工具。您可以选择显示最新文章、分类目录、标签云、搜索框等小工具来填充侧边栏。
5. 自定义各个小工具的设置。根据您的需要，您可以调整小工具的标题、显示数量、排序方式等。
6. 预览和保存您的更改。在自定义器中可以实时预览您的侧边栏布局和小工具设置，确保它们满足您的要求。一旦满意，点击“保存”按钮以将更改应用到您的网站上。
请注意，这些步骤可能会因您使用的主题而有所不同。某些主题可能会提供更多自定义选项，而另一些主题可能会限制您的选择。因此，根据您使用的主题的具体情况，您可能需要参考主题的文档或联系主题开发者以获得更多帮助。