使用函数。

函数写入
scoreboard objectives add a dummy
scoreboard objectives setdisplay sidebar a
scoreboard players add §4红色 a 1

用指令解决：
/scoreboard objectives add var dummy
/scoreboard objectives setdisplay sidebar var
/scoreboard players add §（颜色代码，自己找） var （数量）

函数包里写指令
scoreboard players add §4红色 a 1
函数包支持§符号
视频教程
https://m.bilibili.com/video/av66530112

参考楼上，附上颜色表

使用函数（function），函数文件内可以输入§字符从而达到彩色效果
1.12.2函数教程：https://www.mcbbs.net/thread-725039-1-1.html

在地图文件/data/functions/里面创建一个文件夹，比如创建SMFX文件夹
再在里面创建一个比如smfx.mcfunction的文件，用NP++类软件打开，
如果你想要彩色名称的计分板输入
scoreboard objectives add SMFX dummy §cR§6a§ei§an§2b§3o§9w
scoreboard objectives setdisplay sidebar SMFX
scoreboard players add @p SMFX 1
进游戏，输入/reload，再输入/function SMFX:smfx即可

§字符颜色对照：https://minecraft-zh.gamepedia.com/%E6%A0%B7%E5%BC%8F%E4%BB%A3%E7%A0%81