Skip to main content

How to "safely" truncate history tables in Zabbix 6 before enabling timescale.

The script was tested against Zabbix 6.0 and 6.2. I'll add a proper introduction soon.

If you don't fully understand every single line better don't run it in production.



--RECREATING HISTORY TABLES WITH DATA. INSTEAD OF "WHERE FALSE" YOU CAN USE "WHERE CLOCK > X" IF YOU WANT TO PRESERVE SOME DATA


ALTER TABLE history RENAME TO history_big;

CREATE TABLE history as SELECT * FROM history_big where false;


ALTER TABLE history_uint RENAME TO history_uint_big;

CREATE TABLE history_uint as SELECT * FROM history_uint_big where false;


ALTER TABLE history_str RENAME TO history_str_big;

CREATE TABLE history_str as SELECT * FROM history_str_big where false;


ALTER TABLE history_log RENAME TO history_log_big;

CREATE TABLE history_log as SELECT * FROM history_log_big where false;


ALTER TABLE history_text RENAME TO history_text_big;

CREATE TABLE history_text as SELECT * FROM history_text_big where false;


ALTER TABLE history_text RENAME TO history_text_big;

CREATE TABLE history_text as SELECT * FROM history_text_big where false;


ALTER TABLE history_text RENAME TO history_text_big;

CREATE TABLE history_text as SELECT * FROM history_text_big where false;




--ENABLING PRIMARY KEYS. AT THIS POINT YOUR PRIMARY KEYS STOPPED WORKING. TO ENABLE TIMESCALE YOU SHOULD ENABLE PRIMARY KEYS.


ALTER TABLE history RENAME TO history_old;

CREATE TABLE history (

itemid                   bigint                                    NOT NULL,

clock                    integer         DEFAULT '0'               NOT NULL,

value                    DOUBLE PRECISION DEFAULT '0.0000'          NOT NULL,

ns                       integer         DEFAULT '0'               NOT NULL,

PRIMARY KEY (itemid,clock,ns)

);


ALTER TABLE history_uint RENAME TO history_uint_old;

CREATE TABLE history_uint (

itemid                   bigint                                    NOT NULL,

clock                    integer         DEFAULT '0'               NOT NULL,

value                    numeric(20)     DEFAULT '0'               NOT NULL,

ns                       integer         DEFAULT '0'               NOT NULL,

PRIMARY KEY (itemid,clock,ns)

);


ALTER TABLE history_str RENAME TO history_str_old;

CREATE TABLE history_str (

itemid                   bigint                                    NOT NULL,

clock                    integer         DEFAULT '0'               NOT NULL,

value                    varchar(255)    DEFAULT ''                NOT NULL,

ns                       integer         DEFAULT '0'               NOT NULL,

PRIMARY KEY (itemid,clock,ns)

);


ALTER TABLE history_log RENAME TO history_log_old;

CREATE TABLE history_log (

itemid                   bigint                                    NOT NULL,

clock                    integer         DEFAULT '0'               NOT NULL,

timestamp                integer         DEFAULT '0'               NOT NULL,

source                   varchar(64)     DEFAULT ''                NOT NULL,

severity                 integer         DEFAULT '0'               NOT NULL,

value                    text            DEFAULT ''                NOT NULL,

logeventid               integer         DEFAULT '0'               NOT NULL,

ns                       integer         DEFAULT '0'               NOT NULL,

PRIMARY KEY (itemid,clock,ns)

);


ALTER TABLE history_text RENAME TO history_text_old;

CREATE TABLE history_text (

itemid                   bigint                                    NOT NULL,

clock                    integer         DEFAULT '0'               NOT NULL,

value                    text            DEFAULT ''                NOT NULL,

ns                       integer         DEFAULT '0'               NOT NULL,

PRIMARY KEY (itemid,clock,ns)

);


--POPULATING TABLES WITH DATA. IF YOU RECREATED THE TABLES WITHOUT DATA, THIS WILL TAKE SECONDS


INSERT INTO history SELECT * FROM history_old ON CONFLICT (itemid,clock,ns) DO NOTHING;

       

INSERT INTO history_uint SELECT * FROM history_uint_old ON CONFLICT (itemid,clock,ns) DO NOTHING;

       

INSERT INTO history_str SELECT * FROM history_str_old ON CONFLICT (itemid,clock,ns) DO NOTHING;

       

INSERT INTO history_log SELECT * FROM history_log_old ON CONFLICT (itemid,clock,ns) DO NOTHING;

       

INSERT INTO history_text SELECT * FROM history_text_old ON CONFLICT (itemid,clock,ns) DO NOTHING;


--FIXING PERMISSIONS. IN CASE YOU RAN THE SCRIPT AS POSTGRES


ALTER TABLE history OWNER TO zabbix;

ALTER TABLE history_uint OWNER TO zabbix;

ALTER TABLE history_str OWNER TO zabbix;

ALTER TABLE history_log OWNER TO zabbix;

ALTER TABLE history_text OWNER TO zabbix;



At this point you can start zabbix to test if everything went well. If so, you can stop server and frontend again and continue with Timescale setup.


--CREATING EXTENSION / as root


echo "CREATE EXTENSION IF NOT EXISTS timescaledb CASCADE;" | sudo -u postgres psql zabbix



--ENABLING TIMESCALE / as root


cat /usr/share/zabbix-sql-scripts/postgresql/timescaledb.sql | sudo -u zabbix psql zabbix



--DROPPING OLD TEMP TABLES


drop table history_big;

drop table history_uint_big;

drop table history_str_big;

drop table history_log_big;

drop table history_text_big;


drop table history_old;

drop table history_uint_old;

drop table history_str_old;

drop table history_log_old;

drop table history_text_old;


Now you can start server and frontend with your fresh Timescale setup.

Comments

Popular posts from this blog

Consulta de espacio ocupado de logs SQL SERVER

SQLPERF Pese a que en SQL SERVER disponemos de funciones simples que nos devuelven información relevante sobre el uso de la base de datos, muchas veces necesitamos especificar campos específicos sobre una funcion predeterminada. En el ejemplo siguiente, se muestra la consulta equivalente a realizar una de las DMF más usadas: DBCC sqlperf(logspace) La consulta anterior es exactamente igual a la siguiente: SELECT instance_name AS DatabaseName,        [Data File(s) Size (KB)],        [LOG File(s) Size (KB)],        [Log File(s) Used Size (KB)],        [Percent Log Used] FROM (    SELECT *    FROM sys.dm_os_performance_counters    WHERE counter_name IN    (        'Data File(s) Size (KB)',        'Log File(s) Size (KB)',        'Log File(s) Used Size (KB)',        'Per...

Uso de memoria en SQL Server

Configuración de memoria Muchas veces, nos encontramos con que un servidor SQL Server está consumiendo demasiada memoria. Las causas de esto pueden ser muchas; Demasiados usuarios conectados o un exceso de carga de trabajo pueden ser las causantes. Sin embargo, una de las características que mas destacan de SQL Server , es que una vez que le asignamos memoria , la instancia es la encargada de administrarla, me explico. Cuando miramos el administrador de tareas de Windows (Task manager) nos daremos cuenta de que en la pestaña de rendimiento se observa muy poca memoria disponible. Esto no quiere decir que sea esa la memoria utilizada (aunque explícitamente lo diga), debido a que la instancia administra su propia memoria libre dentro de su memoria utilizada. Por ejemplo, si tenemos un servidor con 100GB de memoria RAM, y Task manager nos indica que tenemos 2 GB libres, y además, SQL Server está ocupando 90GB de RAM, tenemos que tomar en cuenta que dentro de esos 90GB ocupados por la i...