Мне кажется, что все не так просто.

Этот термин связан со статистикой и различными областями, где применяются статистические методы. Насколько я понимаю, он вводится в качестве альтернативы статистической значимости для отдельной оценки практического значения результатов в предметной области.

What is substantive significance?
Substantive significance of an association between two variables is concerned with questions such as "how much does that association matter?" or "So what?" In various disciplines, substantive significance can be described as "clinically", or "economically", or "educationally" meaningful variation (Thompson 2004). In other words, substantive significance involves the real-world relevance of the statistical findings in the context of the specific topic under study.
http://www.statlit.org/pdf/2008MillerASA.pdf

Из SAGE Encyclopedia of Social Science Research Methods:
The concept of substantive significance was developed because statistical SIGNIFICANCE TESTS can find that very small effects are significant ...
Substantive significance (also called practical significance) instead focuses on whether an observed relationship, difference, or coefficient is big enough to be considered important.

В русскоязычных материалах похожим значением обладает термин "содержательная значимость". Судя по некоторым источникам (см. выше), также может подойти вариант "практическая значимость".

Вот несколько примеров из различных областей:

Тесты значимости предоставляют информацию о статистической значимости, но не свидетельствуют напрямую ни о политической, или, шире, содержательной значимости, ни о размере эффекта.
https://cyberleninka.ru/article/n/vsyo-obyasnyaetsya-vsem-ne...

Важно, однако, всегда помнить о том, что статистическая значимость результа­тов совершенно отлична от их содержательной значимости! ... Содержательная значимость зависит прежде всего от нашей способности увязать экспериментальную гипотезу с существующими социологическими теориями.
https://pandia.ru/text/78/541/12379.php

Статистическая значимость результата не означает, что он содержательно значим — значим для психологической теории или практики.
https://handbook.mathpsy.com/?page_id=49#5.1.5

P-уровни значимости постоянно неверно истолковывают, а статистическая и практическая значимость — это не одно и то же.
https://kpfu.ru/portal/docs/F_1351474563/znachimaya_problema...

При любой проверке гипотез нужно оценивать размер эффекта — степень отличия нулевой гипотезы отличается от истины, и оценивать его практическую значимость.
http://www.machinelearning.ru/wiki/images/b/b5/Psad_intro.pd...