mavenの場合、以下の依存関係を追加することで解決できました。
<dependency> <groupId>org.apache.poi</groupId> <artifactId>poi-ooxml</artifactId> <version>5.2.3</version> <!-- 最新バージョンを使用 --> </dependency>
poi-ooxml-full-5.2.3.jarを依存関係に追加していたので問題ないかと思っていましたが、poi-ooxml-5.2.3.jarを別途追加する必要があったみたいです。