是的，在Java中，Set接口的实现类（如HashSet、LinkedHashSet和TreeSet）都会按照元素插入的顺序来存储元素。
HashSet：这是一个无序的集合，它不会保留元素的插入顺序。但是，从Java 8开始，HashSet的实现已经改变，现在它基于HashMap实现，并且在迭代时会按照插入顺序返回元素。尽管如此，HashSet本身仍然是无序的。
LinkedHashSet：这是一个有序的集合，它会保留元素的插入顺序。它通过在链表上维护一个双向链表来实现这一点，这样就可以在O(1)时间复杂度内访问任何元素。
TreeSet：这是一个有序的集合，它会根据元素的自然顺序或者提供的比较器来对元素进行排序。TreeSet内部使用红黑树实现，因此它的时间复杂度为O(log n)。
总之，如果你需要一个保留插入顺序的集合，你应该使用LinkedHashSet或TreeSet。