當前位置：首頁 » 數據倉庫 » flyway資料庫遷移
擴展閱讀
提分平台的賬號密碼是什麼 2023-08-31 22:07:10
webinf下怎麼引入js 2023-08-31 21:54:13
堡壘機怎麼打開web 2023-08-31 21:54:11

flyway資料庫遷移

發布時間: 2023-06-01 02:24:55

⑴ flyway中文亂碼怎麼解決

①.js 文件中文顯示亂碼
Javascript文件XX.js編輯保存時有一種編碼方案（如GBK），當打開文件的時候所用的編碼（如UTF-8）和保存時的編碼方案不一致時，則會出現中文顯示亂碼。
解決方案:(1)用編輯器打開瀏覽的時候，選擇和原文件編碼（如GBK）一致的編碼方式查看，則不會出現亂碼;
(2)在eclipse中的package
explorer中選中亂碼的XX.js，右鍵菜單中選擇properties，在Text file
encoding中選擇與XX.js編輯保存時的編碼（如GBK），則可以正常顯示;
②網站頁面中JavaScript中中文欄位亂碼
在eclipse或者編輯器中XX.js中中文顯示正常，在頁面調用XX.js，執行後頁面結果中中文欄位顯示亂碼。
解決方案：
在引用XX.js的頁面上「顯示」加上XX.js文件的編碼方式，使之與XX.js文件的本身手輪的編碼方式（如GBK）保持一致。<scripttype="text/javascript" language="JavaScript" src="/js/XX.js"
charset=「GBK」
</script建議：
(1)在用Eclipse或者Myeclipse新建XX.js，進行編輯時，建議先將Textfile encoding改為UTF-8，然後進橘薯悶行編輯保存。
(2)用文本圓彎文檔或者其他編輯器編輯保存XX.js，建議以UTF-8的編碼方式保存。(3)在引用XX.js的頁面上「顯示」加上XX.js文件的編碼方式UTF-8。<scripttype="text/javascript" language="JavaScript" src="/js/XX.js"

⑵ 如何在單個Boot應用中配置多資料庫

為什麼需要多資料庫？
默認情況下，Spring Boot使用的是單資料庫配置（通過spring.datasource.*配置具體資料庫連接信息）。
對於絕大多數Spring Boot應用，這是符合其使用場景的，因為Spring Boot提倡的是微服務理念，每個應用對應一個單獨的業務領域。但在某些特殊情況下，一個應用對應多個資料庫又是無法避免的，例如實施資料庫分庫後原本單個資料庫變為多個資料庫。本文就結合實際代碼介紹如何在單個Boot應用中配置多資料庫，以及與之相關的Druid，jOOQ，Flyway等數據服務框架的配置改造。
配置示例

DB1，DB2: 兩個示例資料庫
ServiceA, ServiceB: 分別使用DB1和DB2的服務類
連接池Druid
Druid是阿里巴巴開源的資料庫連接池，提供了強大的監控支持，號稱Java語言中最好的連接池。
創建兩個配置類分別注冊對應DB1和DB2的DataSource Bean和TransactionManager Bean。以DB1為例：
Tip: 可以把其中一個配置類中注冊的DataSource Bean和DataSourceTransactionManager Bean加上@Primary註解，作為默認裝配實例。
// DB1
@Configuration
public class Db1Config {

@Bean(initMethod = "init", destroyMethod = "close")
@ConfigurationProperties(prefix = "db.db1")
public DataSource dataSource1() {
return new DruidDataSource();
}

@Bean
public DataSourceTransactionManager transactionManager1() {
DataSourceTransactionManager transactionManager = new DataSourceTransactionManager();
transactionManager.setDataSource(dataSource1());
return transactionManager;
}
}

application.conf中的配置：
# DB1
db.db1.url=jdbc:mysql://127.0.0.1:3306/db1?useUnicode=true&characterEncoding=UTF-8&rewriteBatchedStatements=true
db.db1.username=root
db.db1.password=

ORM框架jOOQ
jOOQ是一個開源ORM框架，最大特點是提供類型安全的流式API，支持代碼生成。
參照Boot自帶的JooqAutoConfiguration，不難寫出如下配置類：
@Configuration
public class JooqConfig {

// DB1
@Bean
public DataSourceConnectionProvider dataSourceConnectionProvider1(
@Qualifier("dataSource1") DataSource dataSource1) {
return new DataSourceConnectionProvider(
new (dataSource1));
}

@Bean
public SpringTransactionProvider transactionProvider1(
@Qualifier("transactionManager1") DataSourceTransactionManager txManager1) {
return new SpringTransactionProvider(txManager1);
}

// DB2
// ...

@Configuration
public static class DslContextConfig {

@Autowired(required = false)
private RecordMapperProvider recordMapperProvider;

@Autowired(required = false)
private Settings settings;

@Autowired(required = false)
private RecordListenerProvider[] recordListenerProviders;

@Autowired
private ExecuteListenerProvider[] executeListenerProviders;

@Autowired(required = false)
private VisitListenerProvider[] visitListenerProviders;

// DSLContext for DB1
@Bean
public DefaultDSLContext dslContext1(@Qualifier("dataSourceConnectionProvider1") DataSourceConnectionProvider connectionProvider1,
@Qualifier("transactionProvider1") SpringTransactionProvider transactionProvider1) {
return new DefaultDSLContext(configuration(connectionProvider1, transactionProvider1));
}

// DSLContext for DB2
// ...

private DefaultConfiguration configuration(ConnectionProvider connectionProvider, TransactionProvider transactionProvider) {
DefaultConfiguration configuration = new DefaultConfiguration();
configuration.setSQLDialect(SQLDialect.MYSQL);
configuration.set(connectionProvider);
configuration.set(transactionProvider);
if (this.recordMapperProvider != null) {
configuration.set(this.recordMapperProvider);
}
if (this.settings != null) {
configuration.set(this.settings);
}
configuration.set(this.recordListenerProviders);
configuration.set(this.executeListenerProviders);
configuration.set(this.visitListenerProviders);
return configuration;
}
}
}

服務類
配置好DataSource，TransacationManager和DSLContext之後，服務類的配置就比較簡單了，直接引用即可。注意由於存在多套Beans，需要通過@Qualifier註解指定裝配實例。
@Transactional("TransactionManager1")//每個事務指定 tx
public class ServiceA {

@Autowired
@Qualifier("dslContext1")
protected DSLContext dsl;
}

資料庫遷移框架Flyway
Flyway是一個輕量級的開源資料庫遷移框架，使用非常廣泛。
參照Boot自帶的FlywayAutoConfiguration，同樣可以寫出如下配置類：
@Configuration
public class FlywayConfig {

@Bean(initMethod = "migrate")
@ConfigurationProperties(prefix = "fw.db1")
public Flyway flyway(@Qualifier("dataSource1") DataSource dataSource1) {
Flyway clinic = new Flyway();
clinic.setDataSource(dataSource1);
return clinic;
}

// DB2
// ...

/**
* @see FlywayAutoConfiguration
*/
@Bean
@
public () {
return new ();
}

/**
* Convert a String or Number to a {@link MigrationVersion}.
* @see FlywayAutoConfiguration
*/
private static class
implements GenericConverter {

private static final Set<ConvertiblePair> CONVERTIBLE_TYPES;

static {
Set<ConvertiblePair> types = new HashSet<ConvertiblePair>(2);
types.add(new ConvertiblePair(String.class, MigrationVersion.class));
types.add(new ConvertiblePair(Number.class, MigrationVersion.class));
CONVERTIBLE_TYPES = Collections.unmodifiableSet(types);
}

@Override
public Set<ConvertiblePair> getConvertibleTypes() {
return CONVERTIBLE_TYPES;
}

@Override
public Object convert(Object source, TypeDescriptor sourceType,
TypeDescriptor targetType) {
String value = ObjectUtils.nullSafeToString(source);
return MigrationVersion.fromVersion(value);
}

}
}

application.conf中的配置：
# DB1
fw.db1.enabled=true

⑶ GitHub上面有哪些經典的java框架源碼

  • Bazel：來自Google的構建工具，可以快速、可靠地構建代碼。官網

  • Gradle：使用Groovy（非XML）進行增量構建，可以很好地與Maven依賴管理配合工作。官網

  • Buck：Facebook構建工具。官網

    • 位元組碼操作

    編程方式操作位元組碼的開發庫。

  • ASM：通用底層位元組碼操作和分析開發庫。官網

  • Byte Buddy：使用流式API進一步簡化位元組碼生成。官網

  • Byteman：在運行時通過DSL（規則）操作位元組碼進行測試和故障排除。官網

  • Javassist：一個簡化位元組碼編輯嘗試。官網

    • 集群管理

    在集群內動態管理應用程序的框架。

  • Apache Aurora：Apache Aurora是一個Mesos框架，用於長時間運行服務和定時任務（cron job）。官網

  • Singularity：Singularity是一個Mesos框架，方便部署和操作。它支持Web Service、後台運行、調度作業和一次性任務。官網

    • 代碼分析

    測量代碼指標和質量工具。

  • Checkstyle：代碼編寫規范和標准靜態分析工具。官網

  • Error Prone：將常見編程錯誤作為運行時錯誤報告。官網

  • FindBugs：通過位元組碼靜態分析查找隱藏bug。官網

  • jQAssistant：使用基於Neo4J查詢語言進行代碼靜態分析。官網

  • PMD：對源代碼分析查找不良的編程習慣。官網

  • SonarQube：通過插件集成其它分析組件，對過去一段時間內的數據進行統計。官網

    • 編譯器生成工具

    用來創建解析器、解釋器或編譯器的框架。

  • ANTLR：復雜的全功能自頂向下解析框架。官網

  • JavaCC：JavaCC是更加專門的輕量級工具，易於上手且支持語法超前預測。官網

    • 外部配置工具

    支持外部配置的開發庫。

  • config：針對JVM語言的配置庫。官網

  • owner：減少冗餘配置屬性。官網

    • 約束滿足問題求解程序

    幫助解決約束滿足問題的開發庫。

  • Choco：可直接使用的約束滿足問題求解程序，使用了約束規劃技術。官網

  • JaCoP：為FlatZinc語言提供了一個介面，可以執行MiniZinc模型。官網

  • OptaPlanner：企業規劃與資源調度優化求解程序。官網

  • Sat4J：邏輯代數與優化問題最先進的求解程序。官網

    • 持續集成

  • Bamboo：Atlassian解決方案，可以很好地集成Atlassian的其他產品。可以選擇開源許可，也可以購買商業版。官網

  • CircleCI：提供託管服務，可以免費試用。官網

  • Codeship：提供託管服務，提供有限的免費模式。官網

  • fabric8：容器集成平台。官網

  • Go：ThoughtWork開源解決方案。官網

  • Jenkins：支持基於伺服器的部署服務。官網

  • TeamCity：JetBrain的持續集成解決方案，有免費版。官網

  • Travis：通常用作開源項目的託管服務。官網

  • Buildkite: 持續集成工具，用簡單的腳本就能設置pipeline，而且能快速構建，可以免費試用。官網

    • CSV解析

    簡化CSV數據讀寫的框架與開發庫

  • uniVocity-parsers：速度最快功能最全的CSV開發庫之一，同時支持TSV與固定寬度記錄的讀寫。官網

    • 資料庫

    簡化資料庫交互的相關工具。

  • Apache Phoenix：HBase針對低延時應用程序的高性能關系資料庫層。官網

  • Crate：實現了數據同步、分片、縮放、復制的分布式數據存儲。除此之外還可以使用基於SQL的語法跨集群查詢。官網

  • Flyway：簡單的資料庫遷移工具。官網

  • H2：小型SQL資料庫，以可以作為內存資料庫使用著稱。官網

  • HikariCP：高性能JDBC連接工具。官網

  • JDBI：便捷的JDBC抽象。官網

  • Protobuf：Google數據交換格式。官網

  • SBE：簡單二進制編碼，是最快速的消息格式之一。官網

  • Wire：整潔輕量級協議緩存。官網

  • 幫實現依賴翻轉範式的開發庫。官網

  • Apache DeltaSpike：CDI擴展框架。官網

  • Dagger2：編譯時注入框架，不需要使用反射。官網

  • Guice：可以匹敵Dagger的輕量級注入框架。官網

  • HK2：輕量級動態依賴注入框架。官網

    • 開發流程增強工具

    從最基本的層面增強開發流程。

  • ADT4J：針對代數數據類型的JSR-269代碼生成器。官網

  • AspectJ：面向切面編程（AOP）的無縫擴展。官網

  • Auto：源代碼生成器集合。官網

  • DCEVM：通過修改JVM在運行時支持對已載入的類進行無限次重定義。官網

  • HotswapAgent：支持無限次重定義運行時類與資源。官網

  • Immutables：類似Scala的條件類。官網

  • JHipster：基於Spring Boot與AngularJS應用程序的Yeoman源代碼生成器。官網

  • JRebel：無需重新部署，可以即時重新載入代碼與配置的商業軟體。官網

  • Lombok：減少冗餘的代碼生成器。官網

  • Spring Loaded：類重載代理。官網

  • vert.x：多語言事件驅動應用框架。官網

    • 分布式應用

    用來編寫分布式容錯應用的開發庫和框架。

  • Akka：用來編寫分布式容錯並發事件驅動應用程序的工具和運行時。官網

  • Apache Storm：實時計算系統。官網

  • Apache ZooKeeper：針對大型分布式系統的協調服務，支持分布式配置、同步和名稱注冊。官網

  • Hazelcast：高可擴展內存數據網格。官網

  • Hystrix：提供延遲和容錯。官網

  • JGroups：提供可靠的消息傳遞和集群創建的工具。官網

  • Orbit：支持虛擬角色（Actor），在傳統角色的基礎上增加了另外一層抽象。官網

  • Quasar：為JVM提供輕量級線程和角色。官網

    • 分布式資料庫

    對應用程序而言，在分布式系統中的資料庫看起來就像是只有一個數據源。

  • Apache Cassandra：列式資料庫，可用性高且沒有單點故障。官網

  • Apache HBase：針對大數據的Hadoop資料庫。官網

  • Druid：實時和歷史OLAP數據存儲，在聚集查詢和近似查詢方面表現不俗。官網

  • Infinispan：針對緩存的高並發鍵值對數據存儲。官網

    • 發布

    以本機格式發布應用程序的工具。

  • Bintray：發布二進制文件版本控制工具。可以於Maven或Gradle一起配合使用。提供開源免費版本和幾種商業收費版本。官網

  • Central Repository：最大的二進制組件倉庫，面向開源社區提供免費服務。Apache Maven默認使用Central官網Repository，也可以在所有其他構建工具中使用。

  • IzPack：為跨平台部署建立創作工具（Authoring Tool）。官網

  • JitPack：打包GitHub倉庫的便捷工具。可根據需要構建Maven、Gradle項目，發布可立即使用的組件。官網

  • Launch4j：將JAR包裝為輕量級本機Windows可執行程序。官網

  • Nexus：支持代理和緩存功能的二進制管理工具。官網

  • packr：將JAR、資源和JVM打包成Windows、Linux和Mac OS X本地發布文件。官網

    • 文檔處理工具

    處理Office文檔的開發庫。

  • Apache POI：支持OOXML規范（XLSX、DOCX、PPTX）以及OLE2規范（XLS、DOC、PPT）。官網

  • documents4j：使用第三方轉換器進行文檔格式轉換，轉成類似MS Word這樣的格式。官網

  • jOpenDocument：處理OpenDocument格式（由Sun公司提出基於XML的文檔格式）。官網

    • 函數式編程

    函數式編程支持庫。

  • Cyclops：支持一元（Monad）操作和流操作工具類、comprehension（List語法）、模式匹配、trampoline等特性。官網

  • Fugue：Guava的函數式編程擴展。官網

  • Functional Java：實現了多種基礎和高級編程抽象，用來輔助面向組合開發（composition-oriented development）。官網

  • Javaslang：一個函數式組件庫，提供持久化數據類型和函數式控制結構。官網

  • jOOλ：旨在填補Java 8 lambda差距的擴展，提供了眾多缺失的類型和一組豐富的順序流API。官網

    • 游戲開發

    游戲開發框架。

  • jMonkeyEngine：現代3D游戲開發引擎。官網

  • libGDX：全面的跨平台高級框架。官網

  • LWJGL：對OpenGL/CL/AL等技術進行抽象的健壯框架。官網

    • GUI

    現代圖形化用戶界面開發庫。

  • JavaFX：Swing的後繼者。官網

  • Scene Builder：開發JavaFX應用的可視化布局工具。官網

    • 高性能計算

    涵蓋了從集合到特定開發庫的高性能計算相關工具。

  • Agrona：高性能應用中常見的數據結構和工具方法。官網

  • Disruptor：線程間消息傳遞開發庫。官網

  • fastutil：快速緊湊的特定類型集合（Collection）。官網

  • GS Collections：受Smalltalk啟發的集合框架。官網

  • HPPC：基礎類型集合。官網

  • Javolution：實時和嵌入式系統的開發庫。官網

  • JCTools：JDK中缺失的並發工具。官網

  • Koloboke：Hash set和hash map。官網

  • Trove：基礎類型集合。官網

  • High-scale-bli:Cliff Click 個人開發的高性能並發庫官網

    • IDE

    簡化開發的集成開發環境。

  • Eclipse：老牌開源項目，支持多種插件和編程語言。官網

  • IntelliJ IDEA：支持眾多JVM語言，是安卓開發者好的選擇。商業版主要針對企業客戶。官網

  • NetBeans：為多種技術提供集成化支持，包括Java SE、Java EE、資料庫訪問、HTML5

  • Imgscalr：純Java 2D實現，簡單、高效、支持硬體加速的圖像縮放開發庫。官網

  • Picasso：安卓圖片下載和圖片緩存開發庫。官網

  • Thumbnailator：Thumbnailator是一個高質量Java縮略圖開發庫。官網

  • ZXing：支持多種格式的一維、二維條形碼圖片處理開發庫。官網

  • im4java: 基於ImageMagick或GraphicsMagick命令行的圖片處理開發庫，基本上ImageMagick能夠支持的圖片格式和處理方式都能夠處理。官網

  • Apache Batik：在Java應用中程序以SVG格式顯示、生成及處理圖像的工具集，包括SVG解析器、SVG生成器、SVG DOM等模塊，可以集成使用也可以單獨使用，還可以擴展自定義的SVG標簽。官網

    • JSON

    簡化JSON處理的開發庫。

  • Genson：強大且易於使用的Java到JSON轉換開發庫。官網

  • Gson：谷歌官方推出的JSON處理庫，支持在對象與JSON之間雙向序列化，性能良好且可以實時調用。官網

  • Jackson：與GSON類似，在頻繁使用時性能更佳。官網

  • LoganSquare：基於Jackson流式API，提供對JSON解析和序列化。比GSON與Jackson組合方式效果更好。官網

  • Fastjson：一個Java語言編寫的高性能功能完善的JSON庫。官網

  • Kyro：快速、高效、自動化的Java對象序列化和克隆庫。官網

    • JVM與JDK

    目前的JVM和JDK實現。

  • JDK 9：JDK 9的早期訪問版本。官網

  • OpenJDK：JDK開源實現。官網

    • 基於JVM的語言

    除Java外，可以用來編寫JVM應用程序的編程語言。

  • Scala：融合了面向對象和函數式編程思想的靜態類型編程語言。官網

  • Groovy：類型可選（Optionally typed）的動態語言，支持靜態類型和靜態編譯。目前是一個Apache孵化器項目。官網

  • Clojure：可看做現代版Lisp的動態類型語言。官網

  • Ceylon：RedHat開發的面向對象靜態類型編程語言。官網

  • Kotlin：JetBrain針對JVM、安卓和瀏覽器提供的靜態類型編程語言。官網

  • Xtend：一種靜態編程語言，能夠將其代碼轉換為簡潔高效的Java代碼，並基於JVM運行。官網

    • 日誌

    記錄應用程序行為日誌的開發庫。

  • Apache Log4j 2：使用強大的插件和配置架構進行完全重寫。官網

  • kibana：分析及可視化日誌文件。官網

  • Logback：強健的日期開發庫，通過Groovy提供很多有趣的選項。官網

  • logstash：日誌文件管理工具。官網

  • Metrics：通過JMX或HTTP發布參數，並且支持存儲到資料庫。官網

  • SLF4J：日誌抽象層，需要與具體的實現配合使用。官網

    • 機器學習

    提供具體統計演算法的工具。其演算法可從數據中學習。

  • Apache Flink：快速、可靠的大規模數據處理引擎。官網

  • Apache Hadoop：在商用硬體集群上用來進行大規模數據存儲的開源軟體框架。官網

  • Apache Mahout：專注協同過濾、聚類和分類的可擴展演算法。官網

  • Apache Spark：開源數據分析集群計算框架。官網

  • DeepDive：從非結構化數據建立結構化信息並集成到已有資料庫的工具。官網

  • Deeplearning4j：分布式多線程深度學習開發庫。官網

  • H2O：用作大數據統計的分析引擎。官網

  • Weka：用作數據挖掘的演算法集合，包括從預處理到可視化的各個層次。官網

  • QuickML：高效機器學習庫。官網、GitHub

    • 消息傳遞

    在客戶端之間進行消息傳遞，確保協議獨立性的工具。

  • Aeron：高效可擴展的單播、多播消息傳遞工具。官網

  • Apache ActiveMQ：實現JMS的開源消息代理（broker），可將同步通訊轉為非同步通訊。官網

  • Apache Camel：通過企業級整合模式（Enterprise Integration Pattern EIP）將不同的消息傳輸API整合在一起。官網

  • Apache Kafka：高吞吐量分布式消息系統。官網

  • Hermes：快速、可靠的消息代理（Broker），基於Kafka構建。官網

  • JBoss HornetQ：清晰、准確、模塊化，可以方便嵌入的消息工具。官網

  • JeroMQ：ZeroMQ的純Java實現。官網

  • Smack：跨平台XMPP客戶端函數庫。官網

  • Openfire：是開源的、基於XMPP、採用Java編程語言開發的實時協作伺服器。 Openfire安裝和使用都非常簡單，並可利用Web界面進行管理。官網GitHub

  • Spark：是一個開源，跨平台IM客戶端。它的特性支持集組聊天，電話集成和強大安全性能。如果企業內部部署IM使用Openfire+Spark是最佳的組合。官網GitHub

  • Tigase： 是一個輕量級的可伸縮的 Jabber/XMPP 伺服器。無需其他第三方庫支持，可以處理非常高的復雜和大量的用戶數，可以根據需要進行水平擴展。官網

    • 雜項

    未分類其它資源。

  • Design Patterns：實現並解釋了最常見的設計模式。官網

  • Jimfs：內存文件系統。官網

  • Lanterna：類似curses的簡單console文本GUI函數庫。官網

  • LightAdmin：可插入式CRUD UI函數庫，可用來快速應用開發。官網

  • OpenRefine：用來處理混亂數據的工具，包括清理、轉換、使用Web Service進行擴展並將其關聯到資料庫。官網

  • RoboVM：Java編寫原生iOS應用。官網

  • Quartz：強大的任務調度庫.官網

    • 應用監控工具

    監控生產環境中應用程序的工具。

  • AppDynamics：性能監測商業工具。官網

  • JavaMelody：性能監測和分析工具。官網

  • Kamon：Kamon用來監測在JVM上運行的應用程序。官網

  • New Relic：性能監測商業工具。官網

  • SPM：支持對JVM應用程序進行分布式事務追蹤的性能監測商業工具。官網

  • Takipi：產品運行時錯誤監測及調試商業工具。官網

    • 原生開發庫

    用來進行特定平台開發的原生開發庫。

  • JNA：不使用JNI就可以使用原生開發庫。此外，還為常見系統函數提供了介面。官網

    • 自然語言處理

    用來專門處理文本的函數庫。

  • Apache OpenNLP：處理類似分詞等常見任務的工具。官網

  • CoreNLP：斯坦佛CoreNLP提供了一組基礎工具，可以處理類似標簽、實體名識別和情感分析這樣的任務。官網

  • LingPipe：一組可以處理各種任務的工具集，支持POS標簽、情感分析等。官網

  • Mallet：統計學自然語言處理、文檔分類、聚類、主題建模等。官網

    • 網路

    網路編程函數庫。

  • Async Http Client：非同步HTTP和WebSocket客戶端函數庫。官網

  • Grizzly：NIO框架，在Glassfish中作為網路層使用。官網

  • Netty：構建高性能網路應用程序開發框架。官網

  • OkHttp：一個Android和Java應用的HTTP+SPDY客戶端。官網

  • Undertow：基於NIO實現了阻塞和非阻塞API的Web伺服器，在WildFly中作為網路層使用。官網

    • ORM

    處理對象持久化的API。

  • Ebean：支持快速數據訪問和編碼的ORM框架。官網

  • EclipseLink：支持許多持久化標准，JPA、JAXB、JCA和SDO。官網

  • Hibernate：廣泛使用、強健的持久化框架。Hibernate的技術社區非常活躍。官網

  • MyBatis：帶有存儲過程或者SQL語句的耦合對象（Couples object）。官網

  • OrmLite：輕量級開發包，免除了其它ORM產品中的復雜性和開銷。官網

  • Nutz：另一個SSH。官網，Github

  • JFinal：JAVA WEB + ORM框架。官網，Github

    • PDF

    用來幫助創建PDF文件的資源。

  • Apache FOP：從XSL-FO創建PDF。官網

  • Apache PDFBox：用來創建和操作PDF的工具集。官網

  • DynamicReports：JasperReports的精簡版。官網

  • flyingsaucer：XML/XHTML和CSS 2.1渲染器。官網

  • iText：一個易於使用的PDF函數庫，用來編程創建PDF文件。注意，用於商業用途時需要許可證。官網

  • JasperReports：一個復雜的報表引擎。官網

    • 性能分析

    性能分析、性能剖析及基準測試工具。

  • jHiccup：提供平台中JVM暫停的日誌和記錄。官網

  • JMH：JVM基準測試工具。官網

  • JProfiler：商業分析器。官網

  • LatencyUtils：測量和報告延遲的工具。官網

  • VisualVM：對運行中的應用程序信息提供了可視化界面。官網

  • YourKit Java Profiler：商業分析器。官網

    • 響應式開發庫

    用來開發響應式應用程序的開發庫。

  • Reactive Streams：非同步流處理標准，支持非阻塞式反向壓力（backpressure）。官網

  • Reactor：構建響應式快速數據（fast-data）應用程序的開發庫。官網

  • RxJava：通過JVM可觀察序列（observable sequence）構建非同步和基於事件的程序。官網

    • REST框架

    用來創建RESTful 服務的框架。

  • Dropwizard：偏向於自己使用的Web框架。用來構建Web應用程序，使用了Jetty、Jackson、Jersey和Metrics。官網

  • Feign：受Retrofit、JAXRS-2.0和WebSocket啟發的HTTP客戶端連接器（binder）。官網

  • Jersey：JAX-RS參考實現。官網

  • RESTEasy：經過JAX-RS規范完全認證的可移植實現。官網

  • RestExpress：一個Java類型安全的REST客戶端。官網

  • RestX：基於註解處理和編譯時源碼生成的框架。官網

  • Retrofit：類型安全的REST客戶端。官網

  • Spark：受到Sinatra啟發的Java REST框架。官網

  • Swagger：Swagger是一個規范且完整的框架，提供描述、生產、消費和可視化RESTful Web Service。官網

  • Blade：國人開發的一個輕量級的MVC框架. 它擁有簡潔的代碼，優雅的設計。官網

    • 科學計算與分析

    用於科學計算和分析的函數庫。

  • DataMelt：用於科學計算、數據分析及數據可視化的開發環境。官網

  • JGraphT：支持數學圖論對象和演算法的圖形庫。官網

  • JScience：用來進行科學測量和單位的一組類。官網

    • 搜索引擎

    文檔索引引擎，用於搜索和分析。

  • Apache Solr：一個完全的企業搜索引擎。為高吞吐量通信進行了優化。官網

  • Elasticsearch：一個分布式、支持多租戶（multitenant）全文本搜索引擎。提供了RESTful Web介面和無schema的JSON文檔。官網

  • Apache Lucene：是一個開放源代碼的全文檢索引擎工具包，是一個全文檢索引擎的架構，提供了完整的查詢引擎和索引引擎，部分文本分析引擎。官網

    • 安全

    用於處理安全、認證、授權或會話管理的函數庫。

  • Apache Shiro：執行認證、授權、加密和會話管理。官網

  • Bouncy Castle，涵蓋了從基礎的幫助函數到PGP/SMIME操作。官網：多途加密開發庫。支持JCA提供者（JCA provider)

  • Cryptomator：在雲上進行客戶端跨平台透明加密。官網

  • Keycloak：為瀏覽器應用和RESTful Web Service集成SSO和IDM。目前還處於beta版本，但是看起來非常有前途。官網

  • PicketLink：PicketLink是一個針對Java應用進行安全和身份認證管理的大型項目（Umbrella Project）。官網

    • 序列化

    用來高效處理序列化的函數庫。

  • FlatBuffers：高效利用內存的序列化函數庫，無需解包和解析即可高效訪問序列化數據。官網

  • Kryo：快速、高效的對象圖形序列化框架。官網

  • FST：提供兼容JDK的高性能對象圖形序列化。官網

  • MessagePack：一種高效的二進制序列化格式。官網

    • 應用伺服器

    用來部署應用程序的伺服器。

  • Apache Tomcat：針對Servlet和JSP的應用伺服器，健壯性好且適用性強。官網

  • Apache TomEE：Tomcat加Java EE。官網

  • Jetty：輕量級、小巧的應用伺服器，通常會嵌入到項目中。官網

  • WebSphere Liberty：輕量級、模塊化應用伺服器，由IBM開發。官網

  • WildFly：之前被稱作JBoss，由Red Hat開發。支持很多Java EE功能。官網

    • 模板引擎

    在模板中替換表達式的工具。

  • Apache Velocity：提供HTML頁面模板、email模板和通用開源代碼生成器模板。官網

  • FreeMarker：通用模板引擎，不需要任何重量級或自己使用的依賴關系。官網

  • Handlebars.java：使用Java編寫的模板引擎，邏輯簡單，支持語義擴展（semantic Mustache）。官網

  • Thymeleaf：旨在替換JSP，支持XML文件的工具。官網

    • 測試

    測試內容從對象到介面，涵蓋性能測試和基準測試工具。

  • Apache JMeter：功能性測試和性能評測。官網

  • Arquillian：集成測試和功能行測試平台，集成Java EE容器。官網

  • AssertJ：支持流式斷言提高測試的可讀性。官網

  • Awaitility：用來同步非同步操作的DSL。官網

  • Cucumber：BDD測試框架。官網

  • Gatling：設計為易於使用、可維護的和高性能負載測試工具。官網

  • Hamcrest：可用來靈活創建意圖（intent）表達式的匹配器。官網

  • JMockit：用來模擬靜態、final方法等。官網

  • JUnit：通用測試框架。官網

  • Mockito：在自動化單元測試中創建測試對象，為TDD或BDD提供支持。官網

  • PowerMock： 支持模擬靜態方法、構造函數、final類和方法、私有方法以及移除靜態初始化器的模擬工具。官網

  • REST Assured：為REST/HTTP服務提供方便測試的Java DSL。官網

  • Selenide：為Selenium提供精準的周邊API，用來編寫穩定且可讀的UI測試。官網

  • Selenium：為Web應用程序提供可移植軟體測試框架。官網

  • Spock：JUnit-compatible framework featuring an expressive Groovy-derived specification language.官網兼容JUnit框架，支持衍生的Groovy范的語言。

  • TestNG：測試框架。官網

  • Truth：Google的斷言和命題（proposition）框架。官網

  • Unitils：模塊化測試函數庫，支持單元測試和集成測試。官網

  • WireMock：Web Service測試樁（Stub）和模擬函數。官網

    • 通用工具庫

    通用工具類函數庫。

  • Apache Commons：提供各種用途的函數，比如配置、驗證、集合、文件上傳或XML處理等。官網

  • args4j：命令行參數解析器。官網

  • CRaSH：為運行進行提供CLI。官網

  • Gephi：可視化跨平台網路圖形化操作程序。官網

  • Guava：集合、緩存、支持基本類型、並發函數庫、通用註解、字元串處理、I/O等。官網

  • JADE：構建、調試多租戶系統的框架和環境。官網

  • javatuples：正如名字表示的那樣，提供tuple支持。盡管目前tuple的概念還有留有爭議。官網

  • JCommander：命令行參數解析器。官網

  • Protégé：提供存在論（ontology）編輯器以及構建知識系統的框架。官網

    • 網路爬蟲

    用於分析網站內容的函數庫。

  • Apache Nutch：可用於生產環境的高度可擴展、可伸縮的網路爬蟲。官網

  • Crawler4j：簡單的輕量級網路爬蟲。官網

  • JSoup：刮取、解析、操作和清理HTML。官網

    • Web框架

    用於處理Web應用程序不同層次間通訊的框架。

  • Apache Tapestry：基於組件的框架，使用Java創建動態、強健的、高度可擴展的Web應用程序。官網

  • Apache Wicket：基於組件的Web應用框架，與Tapestry類似帶有狀態顯示GUI。官網

  • Google Web Toolkit：一組Web開發工具集，包含在客戶端將Java代碼轉為JavaScript的編譯器、XML解析器、RCP官網API、JUnit集成、國際化支持和GUI控制項。

  • Grails：Groovy框架，旨在提供一個高效開發環境，使用約定而非配置、沒有XML並支持混入（mixin）。官網

  • Ninja：Java全棧Web開發框架。非常穩固、快速和高效。官網

  • Pippo：小型、高度模塊化的類Sinatra框架。官網

  • Play：使用約定而非配置，支持代碼熱載入並在瀏覽器中顯示錯誤。官網

  • PrimeFaces：JSF框架，提供免費和帶支持的商業版本。包括若干前端組件。官網

  • Ratpack：一組Java開發函數庫，用於構建快速、高效、可擴展且測試完備的HTTP應用程序。官網

  • Spring Boot：微框架，簡化了Spring新程序的開發過程。官網

  • Spring：旨在簡化Java EE的開發過程，提供依賴注入相關組件並支持面向切面編程。官網

  • Vaadin：基於GWT構建的事件驅動框架。使用服務端架構，客戶端使用Ajax。官網

  • Blade：國人開發的一個輕量級的MVC框架. 它擁有簡潔的代碼，優雅的設計。官網

    • 業務流程管理套件

    流程驅動的軟體系統構建。

  • jBPM：非常靈活的業務流程管理框架，致力於構建開發與業務分析人員之間的橋梁。官網

  • Activity：輕量級工作流和業務流程管理框架。官網github

    • 資源

    社區

⑷ flyway能否按不同的項目往同一個資料庫執行腳本

在DOS提示符下可以按下列方式執行:
C>sqlplus 用戶名/口令@連接字元串 @腳本名

腳本是SQL類型文件，裡面寫上你的兩個語句:
select * from tbo_presenceinfo;
quit
裡面的語句更多當然也可以。在#提示符下我沒試過。

⑸ Flyway 不能在現有的庫上操作嗎

類似Flyway這樣的工笑塵滑具基本原理都非常簡單，資料庫版本的升級都是通過SQL或者Java代碼來完成。
每執行一次升級或者更新碰臘，資料庫中就會把這個操作的版本號記錄下來。這樣就可以非常容易的判斷出，當前資料庫處於哪個版本。
使用Flyway
Flyway的官方文檔已經做得比較詳細了，大家照著做做，一下就兄塌明白了。
Flyway First Step: http://flywaydb.org/getstarted/firststeps/api.html
for Java

⑹ 如何獲取flyway遷移sql腳本的版本號

類似Flyway這樣的工具基本原理都非常簡單，資料庫版本的升級都是通過SQL或者Java代碼來完成。
每執行一次升級或者更新，資料庫中就會把這個操作的版本號記錄下來。這樣就可以非常容易的判斷出，當前資料庫處於哪個版本。
使用Flyway
Flyway的官方文檔已經做得比較詳細了，大家照著做做，一下就明白了。

⑺ 世界最大OpenStack私有雲是如何運營的 00 OpenStack中國社區

一、構建篇
在構建方面，PayPal的工程師最關心擴展性和可用性，具體涉及以下幾個方面：
1，首先是可用性，基於Nova的Cell來實現IT服務的可用性。
2，其次是棄用那些過時的工具，以負載均衡為例，eBay和PayPal花了幾年時間試圖自己開發工具以實現LBaaS，最終還是決定改用社區的功能組件，因為社區的組件更開放，合作夥伴更容易在上面開發插件。
3，在線升級和測試 這一功能對於的健壯性和擴展性尤為重要，能夠在線升級，才能跟上社區發展的腳步。
4，實時容量擴展 PayPal的目標是新機架到貨之後，只需要1-2天就可以完成部署並上線應用。
二、遷移篇
相對於構建一個新的系統，將應用和數據遷移到新的架構則更具挑戰，我們來看看這次遷移任務的細節和面對的挑戰：
1，有限的工作人員；
2，超過8000台機器；
3，2PB的公共數據，以及大量存儲於虛擬機內的本地數據；
4，上述應用和數據位於3個不同的地點；
5，通過遷移將可用性技術從Nova Availability Zone變更為Nova Cell Service以實現更好的可用性和擴展性；
6，變更防火牆配置，制定訪問規則；
7，檢驗並解決新硬體的兼容性問題，確保新系統的穩定性。
下面是PayPal通過這一次遷移總結出的經驗：
1，基礎架構的可見性對保持配置一致性非常重要 如果你沒有一個關於基礎架構的完整視圖，那將是致命的。比如你在部署應用的過程中如果有虛擬機宕機了，等它重新恢復工作時，上面的應用和配置將是不正確的。
2，不要指望所有的應用和開發工作都能遷移到新的環境 必然會有無法遷移的部分，在雲計算時代，少幾個虛擬機應該不是什麼大問題。
3，不要一開始就使用自動化配置工具 PayPal先用手工的方式完成5%-10%的配置工作，在確定一定正常之後才引入自動化的方法完成後緒的工作。
4，遷移API服務的時候要萬分小心 很多自動化操作基於這些API完成，因此你不能隨便停止這些API服務，選擇關鍵操作的執行間隙來遷移服務，並且不要指望在一個時間窗口內遷移所有API服務。
5，要清楚你遷移的是什麼 不要為了節省時間而停止你的生產API或實例的虛IP，那樣會增加風險。
6，切記，如果遇到問題，你不一定可以回滾配置。
補充說明一下這個Cell，它是用來替代原來的Zone以更好地解決OpenStack的擴展性問題，這部分內容OS借鑒了AWS的做法。一個OS雲首先分為多個Region，正塵不同的Region通常需要不同的地域，多個Region之間只有KeyStone和Horizon服務是共享的，因此Region可以用來實現隔離和優化訪問。Region的下一級就是Cell，每個Cell都有一套獨立的資料庫和消息隊列服務，另外Cell是樹形結構，只有樹根Cell有Nova-API服務，因此也被稱為API-Cell。其它的子Cell都共享這個Nova-API服務，而Nova的其它服務則分布於每一個Cell，子Cell也稱計算Cell。
PayPal提到Cell這個組件目前功能還不完整，在數據同步方面還有一些不足，但是因為帆襲擴展性和可用性需要，PayPal必須用Cell來代替原有的Zone。
三、工具篇
PayPal使用了一些開源工具：
1，Graphite用於繪圖
2，Puppet和Salt用於配置管理
3，Zabbix用於監視
4，Cobbler用於裸機部署
另外PayPal自己開發了一個名為Flyway的遷移工具，用於從eBay雲向PayPal雲遷移幾千台虛擬機和相關資源。它負責完成下述資源的遷移工作：
1，Nova虛擬機
2，用戶、租戶、角色、密鑰對和限額
3，鏡像和快照
4，Cinder卷和數據
5，Trove資料庫實例舉轎禪
6，LBaaS VIP實例和證書
PayPal計劃將這一工具開源到GitHub。此外，PayPal還開發了其它一些遷移輔助工具：
1，Stackwatch/Stackmetrics用於健康檢查和度量
2，Reparo用於伺服器修復和置備，也負責硬體監測和補丁管理
3，Cloudinfo用於雲的可見性，將各種視圖和相關數據匯總到一起，也提供Metric視圖。
4，CloudMinion用於資源回收 通過掃描網路流量發現閑置虛擬機，管理過期時間，發送告警，自動回收資源並提供報告。
5，CMS 用做中央配置資料庫，集中存儲和管理物理和虛擬組件，基礎架構和應用等所有資源的信息，並可以呈現這些資源之間的關系。
四、未來篇
1，採用Masterless Puppet構建更具擴展性和可用性的配置管理方案，消除單一故障點。
2，Infra AZ項目：通過OpenStack來部署OpenStack，開發更好的控制平面，提高容量擴展速度，實現一鍵擴容。
3，從H版直接升級到Kilo版，數據平面不能停，控制只有幾個小時的窗口，部分網路需要從Nova-Network升級到Neutron。
五、西蒙亂談
1，採用開源技術要跟對主流，社區是靠一個龐大的群體來支持的，你對社區產品的增強只能是錦上添花，如果那塊綉布爛掉了，你的手藝再好也是白搭。
2，OpenStack成長很快，正在不斷完善，可堪大用，但因為它的定位只是一個框架，需要與大量的相關組件進行集成才能落地，因此採用社區版本自主開發雲並不容易，你需要組建一個與社區聯系緊密的專家團隊。
3，OS在監控和運維管理方面相對薄弱，還有很多不足，PayPal在這方面花的功夫最多，如果不能很好地解決這一問題，就不要大規模採用OS，否則你會把自己拖死。
4，網路也是OpenStack短板之一，PayPal採用Neutron加上NSX來滿足業務對網路服務的需求。

⑻ Springboot 使用flyway跟JPA ，二者誰創建的資料庫，數據表，還有表之間的關聯關系（中間表，外鍵關聯）

insert into 工早鋒資表 values(編號，姓名，小時工資) select 編號，姓名，小時工資 from 員工表 where 編號=『輸入的編號』) 或者 insert into 工資表祥頌 select 編號，姓名，null,null,null,小時工資 from 員工表 where 編號=『輸入的編號』 你謹睜鄭試試，我不確定

⑼ 程序開發資料庫版本控制必備 - Flyway

在我們日常產品發布的過程中，代碼的版本控制可以使用git、svn工具實現。對於資料庫每當發布時會出現手動執行sql腳本進行升級資料庫，中間經常出現一些漏寫、錯寫情況，對資料庫的版本與代碼的版本不匹配，導致上線後出現資料庫不同步的問題。flyway就是對資料庫版本進行控制的工具，可以對不同環境的sql進行遷移操作。


flyway 的官網：https://flywaydb.org/

flyway會對每次執行過sql腳本保存到flyway_schema_history中，在資料庫中將保存sql腳本的版本號和對sql生成checksum，當下次執行資料庫遷移的時候就會按照版本號從低往高執行。如果以前的版本號腳本已經執行過就不會執行，如果以前版本的sql腳本已經被修改在執行的過程中則會報錯。對flyway的詳細描述與介紹可以查看flyway的官網。

配置好以上maven組件，在IDEA中就可以看到flyway的快捷插件了。

在插件中undo不能使用，undo為回滾操作。回滾操作只有使用商業版才能使用。

命令行執行

IDEA 工具執行(點擊baseline、migrate)

使用migrate必須開頭是V+版本號+「_ _「+描述.sql

如V1.0.3_20220618__increment.sql


對已經存在資料庫schema結構的資料庫的一種解決方案。實現在非空資料庫新建metaData flyway_schema_history表，並把Migrations應用到該資料庫；也可以在已有表格的資料庫中添加metaData數據表。 註：對已有的數據結構的資料庫來說，必須要進行baseline，才能進行migrate

清楚掉對應資料庫Schema中所有的對象，包括表結構，視圖，存儲過程等，clean操作再dev和test階段很好用，但是在生產環境務必禁用。

執行migrate會在指定文件夾下的sql按照版本號依次執行遷移操作。也就是執行sql腳本，對已經執行過的sql腳本便不再執行。

閱讀全文

與flyway資料庫遷移相關的內容

本站內容整理源於互聯網，如有問題請聯系解決。
Copyright design: www.gotrillian.com since 2022