国产精品电影_久久视频免费_欧美日韩国产激情_成年人视频免费在线播放_日本久久亚洲电影_久久都是精品_66av99_九色精品美女在线_蜜臀a∨国产成人精品_冲田杏梨av在线_欧美精品在线一区二区三区_麻豆mv在线看

因HIVE元數據與HDFS上的數據不一致引起的問題修復

作者： IT明哥
大數據
本片博文是“大數據問題排查系列”之一，講述某HIVE SQL 作業因為 HIVE 中的元數據與 HDFS中實際的數據不一致引起的一個問題的排查和修復。

[[421054]]

本文轉載自微信公眾號「明哥的IT隨筆」，作者IT明哥。轉載本文請聯系明哥的IT隨筆公眾號。

前言

大家好，我是明哥!

本片博文是“大數據問題排查系列”之一，講述某HIVE SQL 作業因為 HIVE 中的元數據與 HDFS中實際的數據不一致引起的一個問題的排查和修復。

以下是正文。

問題現象

客戶端報錯如下：

  1. Unable to move source xxx to destination xxx 

客戶端報錯

問題分析

客戶端的報錯信息，并沒有完全展現問題背后的全貌。我們進入 hiveserver2 所在節點查看hiveserver2的日志，可以看到如下相關信息：

  1. 2021-09-01 11:47:46,795 INFO  org.apache.hadoop.hive.ql.exec.Task: [HiveServer2-Background-Pool: Thread-1105]: Loading data to table hs_ods.ods_ses_acct_assure_scale partition (part_date=20210118) from hdfs://hs01:8020/user/hundsun/dap/hive/hs_ods/ods_ses_acct_assure_scale/part_date=20210118/.hive-staging_hive_2021-09-01_11-47-31_216_694180642957006705-35/-ext-10000 
  2. 2021-09-01 11:47:46,795 INFO  hive.metastore: [HiveServer2-Background-Pool: Thread-1105]: HMS client filtering is enabled. 
  3. 2021-09-01 11:47:46,795 INFO  hive.metastore: [HiveServer2-Background-Pool: Thread-1105]: Trying to connect to metastore with URI thrift://hs01:9083 
  4. 2021-09-01 11:47:46,795 INFO  hive.metastore: [HiveServer2-Background-Pool: Thread-1105]: Opened a connection to metastore, current connections: 54 
  5. 2021-09-01 11:47:46,796 INFO  hive.metastore: [HiveServer2-Background-Pool: Thread-1105]: Connected to metastore. 
  6. 2021-09-01 11:47:46,928 INFO  org.apache.hadoop.hive.ql.exec.MoveTask: [HiveServer2-Background-Pool: Thread-1105]: Partition is: {part_date=20210118} 
  7. 2021-09-01 11:47:46,945 INFO  org.apache.hadoop.hive.common.FileUtils: [HiveServer2-Background-Pool: Thread-1105]: Creating directory if it doesn't exist: hdfs://hs01:8020/user/hundsun/dap/hive/hs_ods/ods_ses_acct_assure_scale/part_date=20210118 
  8. 2021-09-01 11:47:46,947 ERROR hive.ql.metadata.Hive: [HiveServer2-Background-Pool: Thread-1105]: Failed to move: {} 
  9. 2021-09-01 11:47:46,947 ERROR org.apache.hadoop.hive.ql.Driver: [HiveServer2-Background-Pool: Thread-1105]: FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.MoveTask. Unable to move source hdfs://hs01:8020/user/hundsun/dap/hive/hs_ods/ods_ses_acct_assure_scale/part_date=20210118/.hive-staging_hive_2021-09-01_11-47-31_216_694180642957006705-35/-ext-10000 to destination hdfs://hs01:8020/user/hundsun/dap/hive/hs_ods/ods_ses_acct_assure_scale/part_date=20210118 
  10. 2021-09-01 11:47:46,948 INFO  org.apache.hadoop.hive.ql.Driver: [HiveServer2-Background-Pool: Thread-1105]: Completed executing command(queryId=hive_20210901114731_d7a78302-fb2a-4b45-9472-db6a9787f710); Time taken: 15.489 seconds 
  11. 2021-09-01 11:47:46,957 ERROR org.apache.hive.service.cli.operation.Operation: [HiveServer2-Background-Pool: Thread-1105]: Error running hive query:  
  12. org.apache.hive.service.cli.HiveSQLException: Error while processing statement: FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.MoveTask. Unable to move source hdfs://hs01:8020/user/hundsun/dap/hive/hs_ods/ods_ses_acct_assure_scale/part_date=20210118/.hive-staging_hive_2021-09-01_11-47-31_216_694180642957006705-35/-ext-10000 to destination hdfs://hs01:8020/user/hundsun/dap/hive/hs_ods/ods_ses_acct_assure_scale/part_date=20210118 
  13.     at org.apache.hive.service.cli.operation.Operation.toSQLException(Operation.java:329) ~[hive-service-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  14.     at org.apache.hive.service.cli.operation.SQLOperation.runQuery(SQLOperation.java:258) ~[hive-service-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  15.     at org.apache.hive.service.cli.operation.SQLOperation.access$600(SQLOperation.java:92) ~[hive-service-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  16.     at org.apache.hive.service.cli.operation.SQLOperation$BackgroundWork$1.run(SQLOperation.java:345) [hive-service-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  17.     at java.security.AccessController.doPrivileged(Native Method) ~[?:1.8.0_271] 
  18.     at javax.security.auth.Subject.doAs(Subject.java:422) [?:1.8.0_271] 
  19.     at org.apache.hadoop.security.UserGroupInformation.doAs(UserGroupInformation.java:1875) [hadoop-common-3.0.0-cdh6.3.2.jar:?] 
  20.     at org.apache.hive.service.cli.operation.SQLOperation$BackgroundWork.run(SQLOperation.java:357) [hive-service-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  21.     at java.util.concurrent.Executors$RunnableAdapter.call(Executors.java:511) [?:1.8.0_271] 
  22.     at java.util.concurrent.FutureTask.run(FutureTask.java:266) [?:1.8.0_271] 
  23.     at java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1149) [?:1.8.0_271] 
  24.     at java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:624) [?:1.8.0_271] 
  25.     at java.lang.Thread.run(Thread.java:748) [?:1.8.0_271] 
  26. Caused by: org.apache.hadoop.hive.ql.metadata.HiveException: Unable to move source hdfs://hs01:8020/user/hundsun/dap/hive/hs_ods/ods_ses_acct_assure_scale/part_date=20210118/.hive-staging_hive_2021-09-01_11-47-31_216_694180642957006705-35/-ext-10000 to destination hdfs://hs01:8020/user/hundsun/dap/hive/hs_ods/ods_ses_acct_assure_scale/part_date=20210118 
  27.     at org.apache.hadoop.hive.ql.metadata.Hive.getHiveException(Hive.java:3449) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  28.     at org.apache.hadoop.hive.ql.metadata.Hive.getHiveException(Hive.java:3405) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  29.     at org.apache.hadoop.hive.ql.metadata.Hive.moveFile(Hive.java:3400) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  30.     at org.apache.hadoop.hive.ql.metadata.Hive.replaceFiles(Hive.java:3697) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  31.     at org.apache.hadoop.hive.ql.metadata.Hive.loadPartitionInternal(Hive.java:1614) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  32.     at org.apache.hadoop.hive.ql.metadata.Hive.loadPartition(Hive.java:1525) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  33.     at org.apache.hadoop.hive.ql.metadata.Hive.loadPartition(Hive.java:1489) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  34.     at org.apache.hadoop.hive.ql.exec.MoveTask.execute(MoveTask.java:501) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  35.     at org.apache.hadoop.hive.ql.exec.Task.executeTask(Task.java:199) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  36.     at org.apache.hadoop.hive.ql.exec.TaskRunner.runSequential(TaskRunner.java:97) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  37.     at org.apache.hadoop.hive.ql.Driver.launchTask(Driver.java:2200) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  38.     at org.apache.hadoop.hive.ql.Driver.execute(Driver.java:1843) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  39.     at org.apache.hadoop.hive.ql.Driver.runInternal(Driver.java:1563) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  40.     at org.apache.hadoop.hive.ql.Driver.run(Driver.java:1339) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  41.     at org.apache.hadoop.hive.ql.Driver.run(Driver.java:1334) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  42.     at org.apache.hive.service.cli.operation.SQLOperation.runQuery(SQLOperation.java:256) ~[hive-service-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  43.     ... 11 more 
  44. Caused by: org.apache.hadoop.hive.ql.metadata.HiveException: org.apache.hadoop.hive.ql.metadata.HiveException: Unable to move source hdfs://hs01:8020/user/hundsun/dap/hive/hs_ods/ods_ses_acct_assure_scale/part_date=20210118/.hive-staging_hive_2021-09-01_11-47-31_216_694180642957006705-35/-ext-10000/000000_0 to destination hdfs://hs01:8020/user/hundsun/dap/hive/hs_ods/ods_ses_acct_assure_scale/part_date=20210118/000000_0 
  45.     at org.apache.hadoop.hive.ql.metadata.Hive.handlePoolException(Hive.java:3422) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  46.     at org.apache.hadoop.hive.ql.metadata.Hive.moveFile(Hive.java:3367) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  47.     at org.apache.hadoop.hive.ql.metadata.Hive.replaceFiles(Hive.java:3697) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  48.     at org.apache.hadoop.hive.ql.metadata.Hive.loadPartitionInternal(Hive.java:1614) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  49.     at org.apache.hadoop.hive.ql.metadata.Hive.loadPartition(Hive.java:1525) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  50.     at org.apache.hadoop.hive.ql.metadata.Hive.loadPartition(Hive.java:1489) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  51.     at org.apache.hadoop.hive.ql.exec.MoveTask.execute(MoveTask.java:501) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  52.     at org.apache.hadoop.hive.ql.exec.Task.executeTask(Task.java:199) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  53.     at org.apache.hadoop.hive.ql.exec.TaskRunner.runSequential(TaskRunner.java:97) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  54.     at org.apache.hadoop.hive.ql.Driver.launchTask(Driver.java:2200) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  55.     at org.apache.hadoop.hive.ql.Driver.execute(Driver.java:1843) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  56.     at org.apache.hadoop.hive.ql.Driver.runInternal(Driver.java:1563) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  57.     at org.apache.hadoop.hive.ql.Driver.run(Driver.java:1339) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  58.     at org.apache.hadoop.hive.ql.Driver.run(Driver.java:1334) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  59.     at org.apache.hive.service.cli.operation.SQLOperation.runQuery(SQLOperation.java:256) ~[hive-service-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  60.     ... 11 more 
  61. Caused by: org.apache.hadoop.hive.ql.metadata.HiveException: Unable to move source hdfs://hs01:8020/user/hundsun/dap/hive/hs_ods/ods_ses_acct_assure_scale/part_date=20210118/.hive-staging_hive_2021-09-01_11-47-31_216_694180642957006705-35/-ext-10000/000000_0 to destination hdfs://hs01:8020/user/hundsun/dap/hive/hs_ods/ods_ses_acct_assure_scale/part_date=20210118/000000_0 
  62.     at org.apache.hadoop.hive.ql.metadata.Hive.getHiveException(Hive.java:3449) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  63.     at org.apache.hadoop.hive.ql.metadata.Hive.getHiveException(Hive.java:3405) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  64.     at org.apache.hadoop.hive.ql.metadata.Hive.access$200(Hive.java:175) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  65.     at org.apache.hadoop.hive.ql.metadata.Hive$3.call(Hive.java:3350) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  66.     at org.apache.hadoop.hive.ql.metadata.Hive$3.call(Hive.java:3335) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  67.     ... 4 more 
  68. Caused by: java.io.IOException: rename for src path: hdfs://hs01:8020/user/hundsun/dap/hive/hs_ods/ods_ses_acct_assure_scale/part_date=20210118/.hive-staging_hive_2021-09-01_11-47-31_216_694180642957006705-35/-ext-10000/000000_0 to dest path:hdfs://hs01:8020/user/hundsun/dap/hive/hs_ods/ods_ses_acct_assure_scale/part_date=20210118/000000_0 returned false 
  69.     at org.apache.hadoop.hive.ql.metadata.Hive$3.call(Hive.java:3347) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  70.     at org.apache.hadoop.hive.ql.metadata.Hive$3.call(Hive.java:3335) ~[hive-exec-2.1.1-cdh6.3.2.jar:2.1.1-cdh6.3.2] 
  71.     ... 4 more 
  72. 2021-09-01 11:47:46,962 INFO  org.apache.hadoop.hive.conf.HiveConf: [HiveServer2-Handler-Pool: Thread-474]: Using the default value passed in for log id: d9b4646b-3c22-4589-8912-a68b92efcca7 
  73. 2021-09-01 11:47:46,962 INFO  org.apache.hadoop.hive.ql.session.SessionState: [HiveServer2-Handler-Pool: Thread-474]: Updating thread name to d9b4646b-3c22-4589-8912-a68b92efcca7 HiveServer2-Handler-Pool: Thread-474 
  74. 2021-09-01 11:47:46,962 INFO  org.apache.hive.service.cli.operation.OperationManager: [d9b4646b-3c22-4589-8912-a68b92efcca7 HiveServer2-Handler-Pool: Thread-474]: Closing operation: OperationHandle [opType=EXECUTE_STATEMENT, getHandleIdentifier()=29e01dfe-8b9b-427a-a610-1d58c526faca] 
  75. 2021-09-01 11:47:46,973 INFO  org.apache.hadoop.hive.conf.HiveConf: [d9b4646b-3c22-4589-8912-a68b92efcca7 HiveServer2-Handler-Pool: Thread-474]: Using the default value passed in for log id: d9b4646b-3c22-4589-8912-a68b92efcca7 
  76. 2021-09-01 11:47:46,973 INFO  org.apache.hadoop.hive.ql.session.SessionState: [d9b4646b-3c22-4589-8912-a68b92efcca7 HiveServer2-Handler-Pool: Thread-474]: Resetting thread name to  HiveServer2-Handler-Pool: Thread-474 
  77. 2021-09-01 11:47:47,025 INFO  org.apache.hive.service.cli.thrift.ThriftCLIService: [HiveServer2-Handler-Pool: Thread-474]: Session disconnected without closing properly.  
  78. 2021-09-01 11:47:47,025 INFO  org.apache.hive.service.cli.thrift.ThriftCLIService: [HiveServer2-Handler-Pool: Thread-474]: Closing the session: SessionHandle [d9b4646b-3c22-4589-8912-a68b92efcca7] 
  79. 2021-09-01 11:47:47,025 INFO  org.apache.hive.service.CompositeService: [HiveServer2-Handler-Pool: Thread-474]: Session closed, SessionHandle [d9b4646b-3c22-4589-8912-a68b92efcca7], current sessions:0 

從以上信息可以看到，hivesql 使用的是spark執行引擎，且 spark 作業已經執行成功了，但是在hiveser2做收尾工作時，移動臨時文件到目標目錄下時報錯了，最底層的報錯信息是 rename for src path xxx to dest path xxx returned false.

順藤摸瓜，接下來去 hdfs 上查看問題。通過 hdfs dfs -ls 發現 hdfs上目標文件已經存在了，且通過時間信息可以發現該文件是幾天前創建的，跟當前sql作業的執行沒有關系：

hdfs-destination-path

問題原因

通過上述排查分析，問題直接原因已經清晰：hive sql 底層的spark作業已經執行成功，對應的數據已經計算完畢，但在移動臨時結果文件到最終目標目錄時，因為hdfs上最終目標目錄已經存在且目標目錄下存在同名文件，rename操作無法完成，作業執行失敗。

回頭看下我們的 sql,其本質就是個對分區表某個分區的 insert overwrite, 照道理來說，應該會覆蓋目標分區對應的目錄下的數據文件(即先刪除舊的數據文件，再創建新數據文件)，但為什么這里沒有執行刪除動作呢?

這其實是因為該分區表在 HIVE 中的元數據與 HDFS 中的數據不一致。通過 show create table 和 show partitions 可以發現，在HIVE元數據中該分區表只有一個分區，但HDFS上存在該表其它分區對應的目錄和文件：

show create table

show partitions

所以問題的根本原因是：該分區表在 HIVE中的元數據與HDFS上實際的數據不一致，當執行 insert overwrite 操作時，hive 通過存儲在 metastore 中的元數據信息發現目標分區并不存在，也就不會嘗試去執行hdfs上該分區對應目錄的刪除操作了，而實際上hdfs上該分區對應的目錄和文件都是存在的，所以作業底層的 rename 操作失敗了。

問題解決

知道了問題的直接原因和根本原因，解決方法也就順理成章了：修復 hive 元數據跟hdfs實際的數據一致即可。

可以使用命令 msck repair table xxx來修復hive表的元數據：

元數據修復完畢，通過show partitions xx 發現，hive中已經可以查到原來遺失的分區。然后重新執行上述 insert overwrite 語句，作業成功執行。

問題總結

  • 當 HIVE 中的元數據與 HDFS 上實際的數據不一致時，一些正常的 HIVE SQL 操作可能會執行失敗。
  • HIVE 中的元數據與 HDFS 上實際的數據不一致的原因有很多，常見的有：
    • 使用了 HIVE 外表，由于外表的特性，在HIVE 中刪除外表或外表的某些分區時, HDFS上對應的目錄和文件仍會存在，此時就會造成不一致;(我們這里就是這種情況)
    • HIVE 的元數據和底層HDFS的數據是從其他集群同步過來的，但同步過程中有問題，比如時間沒對齊狀態不一致;(跨集群同步處理不善，會有這種情況)
    • HIVE中的元數據或HDFS上的數據有損壞和丟失。(集群運維管理不規范，會造成這種現象) 
  • 可以通過 msck repair table xxx 來修復 hive表的元數據: MSCK [REPAIR] TABLE table_name [ADD/DROP/SYNC PARTITIONS];

 

責任編輯：武曉燕 來源： 明哥的IT隨筆
HDFSHIVE元數據
相關推薦

2024-05-11 07:37:43

數據Redis策略

2017-06-20 09:42:52

網絡安全法數據隱私法網絡安全

2021-04-18 15:01:56

緩存系統數據

2018-07-15 08:18:44

緩存數據庫數據

2017-08-25 17:59:41

浮點運算C語言

2022-03-18 10:53:49

數據系統架構

2024-11-18 08:00:00

數據倉庫通用語義層商業智能

2013-12-13 14:46:55

OSPFMTU鄰接關系

2021-05-27 18:06:30

MySQL編碼數據

2020-07-20 14:06:38

數據庫主從同步服務

2018-07-08 07:38:28

數據庫緩存數據

2021-12-26 14:32:11

緩存數據庫數據

2025-04-08 09:00:00

數據庫緩存架構

2023-12-22 10:19:19

數據庫鎖機制

2024-04-07 09:00:00

MySQL

2022-03-16 15:54:52

MySQL數據format

2021-01-19 10:39:03

Redis緩存數據

2025-04-03 09:51:37

2010-06-02 10:53:28

MySQL版本

2020-04-26 21:57:46

etcd3元數據存儲
點贊
收藏

51CTO技術棧公眾號

精品国产在天天线2019| 一区二区三区|亚洲午夜| 在线最新版中文在线| 舔着乳尖日韩一区| 黑人糟蹋人妻hd中文字幕| 精品一区二区三区久久| 精品日本一区二区| 999久久久亚洲| 欧美中文在线视频| 成人黄色av网址| 久久久精品视频成人| 成人在线免费观看黄色| 欧美三级电影在线看| 欧美zozo| 色综合视频在线观看| 亚洲片在线资源| 深夜福利在线观看直播| 亚洲一区二区三区在线| 男人插女人欧美| 国产精品美女久久久久久| 欧美一级黄色影院| 欧美国产视频在线| 成人福利视频在| 亚洲国产综合人成综合网站| 成年人视频在线| 一区二区三区日本| 久草在线新视觉| 色婷婷av一区二区三区gif | 欧美日韩在线二区| 国产成人精品一区二区| 宅男在线一区| 国产又爽又黄的激情精品视频| 日韩在线欧美| 国产精品一区在线观看| 蜜桃伊人久久| 国产精品波多野结衣| 国产99久久久精品| 国产在线青青草| 日本一区二区不卡视频| 国产黄色一级电影| 色播五月激情综合网| 日本理论片午伦夜理片在线观看| 亚洲精品www久久久| 成人综合日日夜夜| 国产精品视频中文字幕91| 伊人精品成人久久综合软件| 日韩不卡一二区| 久久久国产综合精品女国产盗摄| 欧美军同video69gay| 3d欧美精品动漫xxxx无尽| 亚州欧美日韩中文视频| 午夜av一区| japanese在线视频| 亚洲品质自拍视频| 国产黄色在线观看| 日韩在线视频网站| 青青草原综合久久大伊人精品| 久久草视频在线看| 91色视频在线| 国产无套粉嫩白浆在线2022年 | 亚洲最大黄色| 精品国产伦一区二区三区观看体验 | 欧美日本一区二区在线观看| 欧美二三四区| 欧美精品在线网站| 日韩免费在线| 一区精品视频| 亚洲午夜三级在线| а√天堂8资源中文在线| 久久人人97超碰精品888| 最新成人av网站| 麻豆av免费在线| 欧美三级资源在线| 一区二区日韩| 欧美日韩在线播放一区二区| 久久精品综合网| 蜜桃视频网站在线| 欧美一级成年大片在线观看| 卡一卡二国产精品| 资源视频在线播放免费| 最近的2019中文字幕免费一页 | 午夜影院免费| 日韩精品丝袜在线| 第一社区sis001原创亚洲| 在线播放 亚洲| 天天av天天翘天天综合网 | 精品久久sese| 国产亚洲欧美一级| 在线观看免费高清完整| 国模吧一区二区三区| 青青草国产精品亚洲专区无| 中文乱码字幕高清在线观看| 中文字幕亚洲欧美一区二区三区 | 韩国一区二区电影| 精品一区二区av| 国外av在线| 国内免费久久久久久久久久久| 天堂av在线一区| 在线看的av| 97人人做人人爱| 国产91色综合久久免费分享| 黄色的网站在线观看| 国产精品女视频| 国产视频亚洲色图| 欧美www.| 一本一道久久久a久久久精品91| 红桃av永久久久| 日本福利一区| a在线视频观看| 亚洲国产私拍精品国模在线观看| 欧美在线影院| 91成人福利在线观看| 韩国19禁主播vip福利视频| 国产福利一区在线| 丝袜综合欧美| 精品亚洲一区二区三区四区五区高 | 牛牛精品在线视频| 国产91视觉| 黑人精品xxx一区一二区| 欧美成人午夜77777| 国产一级片黄色| 日韩在线视频免费观看高清中文| 麻豆国产欧美一区二区三区| 麻豆视频在线免费观看| 国产99在线播放| 在线观看日韩av先锋影音电影院| 欧美日韩激情| xxxxx国产| 97精品视频在线观看| 91麻豆免费观看| 成人精品视频在线观看| 久久国产亚洲精品无码| 久久亚洲一区二区三区四区五区高 | 日韩写真在线| 国产成一区二区| 亚洲精品中文在线影院| 亚洲精品蜜桃乱晃| hbad中文字幕| 国产精品久在线观看| 亚洲国产中文字幕| 婷婷久久综合| av成人手机在线| 欧美一区二区视频17c| 日韩美女天天操| 老司机精品视频一区二区三区| 日本天码aⅴ片在线电影网站| 日本高清不卡一区二区三| 91精品国产综合久久蜜臀| 国产日韩综合| 国产v日韩v欧美v| 欧美国产视频一区| 视频在线观看一区二区| 国产拍欧美日韩视频二区| 精品一区三区| 精品推荐蜜桃传媒| 日韩欧美一区二区视频在线播放| 精品精品国产高清a毛片牛牛| 久草这里只有精品视频| 欧美亚洲黄色| 人与动性xxxxx免费视频| 99久久精品久久久久久ai换脸| 538在线一区二区精品国产| 韩国一区二区视频| 成人51免费| 一级在线免费观看| 亚洲欧美丝袜| 九九精品视频在线| 午夜欧美视频在线观看| 日韩精品久久理论片| 国产一区二区三区黄网站| 情趣网站在线观看| 亚洲免费在线精品一区| 欧美黄色小视频| 欧日韩精品视频| caoporm超碰国产精品| 欧美日韩中文字幕一区二区三区| a天堂在线资源| 黄色免费视频大全| 91色精品视频在线| 日韩精品电影网| 日韩理论片在线| 日韩在线观看一区二区| 韩国三级成人在线| 免费a在线观看| 久久久久久av无码免费网站下载| 欧美黑人巨大精品一区二区| 一本色道a无线码一区v| 国产精品1024久久| 99re久久最新地址获取| 亚洲成人av观看| 免费黄色片在线观看| av无码久久久久久不卡网站| 国产精品高潮呻吟久久av野狼| 欧美一级精品大片| 日本一区二区成人在线| 欧美一级播放| 香蕉久久夜色精品国产更新时间| 91精品国产91久久久久久青草| 色www免费视频| 亚洲日本一区二区三区在线不卡|