aws-kinesis-firehose

5熱度

1回答

增量S3文件，我做了如下管道：任務管理器 - > SQS - >刮板工人（我的應用程序） - > AWS流水 - > S3文件 - >星火 - >紅移（？）。有些事情我試圖解決/改進，我會很樂意指導：刮板可能得到複製數據，並再次刷新他們流水，這將導致火花的DUP。我應該在開始計算之前使用Distinct函數在火花中解決這個問題嗎？我並沒有刪除S3處理過的文件，所以數據越來越大。這是一個很好

0熱度

1回答

在跨平臺Unity3d應用程序中通過Facebook進行身份驗證

我正在Unity3D（版本4.3.4）中開發一款遊戲，我想要在Android和iOS平臺上構建移動平臺。我正嘗試通過Facebook進行登錄。我已經下載並將Facebook SDK for Unity（5.0.4）導入到我的Unity項目中。我還通過facebook sdk（FB dev網站上的註冊應用程序，將應用程序ID添加到統一項目併爲FB.Login編寫了代碼，並在Facebook SDK

0熱度

1回答

iphone上的應用程序兼容性

我是iphone應用程序開發新手。我想開發Iphone應用程序。我需要使用哪個版本，並且應該支持運行舊版本和新版本的Iphone。哪個設備是最好的用於測試應用程序，如2G，3G，3GS預先阿斯旺

0熱度

1回答

在shell_exec和at命令中使用wget？

我一直在努力shell_exec PHP函數和在Linux命令2天。要長話短說，這個工程： shell_exec('/usr/bin/at 09:32 <<EOF touch /var/www/website/hello.txt EOF' ); 這並不： shell_exec('/usr/bin/at 09:32 <<EOF wget -O - -q -t 1 "

0熱度

1回答

如何更改cakephp站點中實現的WordPress博客密碼

我已經整合了一個wordpress博客和cakephp站點，功能是當我登錄我的主站點時，我自動登錄到WordPress博客。但是，當它得到上主CakePHP的網站改變所以我有一個問題，在WordPress的登錄過程中密碼被更新在蛋糕上的PHP站點，如何更新WordPress的數據庫中的密碼，請幫助我解決這個問題。在此先感謝。

0熱度

1回答

什麼WinForm控件綁定列表（T）？

我一直致力於爲項目保留面向對象的東西。目前，我正在使用.DLL，它將所有應用程序的類提供給充當表示層的WinForms項目。例如，我的.DLL將返回一個SortableBindingList（Of T）在窗體中進行編碼。 SortableBindingList（Of T）來自here。我們假設一個SortableBindingList（Of Product）。假設.DLL的功能Services.

1熱度

1回答

將位圖或圖標添加到DataGridViewComboBoxColumn中的單元格

我想要一個包含3個小圖標或位圖的組合框，我不介意哪個。我曾嘗試下面的代碼添加1個圖像： DataGridViewComboBoxColumn statusColumn = new DataGridViewComboBoxColumn(); Icon greenIcon = new Icon("../../Resources/green_tick.ico"); Bitmap bitmapGre

7熱度

1回答

汽車線kinesis流kinesis firehose？

我將數據發佈到由某些消費者處理的kinesis流。我希望發佈到流中的原始數據也存儲在s3中。是否有可能將kinesis流自動連接到kinesis流水線，還是需要直接發佈到kinesis消費者的流水線？

5熱度

1回答

是否有使用單個流水傳輸流將數據寫入多個Redshift表的問題

我將一些json數據傳遞給流水傳輸流，最終這些流將保存到Redshift表中。對於我的用例，我希望數據存儲在不同的表中。我是否爲不同的表創建不同的傳送流？如果我這樣創建它，S3中將會出現數據重複，因爲數據必須通過S3才能使用Firehose傳送流將數據推送到Redshift。

2熱度

3回答

串連S3文件使用AWS流水

時，我有一個AWS Kinesis流水流將數據放入S3具有以下配置： S3 buffer size (MB)* 2 S3 buffer interval (sec)* 60 ，一切工作正常。唯一的問題是Firehose爲每個數據塊創建一個s3文件。（在我的情況下，每分鐘一個文件，如截圖中所示）。隨着時間的推移，這是很多文件：每天1440個文件，每年525k個文件。這是很難管理（例如，如