Альберт Эйнштейнов: заметки с тегом it

Использование полей с экранируемыми символами в Elasticsearch

Wed, 22 Nov 2017 09:50:10 +0500

Если в наименовании полей индекса используются экранируемые символы, например, такие как ’:’, то при обращении к ним напрямую Elasticsearch вернет ошибку.

Вот такое обращение:

...
ctx._source.petrel:ProjectName = ...
...

вызовет ошибку с сообщением типа:

"unexpected token"

Для преодоления такого поведения нужно обратиться к полю через специальную переменную _source и передать наименование поля:

_source['petrel:ProjectName']

Во пример запроса на обновление текстового поля с условием:

POST petrel/_update_by_query
{
  "query": {
    "match_phrase": {
      "petrel:ProjectName": "Талахский гоизонт"
    }
  },
  "size": 10000,
  "script": {
    "source": "ctx._source['petrel:ProjectName'] = 'Талахский горизонт'"
  }
}

Обновление прошивки Garmin Nuvi

Fri, 03 Nov 2017 23:27:58 +0500

Иногда случается, что навигатор перестает загружаться. Обычно это происходит, если во время обновления прошивки произошел какой-то сбой. У меня именно так и случилось — завис Garmin Express при обновлении базы данных FM-трафика. И устройство перестало загружаться, зеленая полоска загрузчика зависает не дойдя до конца. Hard reset не помог, компьютер перестал видеть устройство, соответственно доступа к памяти не было.

В результате поиска нашел вот такое руководство.

Как выглядит процесс восстановления рабочей прошивки:

Первым делом нам потребуется прошивка для навигатора. У меня навигатор Garmin nuvi 1340. Все прошивки находятся на официальном сайте Garmin, но с ходу найти их не так просто. Поэтому воспользуемся вот таким перечнем. Он находится на сайте GPSPower и возможно понадобится предварительная регистрация на нем.
Дальше нам необходимо восстановить доступ к памяти, для этого потребуется две сторонние программы: GarminCure3 и Updater. Они идут вместе и их можно скачать с того же сайта. Доступны версии только для Windows.
Далее запускаем GarminCure3, указываем путь до уже скачанной прошивки, выбираем режим CURE и нажимаем Make firmware. Программа создаст специальную (лечебную — cure) версию прошивки, которая позволит перевести навигатор в режим Mass Storage. Другими словами, компьютер увидит устройство как внешний носитель и доступ к памяти будет восстановлен. Но это только пол дела, загрузиться с такой прошивки не получится, она нужна только для доступа к памяти.
Затем запускаем программу Updater. Если получилось ее запустить из GarminCure3, то хорошо. У меня она выдала ошибку с просьбой запуститься из командной строки и передать один единственный параметр — папку до прошивки. Если так, то смотрим куда именно GarminCure3 положил новую прошивку (в данном случае лечебную), копируем путь и запускаем Updater.exe <путь к папке с прошивкой>.
После запуска Updater выбираем там режим USB и берем в руки навигатор.
Навигатор изначально должен быть выключенным и отключенным от компьютера. Подключаем к компьютеру и сразу же зажимаем пальцем левый верхний угол тач-скрина и держим не отпуская. Через несколько секунд в программе Updater в списке устройств появится ваш навигатор. Тут же нажимаем OK, соглашаемся с перезаписью. Теперь палец с экрана можно убрать, на нем появится надпись о переходе в режим обновления.
Если сразу не получилось, то выключаем устройство, отключаемся от компьютера и повторяем. У меня тоже не сразу заработало.
Пол дела сделано. После перезагрузки устройства, компьютер его увидит и подключит внутреннюю память как внешние носители. В этот момент можно скопировать всю необходимую информацию (список избранного, какие-нибудь картинки и прочую пользовательскую информацию). Можно все это сделать вручную, а можно воспользоваться Garmin Express. Там после выбора устройства (теперь оно там появится) переходим в окно с инструментами и делаем Backup.
Затем я отформатировал и карту и внутреннюю память устройства. Разбираться какой именной файл привел к зависанию я не хотел, там куча файлов.
После форматирования необходимо обратно вернуть оригинальную (не лечебную) прошивку на устройство. Делается это аналогичным образом. Запускаем GarminCure3, указываем путь до скачанной прошивки, выбираем теперь режим ORIGINAL (не CURE), создаем прошивку. Запускаем Updater. Перезапускаем навигатор, загружаем на него прошивку, опять перезапускаем и при необходимости восстаналиваем из резервной копии сохраненные раньше настройки. Восстановиться можно также с помощью Garmin Express.
Ну и в конце через Garmin Express обновляемся до последней версии прошивок, карт и прочих настроек.

На всякий случай я сохранил все программы, инструкцию и прошивку для Garmin nuvi 1340. Архив можно взять вот здесь.

UPD: После форматирования памяти слетели все раскладки клавиатур, иконки автомобилей и языки интерфейса. Cкачать эти файлы самостоятельно через Garmin Express навигатор не хочет, поэтому вот краткая инструкция:

Раскладки клавиатур берем отсюда. Это для Nuvi 1340, но думаю ко всем моделям серии 12хх/13хх/14хх подойдут. Файлы с раскладками *.kbd нужно поместить в корень памяти навигатора в папку Keyboards. Если папки нет, то создаем руками. Готово.
Для загрузки языков интерфейса, иконок и голосов необходимо использовать программу Garmin WebUpdater. Скачать ее можно с официального сайта Garmin. Запускаем, программа сама находит обновления, выбираем, обновляем. Готово.

Автодополнение кода в PhpStorm

Mon, 27 Mar 2017 10:22:25 +0500

Иногда бывает так, что работая с проектом, на локальном компьютере нет всех необходимых библиотек. На сервере они есть, а у тебя нет. У тебя только пути в проекте к ним прописаны. Например, у меня так было с PHP-фреймворком Silex. Все его библиотеки лежат на удаленном сервере и в системе контроля версий их нет. Поэтому когда сливаешь себе копию проекта, чтобы поработать, то PhpStorm не видит Silex и автодополнение не работает. Было крайне не удобно. Но тут наткнулся на статью, в которой было изложено как это исправить.

Оказывается, достаточно скачать себе на локальный компьютер Silex в любое место и в дереве проекта в ноде «External Libraries» выбрать в контекстном меню «Configure PHP Include Paths...».

И добавить папку с фреймворком в окне «Include path». После этого PhpStorm проиндексирует содержимое папки и автодополнение чудесным образом заработает.

Синхронизация между Suunto Movescount и Garmin Connect

Sun, 19 Feb 2017 23:22:47 +0500

Появилась задача скопировать свою трехлетнюю базу тренировок из Garmin Connect во вновь созданную базу Suunto Movescount. Можно все сделать руками через экспорт/импорт тренировок в формате .TCX, но по одной — долго и неудобно.

После получасового поиска нашел замечательную утилиту MXActivityMover товарища Маркуса Рейха. Вот его беговой блог. В нем есть и полное описание работы утилиты.

Утилитка написана на Java, поэтому запускается на любой операционной системе. Для работы требуется минимум 8-я версия Java. Кстати, предназначена она не только для синхронизации между Garmin и Suunto, но и между Polar и Suunto.

После запуска MXActivityMover идем в настройки и указываем учетные данные каждой из сетей.

Затем выбираем нужный нам режим экспорта/импорта — единичный или массовый, через обменный файл или напрямую, временной интервал выборки. Дополнительно в настройках можно указать алиасы для видов спорта из разных сетей, чтобы более точно произвести синхронизацию.

При первой попытке создать Move появится окно с запросом разрешить приложению доступ к учетной записи Movescount.

Для этого заходим в профиль Movescount в раздел «Подключения».

И даем приложению доступ.

Затем пробуем синхронизировать еще раз, все должно заработать. Выбранные тренировки Garmin Connect попадут в виде move в Suunto Movescount с сохранением всех параметров.

Утилита работает не очень стабильно и может выдавать неочеловеченные ошибки. Помогает перезапуск.

Столицы мира

Sat, 15 Oct 2016 16:39:05 +0500

Я очень люблю географию и одной из моих любимых игр всегда была «Города». Один игрок называет город, второй должен назвать другой город на последнюю букву предыдущего и т. д. Игру можно было усложнить, называя только столицы государств.

Чтобы всегда иметь под рукой список всех столиц, я написал робота, который публикует новые столицы, а также другие города в Twitter @albert_depperte.

Еще было написано приложение для операционных систем iOS и Android, но оно пока недоступно, ждет своего времени.

Из-за особенностей движка блога, не смог найти нормальный способ вставить php-код внутрь записи, поэтому последние опубликованные роботом города находятся под записью, чуть ниже. Сорян.

Установка карт OpenStreetMap (OSM) в навигатор Garmin через MacOS

Wed, 08 Jun 2016 07:57:25 +0500

Существуют свободно распространяемые карты формата OpenStreetMap. Например, вот здесь есть карты на все регионы России и несколько других стран.

Для установки таких карт на устройства Garmin требуется их преобразование в формат .gmapi. Сделать это на Windows достаточно просто, а вот на MacOS не совсем.

Раньше я преобразовывал карты на Windows, а затем копировал их на Mac и заливал их на Garmin. Но недавно нашел очень полезную программку на MacOS JaVaWa MapConverter. Кидаешь на нее папку с картами OSM, а она тебе обратно карту в формате .gmapi, а может и сразу установить ее.

Там на сайте есть еще несколько полезных программ для работы с картами, вдруг пригодятся.

Поиск по всем исходным кодам в PL/SQL

Thu, 14 Apr 2016 13:26:55 +0500

Иногда необходимо проверить, а не используется ли та или иная процедура в какой-нибудь другой процедуре. Или, допустим, необходимо найти определенную подстроку сразу во всем объеме пользовательского кода на PL/SQL.

Для это есть представление all_source:

SELECT * FROM all_source WHERE LOWER ( text ) LIKE  '%' || LOWER ( 'p_get_nearest_objects' ) || '%'

Несколько подсказок для Delphi

Wed, 09 Sep 2015 02:05:24 +0500

Несколько замечательных подсказок при работе с Delphi IDE:

Чтобы вызвать список всех предупреждений в проекте (как при первой компиляции, или после билда, или после удаления всех dcu-файлов), нужно в меню Project выбрать меню Syntax Check. И все!

Иногда при компиляции появляется предупреждение следующего вида: Unit ’Vcl.FileCtrl’ is specific to a platform. Чтобы его убрать нужно в файле, на который ругается компилятор, после секции interface подставить вот такой хинт: {$WARN UNIT_PLATFORM OFF}.

Для уменьшения размера exe-файла можно в любом месте dpr-файла подставить хинт: {$SetPEFlags IMAGE_FILE_RELOCS_STRIPPED}, предварительно подключив модуль Windows в секцию uses.

Ошибка ORA-03113 при использовании ODAC и Variant

Mon, 15 Dec 2014 08:47:36 +0500

Неожиданно столкнулись с проблемой появления ошибки ORA-03113: end-of-file on communication channel при использовании компонентов ODAC в приложениях, написанных с помощью Delphi XE5. Режим Direct Mode, база данных Oracle 11g, вызов серверных хранимых процедур.

По-русски, это означает, что была прервана связь между клиентом и сервером. Ошибку можно было исправить только переподключением. Непонятным оставался механизм ошибки и соответственно ее источник.

После нескольких дней поиска выяснилось следующее. Среди входных параметров вызываемой хранимой процедуры был один параметр типа VARCHAR. В Delphi в этот параметр данные передавались из переменной типа Variant. Тип Variant удобен тем, что может принимать значение NULL, чего не могут типы Integer или String.

Так вот, при передачи параметра в компонент TStoredProc тип Variant передавался без всяческих преобразований. Вот так:

parameters.Add ( _provider.CreateParameter ( 'datum_level_in', section.DatumLevel ) );

Как раз это и являлось причиной ошибки. По так и невыясненной причине вызов метода Execute напрочь валил текущую сессию.

Достаточно было добавить VarToStr () и все заработало. Замечу, что такое поведение было замечено лишь в том случае, когда реципиентом был именно тип VARCHAR. С типом NUMBER такого не наблюдалось.

parameters.Add ( _provider.CreateParameter ( 'datum_level_in', VarToStr ( section.DatumLevel ) ) );

Изменение данных в гриде (GridView) в SharePoint в связке с БД Oracle

Thu, 02 Oct 2014 09:52:35 +0500

Есть SharePoint 2007, есть БД на Oracle.

Выводим данные на странице с помощью asp:GridView, к базе данных подключаемся через asp:SqlDataSource.

SqlDataSource:

<asp:SqlDataSource
    runat="server"
    id="SqlDataSource1"
    ProviderName="System.Data.OracleClient"
    ConnectionString="Data Source=IP:PORT/SID;Persist Security Info=True;User ID=sharepoint;Password=sharepoint;Unicode=True"
    ConflictDetection="OverwriteChanges"
    SelectCommand="SELECT id, a, b, c FROM abc"
    UpdateCommand="UPDATE abc SET a = :A, b = :B WHERE id = :ID">
            
    <UpdateParameters>
        <asp:Parameter Name="ID" Type="Int32" />
        <asp:Parameter Name="A" Type="DateTime" />
        <asp:Parameter Name="B" Type="DateTime" />
        <asp:Parameter Name="C" Type="String" />
    </UpdateParameters>
            
</asp:SqlDataSource>

GridView:

<asp:GridView runat="server" id="GridView1" DataSourceID="SqlDataSource1" AutoGenerateColumns="false" DataKeyNames="ID" AutoGenerateEditButton="True">
    <Columns>
        <asp:commandfield ShowDeleteButton="True" ShowEditButton="True" Visible="false"></asp:commandfield>
        <asp:boundfield DataField="ID" HeaderText="ID" ReadOnly="True" SortExpression="ID" Visible="False"></asp:boundfield>
        <asp:boundfield DataField="A" DataFormatString="{0:d}" HeaderText="ACaption" SortExpression="A"></asp:boundfield>
        <asp:boundfield DataField="B" DataFormatString="{0:d}" HeaderText="BCaption" SortExpression="B"></asp:boundfield>
        <asp:boundfield DataField="C" HeaderText="CCaption" SortExpression="C"></asp:boundfield>
    </Columns>

    <HeaderStyle ForeColor="#FFFFFF" BackColor="#666666" BorderColor="#666666" />
    <RowStyle CssClass="light"/>
    <AlternatingRowStyle CssClass="dark"/>    
</asp:GridView>

Все работает прекрасно, пока не собираемся изменять данные в этом же гриде. При попытке изменить данные выдается ошибка ORA-01036: illegal variable name/number. Всякие вразумительные попытки ее побороть ни к чему не приводят.

Оказывается, чтобы работал update необходимо, чтобы в тексте UpdateCommand участвовали все те же столбцы, что и в SelectCommand. Если будет не хватать хотя бы одного столбца — запрос не проходит. Соответственно, изменения претерпевает только текст UpdateCommand в SqlDataSource. И все начинает работать.

Было так:

UPDATE abc SET a = :A, b = :B WHERE id = :ID

Нужно так:

UPDATE abc SET a = :A, b = :B, c = :C WHERE id = :ID

Как изменить такое поведение — непонятно.

Смена пути к Java в Oracle SQL Developer 4.0

Fri, 19 Sep 2014 07:36:36 +0500

Последние версии Oracle SQL Developer (4.0 и далее) требуют минимум JDK 7. Чтобы явно указать SQL Developer где находится JDK необходимо указать этот путь в конфигурационном файле product.conf (параметр SetJavaHome):

Для Windows XP: «C:\Documents and Settings\Application Data\sqldeveloper\1.0.0.0.0»
Для Vista и выше: «C:\Users\AppData\Roaming\sqldeveloper\1.0.0.0.0\»

Неработающие breakpoints в Delphi XE5

Mon, 15 Sep 2014 09:06:23 +0500

Иногда бывает так, что при отладке все breakpoints становятся зелеными, и где бы ты их не поставил, они всегда игнорируются.

Лечится следующим образом:

В дереве проектов жамкаем правой кнопкой мыши и выбираем пункт «Clean» или «Clean All».
Далее пересобираем проект, делая «Build» (Shift+F9).
Запускаем. Все работает.

Первый и последний день месяца в PL/SQL

Tue, 13 May 2014 15:47:09 +0500

Недавно наткнулся на необходимость написать запрос на PL/SQL, который выводил бы все записи за текущий месяц, причем захватываю пару дней до начала месяца и пару дней после его окончания. Например, с 29.04 по 02.06.

Оказалось, что в PL/SQL есть функция LAST_DAY ( DATE ). Она выдает последний день месяца переданной ей даты. Но почему-то нет функции FIRST_DAY ( DATE ) — получения первого дня месяца. Ее роль выполняет вот такое выражение:

TO_DATE ( TRUNC ( DATE, 'MM' ), 'DD.MM.YYYY' )

Казалось бы, почему не сделать функцию FIRST_DAY?

В итоге:

первый день месяца: TO_DATE ( TRUNC ( DATE, ’MM’ ), ’DD.MM.YYYY’ );
последний день месяца: LAST_DAY ( DATE ).

А условие запроса с двумя днями соответственно выглядит вот так:

...AND a.request_date BETWEEN ( TO_DATE ( TRUNC ( SYSDATE, 'MM' ), 'DD.MM.YYYY' ) - 2 ) AND ( LAST_DAY ( SYSDATE ) + 2 )

Проблема обновления файлов при развертывании (deployment) приложения на эмуляторе iOS (Delphi XE5)

Sat, 15 Feb 2014 09:52:49 +0500

Про разработку приложений iOS на Delphi XE5.

В блоге Павла Алхимова я задал такой вопрос:

«Небольшая проблема с настройками deployment при запуске проекта на эмуляторе iOS. В проекте использую базу данных SQLite, создал файл, все хорошо, под Windows 7 работает. Пробую залить на эмулятор — все нормально, работает. Далее в ходе разработки немного меняю структуру БД (добавляю пару таблиц и представление), соответственно меняется сам файл БД. Запускаю под Windows 7 — все нормально, заливаю на эмулятор — не работает, точнее работает, но файл БД остался старым. То есть при очередном deployment он не подтянулся. Почему так? Есть какие-нибудь настройки, флаги или т. п. о которых я не знаю? Единственное, что пришло в голову — руками залезть в скретч-директорию эмулятора и почистить этот файл, тогда при следующем запуске он копируется.»

И получил вот такой ответ от Павла:

«Именно так, если старое приложение не было удалено. Новая база лежит в пакете приложения и пытается при старте приложения извлечься в песочницу — а место уже занято! Поэтому приложение либо удалять нужно, либо в самом приложении удалять меняющийся файл. Я, например, так и поступаю — сделал команду „обновить данные“, которая убивает файл данных и останавливает приложение. При следующем старте недостающий файл будет извлечён из пакета приложения и пойдёт в работу.»

Вот так.

Перестала запускаться среда Delphi

Sat, 15 Feb 2014 09:40:51 +0500

Столкнулся с такой проблемой впервые при работе с Delphi XE5. При очередном открытии проекта неожиданно было выдано окно с вопросом: «Включить IDE при следующем запуске Delphi?». Совершенно не подумав и до конца не осознав нажал «нет». Хотя проверить, что было бы если выбрал «да», так и не удалось пока. В итоге Delphi перестала запускаться. Повисит в диспетчере задач секунд 10 и пропадает.

Переустановки, repair и прочие танцы не помогают.

Стал разбираться... Оказывается это проблема известна еще с версии 2010. Вот пост, который мне собственно и помог: http://www.cyberforum.ru/delphi-beginners/thread64194.html

Там говорится о том, что достаточно удалить ключ реестра (это для версии 2010):
HKEY_CURRENT_USER\Software\CodeGear\BDS\7.0\Disabled IDE Packages\$(BDS)\Bin\delphide140.bpl

Для версии XE5 ключ такой:
HKEY_CURRENT_USER\Software\Embarcadero\BDS\12.0\Disabled IDE Packages\

Удалением одного ключа не обошлось. У меня для версии XE5 пришлось удалить весь раздел Disabled IDE Packages. На машинах, где таких ошибок не возникало такого раздела и нет вовсе.

Изменение способа хранения BLOB-поля в уже существующей таблице Oracle

Sun, 02 Feb 2014 22:30:38 +0500

Долго не мог найти способ изменить способ организации BLOB-поля на формат SecureFile в Oracle. Обходился всегда копированием таблицы.

Теперь вот нашел. Заодно задаем дополнительные опции хранения, такие как дедупликация, сжатие и кэширование.

ALTER TABLE ss_file_t3d MOVE LOB ( preview_summary ) STORE AS SECUREFILE ( TABLESPACE seis_blob DEDUPLICATE COMPRESS CACHE );

Красота!

Sharepoint 2010. Настройка прокси. RSS webpart.

Tue, 28 May 2013 11:21:48 +0500

Столкнулся с проблемой проксирования запросов web-части просмотра RSS-ленты на Sharepoint 2010. Точнее с отсутствием проксирования. Если на страницу добавить web-часть просмотра RSS и сервер Sharepoint спрятан за прокси, то с первого раза она работать не будет. Начал искать решение. Гугл выдает практически одни и те же варианты решения, нужно в web.config добавить следующее:

<defaultproxy usedefaultcredentials="true" enabled="true">
<proxy usesystemdefault="true" proxyaddress="http://proxyaddress:port" bypassonlocal="true" />
</defaultproxy>

Только это мне не помогло, потому как прокси не допускает анонимных соединений. Иными словами нужна была принудительная авторизация. И здесь началось самое интересное. О том как передать логин и пароль от имени Sharepoint нигде не сказано, даже на MSDN, может плохо искал конечно. В итоге, перепробовав все предложенные варианты совершенно случайно наткнулся вот на этот блог.

И вот там-то и узнал, что передать имя пользователя и пароль можно очень просто. Необходимо в тот же файлик в секцию identity добавить следующее:

<identity impersonate="true" username="Domain\UserName" password="Password" />

UPD. Если нужно заставить Sharepoint авторизоваться во вне тем пользователем, который к нему подключился, то свойство impersonate нужно поставить в false.

Большое тебе спасибо, Ricardo Magalhães!

Необязательный закрывающий тег PHP

Thu, 11 Apr 2013 15:49:35 +0500

Проводя очередной Code Inspection в превосходной среде JetBrains PhpStorm 6.0 наткнулся на следующий результат.

В файлах, где содержался чистый PHP-код (без примеси HTML) на строке с закрывающий тегом «?>» анализатор выдал Redundant closing tag. Что означает «Избыточный закрывающий тег».

Полез читать. Оказывается, теги действительно не рекомендуется закрывать, поскольку если случайно после тега оставить, например, пробел, то он соответственно попадет в выходной поток и породит ошибку headers already sent.

Для меня это было открытием, я всегда их ставил дабы выдержать «правильное» оформление кода. На всяческих форумах пишут, что мол это указано в каждой книжке для чайников. Я открыл свою книжку и не нашел там такого. Большую часть знаний по PHP были получены не из книжек, а из интернета. И там я такого не встречал.

Вот ссылка на php.net по этому поводу.
И выдержка:

«Если файл содержит только код PHP, предпочтительно опустить закрывающий тег в конце файла. Это помогает избежать добавление случайных символов пробела или перевода строки после закрывающего тега PHP, которые могут послужить причиной нежелательных эффектов, так как PHP начинает выводить данные в буфер при отсутствии намерения у программиста выводить какие-либо данные в этой точке скрипта.»